← Somlai-Fischer archive

Kitchen Budapest

2007 Nyár / Summer — the lab’s first catalogue, powered by Magyar Telekom

Multi Touch Wall

Multi Touch Wall
■ Participating researcher / Résztvevő kutató ■ Bácsi László, Bagi Tamás, Halácsy Péter, Németh Péter, Papp Gábor, Samu Bence, Somlai-Fischer Szabolcs, Szalai András

A Kibu közösségi érintőképernyő egy 2 x 1 méteres interaktív tábla, melyen kezünkkel, ujjainkkal tudunk, akár egyszerre többen is egy vetített tartalommal kapcsolatba lépni. Lehet rajta majd kézzel festeni, csoportban térképen navigálni, de elsősorban azért készül el, hogy kifejleszthessünk új és innovatív tartalmakat melyek kihasználják a közös, többujjas interakciót.

Miért készült?

A technológia az utóbbi időben az Apple iPhone és a Microsoft Surface miatt a figyelem középpontjába került, de már a '80-as évek óta foglalkoznak ehhez kapcsolódó kutatásokkal és fejlesztésekkel. A mi célunk egy olyan prototípus kifejlesztése, amelyen újszerű felhasználói interakciókat tudunk vizsgálni és kifejleszteni. Ezek átalakíthatják, ahogyan a mobiltelefonunkkal vagy a nagy köztéri interaktív felületekkel kommunikálunk.

Hogyan működik?

Minden felhasznált alkatrész könnyen és olcsón beszerezhető, és ezekből egyszerűen összerakható egy kisebb prototípus. A technológia az infravörös fényt használja fel az ujjak érintési felületének követésére, melyet egy kamerán keresztül a számítógép dolgoz fel. Használata ugyanolyan egyszerű, mint egy érintőképernyő kezelése, sőt legtöbb esetben az újszerű intuitív interakcióknak köszönhetően még egyszerűbb is.

Jelenlegi állapot

Két prototípus készült el, egy kisebb A4-es lapnak megfelelő méretű, és a 2×1 méteres fal. Ezeken egyszerű proof-of-concept alkalmazások működnek, mint amilyeneket a megnyitón is lehetett látni. A további kutatásokhoz ki kell fejlesztenünk egy stabilabban működő rendszert. Ezután következő lépésként a ZUI és az Animata KIBU-s projektekhez implementálunk multitouch interfészt.

The Kibu multi-touch-wall is a 2 by 1 metre touch-sensitive surface, where one can interact with the projected media with one's fingers, hands, as well as multiple users at one time. We programmed a set of simple applications, with which one can paint with the hands, or navigate a mind-map collaboratively, for instance. We have built this interface so that we can develop innovative and new kinds of contents for such interfaces, which make use of collective interaction.

Our aim

Apple iPhone and Microsoft Surface have recently brought this technology into the spotlight, though research and development in connection with multi-touch have been around since the '80s. Our aim is to create a prototype through which we can research and develop new modes of users' interaction. These interfaces have a great transforming potential for larger scale collaborative public interfaces, as well as for cell phones.

How does it work?

Components can be obtained easily and at little cost, and one can easily

two hands manipulating/rotating a framed picture, arrows pointing left and right
large engraving-style pointing hand with index finger extended, cuff at wrist

megtört fénysugár

visszavert fény

infra LED

fekete-fehér kamera infra szűrővel

kép, amit a kamera lát

build a small prototype from them. The touch of fingers on the surface is tracked by infrared light, which is transmitted through a camera and processed by a computer. The use of the multi-touch-wall is as simple as handling a touch screen, or even simpler with the help of this new kind of intuitive interaction.

Current state

We have made two prototypes: one is the size of an A4 paper, and the other is a 2 by 1 metre wall. On these surfaces, one can run simple proof-of-concept applications like those you could already see at the opening. As for further research, we must improve this touch-sensitive system. The next step will be the implementation of a multi-touch interface for our KiBu projects ZUI and Animata.

thick black horizontal scribble strokes across top of page
FTIR multi-touch schematic: acrylic panel edge-lit by infra LED, refracted/reflected light rays, grey camera view cone toward black-and-white camera with infra filter; HU labels megtört fénysugár, visszavert fény, infra LED, fekete-fehér kamera infra szűrővel
infrared camera view of a hand, five fingertips glowing white, circled in green; caption 'kép, amit a kamera lát'

Működés

MS Multitouch laptop

Egyebek

HP Multitouch Wall WSJ D5

iBar

MPX

Warcraft 3 Multitouch

Multitouch screen olcsón — Bácsi László

Microsoft Surface

- 5-10e dollár
- 2007 év végén kerül forgalomba
- csak hoteleknek, kaszinóknak, stb.

reactable

cluster of tiny thumbnail slides at top (zoomed-out ZUI overview)
'Működés' cluster: circuit sketch, instructables-style step page, wooden rig photo
HP Multitouch Wall WSJ D5 video thumbnails, two stacked stills
MS Multitouch laptop video still with finger touching screen
iBar video thumbnail with blue light streaks
MPX document/screenshot thumbnail
Warcraft 3 Multitouch video still, hand over green projected game
'Multitouch screen olcsón' green title slide credited Bácsi László
Microsoft Surface cluster: product render of table, demo videos, interview stills, price/availability notes in Hungarian, exploded diagram
reactable cluster: fiducial marker sheet, purple round-table demos, tangible pucks on glowing table

Lehetőségek

Animata

Interakció tervek

Multitouch történelem

Jeff Han

- 2005
- FTIR technológia elterjesztése
- otthon összerakható megoldás

Apple iPhone

- 2007 nyara
- multitouch csak zoomolásra

'Lehetőségek' cluster: woman touching interactive wall, hand-on-projection stills
Animata cluster: skeleton rig arm animation, pink teeth/mouth rig screenshot
'Interakció tervek' sketches: drawn interaction storyboard frames
'Multitouch történelem' cluster: dense article/webpage collage
Jeff Han cluster: FTIR demo stills (thermal hand image, map table, dark stage demos) with 2005 FTIR notes
Apple iPhone cluster: hand holding iPhone, five product screens row, 2007 notes, demo video stills
small video stills right of iPhone cluster (room corner, UI close-ups)
man in green shirt pressing both palms on multi-touch wall, white particle burst
close-up of two hands on wall with particle trails
large particle cloud on wall, man reaching from right, second person silhouetted left
single hand touching wall, diagonal particle streak
hand sweeping through dense particle field, close-up
two hands approaching particle cloud from both sides, close-up
woman with camera strap raising arm to wall, second woman behind, laptop on red table in background
woman touching particle burst on wall with both arms

Fészek rajzolása zuhanó csirkéknek

Hang generáló interfész

/ drawing nests for falling chicken

/ Interface generating sounds

man drawing dark nest blobs among clouds on projected sky, chicks falling
man in glasses and shirt drawing nests, yellow chicks clustered on blobs
older man drawing green nest shape catching chicks, clouds around
long-haired woman drawing tall wavy green vines, chicks and clouds
silhouetted head and hand before pink-purple gradient screen with radial hand-print mandala (sound interface)
silhouetted man gesturing before green-yellow-red gradient screen
woman before white screen with small dotted circle (sound interface)
woman spreading both hands around radial hand-print burst on light screen

Restored from the original Kitchen Budapest project site — texts and images as published.