Det började med Nintendo Wii och sedan kom Microsofts Kinect.

De är rätt olika, men båda har förmågan att uppfatta rörelser i fria luften och översätta dem för datorn.

Snart kommer Leap, en liten dosa som ska säljas för 70 dollar. Leap har, enligt förhandsreklamen, utvecklats av en expert på flödesdynamik. Den håller reda på varenda rörelse du gör med fingrarna. Allt enligt förhandsreklamen alltså.

Microsoft har fler knep. Två nya uppfinningar är Humantenna och Soundwave. Humantenna mäter hur användaren rör sig i de elektromagnetiska fält som alltid omger oss. Mätresultaten överförs till en dator som tolkar dem som rörelser och gester. Soundwave sänder ut en ohörbar ton och mäter hur den påverkas av rörelser i närheten av högtalaren. Datorer har redan högtalare och mikrofon, så det behövs ingen extra utrustning.

Apple höll sig till två dimensioner på Iphone och även på Ipad. För första gången på en kommersiell produkt kunde man vidröra bildskärmen med två eller flera fingrar utan att bildskärmen tappade koncepterna. Vi lärde oss snabbt att zooma in genom att knipa med fingrarna och att byta bild genom att svepa.

(Forskaren Jeff Han hade visat upp något liknande 2006 på föreläsningsserien Tedtalks – tydligen utan att inkräkta på Apples patent.)

Pekskärmarna har blivit en del av vardagen. Det talas redan om barn som försöker bläddra i tidningar genom att svepa med fingrarna och irriterat undrar varför inget händer.

Svenska Interactive Institute har utvecklat ett ”virtuellt obduktionsbord”. Det har skett i samarbete med visualiseringscentret i Norrköping och medicinska visualiseringscentret CMIV i Linköping. Obduktionsbordet marknadsförs av Sectra. Medicinstuderande kan vända och vrida på en död kropp, zooma in för att se detaljer och ”klä av” och ”klä på” lager av vävnader.

Här får gesterna dock hålla sig på skärmens yta.

Är nästa steg att lyfta upp åtbörderna i tredje dimensionen?

Datorspel är förstås först med att använda tekniken. Men det finns mer påtagligt nyttiga tillämpningar.

Kirurger kan till exempel vilja styra en dator utan att ta i den.

Så i maj inleddes försök i London med ett geststyrt användargränssnitt, kört på Microsoft Kinect. Mitt under operationen kan kirurgen, även om hon är blodig och kladdig om händerna, ta fram röntgenbilder på en datorskärm, bläddra och zooma.

Problemet, skriver New Scientist, var att det är mycket som rör sig under en operation. Någon annan än kirurgen kan göra en rörelse som Kinect tolkar som en instruktion.

Därför kombinerades gestigenkänningen med taligenkänning. Samtidigt som kirurgen gör gesten för ”zooma” ska hon säga ”zooma”.

Rörliga bilder från patientens insida visas i realtid och kirurgen kan välja bildvinkel och zooma.

Nästa utmaning är att frigöra användarna från ingrodda vanor. Med mus och pekare måste man ju göra en sak i taget. Med ett gestigenkännande användargränssnitt kan man i princip göra flera saker samtidigt, ungefär som när teckenspråkstalare skapar uttryck genom att göra ett tecken med ena handen och samtidigt ett annat tecken med den andra. Problemet är att hitta tillämpningar som förstår vad man menar.