Perception(s) numérique(s) - Shin Kim

Touch Gesture Reference Guide
2010
www.lukew.com
88. Ingénieur, informaticien et co-fondateur
de l’IxDA (Interaction Design
Association)
89. Conception, Illustration par Craig
Villamor, Dan Willis & Luke Wroblewski,
La version mise à jour le 26 juin 2011
www.lukew.com/ff/entry.asp?1071
Il semble qu’aujourd’hui nous soyons globalement
habitués à l’ensemble des commandes numériques, elles
ne nous surprennent plus. Par exemple, je me réfère à
Touch Gesture Reference Guide crée par Luke Wroblewski 89
et ses collaborateurs, un catalogue de gestes utilisés sur une
interface tactile. 90 Lors d’une manipulation de l’objet dans
le numérique, les mouvements des doigts sont distincts
et la surface tactile les comprend. Les doigts restent
appuyés et on tire pour déplacer un objet sur l’écran, ou bien
on écarte les deux doigts pour faire un zoom avant. Il existe
un premier degré de personnalisation avec la surface tactile,
parce que chacun peut associer son geste à une commande
numérique. Sur la plateforme de MacOS par exemple, en
faisant écarter mes quatre doigts, je peux agrandir l’objet
affiché, ou bien me débarrasser de l’objet en premier plan
pour dévoiler les éléments placés derrière.
En 2010, Kinect de Microsoft a ouvert une première voie
vers l’interaction avec le corps entier : Il s’agissait de transformer
la caméra en détecteur de mouvement corporel. Initialement
développé pour être utilisé sur une console de jeux
vidéo, le joueur peut désormais manier un objet sur l’écran
sans passer par une manette. Alors que le mouvement du
joueur est interprété sous forme d’images bidimensionnelles,
le principe de Keynect est intéressant parce que ce sont
des mouvements intuitifs qui deviennent des commandes
numériques. Le corps interagit directement avec l’objet.
En 2012, LeapMotion, une technologie de contrôle gestuel
de la main, emmène la gestuelle encore plus loin : un petit
détecteur équipé de LEDs infrarouges permet d’interpréter la
gestuelle de la main en trois dimensions. Avec cette technologie,
on peut imaginer une expérience où on manipule un
objet sur l’interface, comme si cet objet était présent matériellement.
Il n’y a pas d’obligation de mimer une telle gestuelle,
mais chacun a la possibilité de générer sa propre gestuelle pour
interagir avec l’objet. Aujourd’hui, on commence à croiser
ce principe d’émission infrarouge avec d’autres technologies
dans différents secteurs. La conduite d’automobile en est
un exemple. Ainsi, Harman Industries, un fournisseur de
technologie automobile, développe un système qui reconnaît
les gestes et les expressions faciales du conducteur pour
les associer avec des fonctionnalités liées au confort de la
conduite. Par exemple, le bouton volume n’est plus à tourner,
mas le conducteur peut choisir un geste avec trois doigts pliés,
pour distinguer des autres commandes de contrôle. Selon un
article de Dailymail paru en juillet 2012 91 , le projet est déjà en
phase de démonstration en Europe.
Il existe aussi désormais des dispositifs portatifs, comme la
bague connectée Nod de Nod Labs, qui détecte les mouvements.
Dévoilée en 2014, cette bague laisse envisager les possibilités
de relation à l’objet connecté qui s’ouvrent à nous. Le porteur a
deux bagues aux index ; le système de captation est développé
pour reconnaitre tous les mouvements effectués par les
mains et les bras. Il permet de contrôler l’ensemble des
objets connectés environnants d’un simple geste intuitif.
Aujourd’hui, il est surtout conçu pour le marché du jeu vidéo :
certains jeux d’action demandent une liberté et une fluidité
du mouvement des mains qui se visualisent sur l’écran. Si ce
processus d’interaction était appliqué à une expérience plus
subtile de l’objet dans le numérique, il est possible d’imaginer
une infinité de scénarios répondant aux envies de l’utilisateur.
L’exemple du système Myo, le brassard de contrôle par gestes
évoqué dans la première partie, est représentatif de cette
tendance à la personnalisation de la commande, parce que la
reconnaissance de la gestuelle est basée sur une analyse fine du
mouvement musculaire. L’ensemble des nouvelles technologies
numériques contribue ainsi à la construction d’une nouvelle
génération de la gestuelle, l’objet dans le numérique s’adaptant
aux capacités et aux habitudes personnelles de chacun.
90. « New gadget that controls a car’s
functions with just a wink or a nod of
the driver’s head », Dailymail, 23 juillet
2012
www.dailymail.co.uk/sciencetech/
article-2177329/New-gadget-controls-cars-functions-just-wink-noddrivers-head.html,
page consultée le
12.05.2015
90 91