Après la réalité augmentée sur un t-shirt, voici un nouveau mode d'interaction qui pourrait bien être utilisé sur des interfaces à la Minority Report dans un an ou deux.

Le principe de ce projet est, à partir de reconnaissance de forme, de détecter une main, ainsi que sa position et son orientation, ce qui est ensuite utilisé pour faire de la réalité augmentée. Le plus bluffant dans cette histoire est surtout la difficulté à reconnaitre une main, et son orientation. Pour peu que la main soit un peu fermée, un peu tordue, ce à quoi s'ajoutent les problèmes de luminosité et de capture, c'est ici une belle prouesse technique.

Ce qu'explique la vidéo, c'est que ce n'est pas la main mais la pointe des doigts qui est détectée, en appliquant en premier lieu un filtre sur l'image capturée pour trouver l'objet en premier plan, puis après une détection de contour, le programme repère les extrémités des doigts. Enfin après avoir obtenu la position de chaque doigt et du poignet, le software calcule la position et l'orientation la plus probable de la main.

Encore mieux, la main est repérée aussi bien à l'endroit qu'à l'envers, ce qui permet de garder une position de la main plus confortable, et d'avoir des interactions différentes selon le sens de la main. Pour plus d'information, vous pouvez aller visiter la page du labo de l'université de Santa Barbara, CA, ou le PDF complet si vous voulez faire la même chose chez vous.

HandyAR (Markerless Augmented Reality from UCSB) [Youtube]

Main. Instrument singulier se trouvant à l'extrémité d'un bras humain, et souvent enfoncé dans la poche de quelqu'un d'autre.

Ambroise Pierce

Source : Graphism.fr