Des ingénieurs de Microsoft travaillent sur des mains virtuelles qui reproduisent avec une grande précision les gestes effectués par l’utilisateur, à travers un casque de réalité virtuelle (VR) ou directement sur l’écran de l’ordinateur.

Bill Gates a peut-être eu tort sur beaucoup de choses, mais il avait fait la prophétie il y a bien longtemps (au moins depuis 1997) que l’utilisateur finirait par abandonner le clavier, qu’il voyait comme une anomalie temporaire dans l’interface homme-machine. Le fondateur de Microsoft rêve depuis très longtemps de l’avènement des interfaces tactiles, de la reconnaissance vocale, ou de l’utilisation des gestes pour interagir avec l’ordinateur, ce qui serait pour lui plus naturel que d’écrire du texte avec les touches d’un clavier.

Nous sommes encore très loin de l’abandon total du clavier, mais il est clair qu’il est aujourd’hui possible de dicter des textes très facilement avec une orthographe quasi parfaite, de dialoguer avec des assistants vocaux, de toucher l’écran pour déplacer des objets virtuels, ou encore d’utiliser des gestes dans l’espace, façon Minority Report, pour manipuler une interface.

Microsoft-Research-mains2

Mais il faut encore du travail pour que la précision espérée d’un Magic Leap aboutisse à des applications vraiment utiles et intuitives. Car la main a ses subtilités que les algorithmes et les capteurs peinent encore à traduire, et celui qui parviendra à les reproduire dans le virtuel décrochera le gros lot.

modéliser la main dans des environnements virtuels et d’en reproduire les gestes avec une précision inédite

Nous avions vu récemment que Google avait fait d’énormes progrès dans ce sens en dévoilant le Project Soli, une puce entièrement dédiée à capter les doigts avec une finesse inégalée. Mais Microsoft ne veut pas être en reste, et annonce également l’avancée de ses travaux. Contrairement à Google qui utilise un capteur miniaturisé et une IA qui analyse les mouvements, Microsoft continue d’utiliser des capteurs 3D façon Kinect, mais avec des algorithmes de plus en plus pointus, qui permettent de modéliser la main dans des environnements virtuels et d’en reproduire les gestes avec une précision inédite.

« Nous en arrivons au stade où la précision est telle qu’un utilisateur peut commencer à ressentir sa main d’avatar comme étant sa vraie main », assure Jamie Shotton, l’un des trois ingénieurs de Microsoft Research, qui présenteront leurs résultats cet été. La firme de Redmond cherche désormais à afficher des mains virtuelles, soit directement sur l’écran habituel de l’ordinateur, soit au travers de lunettes de réalité virtuelle, en utilisant des algorithmes qui modélisent la main avec précision, en utilisant une multitude de points de contrôle et une reconstruction douce, sans polygones apparents.

Elle assure que même sans sensations haptiques, les interfaces sont désormais tellement réactives et intuitives que l’utilisateur n’est plus gêné par l’absence de toucher, et parvient à interagir naturellement comme s’il était vraiment en face d’un bouton, d’un levier ou d’un objet quelconque à déplacer.

Découvrez les bonus

+ rapide, + pratique, + exclusif

Zéro publicité, fonctions avancées de lecture, articles résumés par l'I.A, contenus exclusifs et plus encore.

Découvrez les nombreux avantages de Numerama+.

S'abonner à Numerama+

Vous avez lu 0 articles sur Numerama ce mois-ci

Il y a une bonne raison de ne pas s'abonner à

Tout le monde n'a pas les moyens de payer pour l'information.
C'est pourquoi nous maintenons notre journalisme ouvert à tous.

Mais si vous le pouvez,
voici trois bonnes raisons de soutenir notre travail :

  • 1 Numerama+ contribue à offrir une expérience gratuite à tous les lecteurs de Numerama.
  • 2 Vous profiterez d'une lecture sans publicité, de nombreuses fonctions avancées de lecture et des contenus exclusifs.
  • 3 Aider Numerama dans sa mission : comprendre le présent pour anticiper l'avenir.

Si vous croyez en un web gratuit et à une information de qualité accessible au plus grand nombre, rejoignez Numerama+.

S'abonner à Numerama+

Si vous avez aimé cet article, vous aimerez les suivants : ne les manquez pas en vous abonnant à Numerama sur Google News.