Microsoft travaille sur un clavier capable de reconnaître des gestuelles

Microsoft travaille sur un clavier capable de reconnaître des gestuelles

D'ici quinze ans, on arrivera peut-être à égaler Minority Report

Avatar de l'auteur
Kevin Hottot

Publié dans

Sciences et espace

02/05/2014 2 minutes
35

Microsoft travaille sur un clavier capable de reconnaître des gestuelles

Des chercheurs de chez Microsoft ont mis au point un nouveau type de clavier permettant aux utilisateurs de piloter leur ordinateur grâce à diverses gestuelles effectuées au ras des touches. Une possibilité permise par l'utilisation d'une petite centaine de capteurs infrarouges détectant la position des mains.

Microsoft Proto Clavier Type Over Swipe

 

En l'espace de 40 ans d'informatique, le clavier n'est probablement pas le périphérique ayant le plus évolué. Si les mécanismes des touches ont varié au fil des années, avec notamment l'apparition des touches « chiclet », le principe de base reste le même et il est toujours question d'appuyer sur des boutons pour interagir avec la machine. 

 

Alors que de nombreux périphériques, comme le Leap Motion, ou encore Kinect, permettent de prendre le contrôle d'un terminal grâce à des gestes, des chercheurs de chez Microsoft ont essayé de mettre au point un moyen d'intégrer ce type de technologies dans un clavier standard.

 

Pour ce faire, les équipes de Microsoft ont installé une batterie de 96 capteurs infrarouges entre les touches d'un clavier.Ceux-ci doivent permettre de connaître à tout instant la position des doigts et des mains de l'utilisateur afin de déterminer s'il effectue certains gestes. Par exemple, dessiner un « V » au-dessus du clavier permet de passer la fenêtre active en mode plein écran. Il suffit ensuite de faire glisser un doigt vers le haut ou le bas pour en faire défiler le contenu. Pour limiter le risque de faux positif, la portée des capteurs se limite à quelques centimètres seulement, ainsi, il est nécessaire d'effectuer les mouvements au ras des touches. 

 

Un algorithme permet ensuite de tracer la position des doigts sur le clavier ainsi que leur distance par rapport à celui-ci. Plusieurs images successives sont superposées et permettent de savoir quel mouvement a été effectué par l'utilisateur, déclenchant ensuite l'action adéquate à l'écran. Mais plutôt qu'un long discours, une démonstration en images sera certainement plus parlante :

 

Écrit par Kevin Hottot

Tiens, en parlant de ça :

Sommaire de l'article

Introduction

Fermer

Commentaires (35)


Bon l’utilisation en jeu à l’air un peu naze mais sinon je dois dire que j’ai trouvé la vidéo intéressante !



En gros le clavier entier est transformé en touchpad, ça implique d’avoir une forme de touche assez plate mais c’est pas forcément désagréable pour un usage bureautique modéré.




des chercheurs de chez Microsoft ont essayé de mettre au point un moyen d’intégrer ce type de technologies dans un clavier standard.



Standard ? Un clavier Apple, oui. <img data-src=" />


Intéressant, mais du mal à imaginer un intérêt réel.


Au départ je me disais “encore du gros budget pour un gadget”… Mais je vois déjà de nombreuses facilités à utiliser ce genre de périphérique pour le développement.



J’utilise tous les jours un Logitech G19 perso au travail, et les touches de macros sont pour moi devenues carrément indispensables. Rajouter à cela une gestion des mouvements, et la souris sera presque inutile :)


C’est moi ou c’est un clavier de mac à la base ? <img data-src=" />


le concept est plaisant








lincruste_2_la vengeance a écrit :



Standard ? Un clavier Apple, oui. <img data-src=" />





Ben non, on peut pas faire pomme-q pour quitter <img data-src=" />



idée intéressante … mai j’ai peur des fausses manip involontaires qui peuvent vite être irritant. Genre la tasse de café/thé a proximité qui perturbe la lecture etc


C’est intéressant d’un point de vue technologique. Par contre, j’ai l’impression de le vrai défi aujourd’hui n’est pas vraiment d’ordre technologique, on le voit avec le leap motion par exemple. C’est clairement une tuerie d’un point de vue technique (la mâchoire m’en été tombée en voyant la vidéo de présentation), mais… l’usage ne suit pas. Il faut une innovation du côté de l’interface, de l’expérience, comment dire, du design en quelque sorte (je dis ça en tant que technicien sans amour pour les designers).



C’est bien de pouvoir faire défiler un document comme dans la vidéo, mais comparé à une molette, et la possibilité de clic sur la barre latérale ? Le match est perdu d’avance. Pareil pour le zoom… J’imagine déjà la pénibilité de la chose par rapport à la molette toujours…



Je pense que l’interface a besoin d’une vraie rupture technologique ; le combo [clavier souris] est trop optimisé, à mon humble avis, chercher des petites améliorations sur le modèle existant est quasiment voué à l’échec. C’est l’habituelle rengaine de Niels Bohr (on n’a pas inventé l’ampoule en améliorant la bougie).








lincruste_2_la vengeance a écrit :



Standard ? Un clavier Apple, oui. <img data-src=" />





Les claviers Apple sont standard, c’est pas pasque y’a plus control, alt ou la touche win que c’est plus standard, faut stopper la jalousie envers Apple..









TZDZ a écrit :



C’est intéressant d’un point de vue technologique. Par contre, j’ai l’impression de le vrai défi aujourd’hui n’est pas vraiment d’ordre technologique, on le voit avec le leap motion par exemple. C’est clairement une tuerie d’un point de vue technique (la mâchoire m’en été tombée en voyant la vidéo de présentation).







C ‘est parce que c’etait une video de communication et pas une demo technique…

Pour avoir un leap motion au labo, c’est vraiment pas terrible comme engin.









Ewil a écrit :



C ‘est parce que c’etait une video de communication et pas une demo technique…

Pour avoir un leap motion au labo, c’est vraiment pas terrible comme engin.





Tu veux dire que ça (reconstitution des mains) c’est bidonné ? Je sais bien que dans la pratique ça n’a pas l’air génial, mais quand même la reconstitution à l’écran a l’air pas mal… Comme engin pas terrible, technologiquement c’est quand même fort, y compris par rapport à l’encombrement et au prix (pour un non spécialiste comme moi en tout cas).



D’après toi le problème vient de l’engin ou de la faiblesse des applications disponibles ?



Sur une surface ça pourrait être sympa d’avoir ça en plus du tactile…



Par contre c’est dommage que Microsoft ne communique pas plus sur les différents projets du MSR… Faut toujours que ça soit quelqu’un qui fouine (ici h0x0d/Felix9) dans les méandres du site du MSR pour que les journalistes/blogs en fasse un titre… Et pendant ce temps Microsoft garde une image vieillotte de l’entreprise qui se contente de vivre sur sa rente sans innover alors qu’elle a l’un des plus gros budget R&D…








Naneday a écrit :



Les claviers Apple sont standard, c’est pas pasque y’a plus control, alt ou la touche win que c’est plus standard, faut stopper la jalousie envers Apple..







Euh, ils sont standard chez Apple seulement. Pour programmer dessus, merci bien la gymnastique pour obtenir des accolades ou un simple pipe.

C’est tellement standard que quand tu installes une distrib, tu as le choix entre français, français variante et … français Mac. ;-)









TZDZ a écrit :



C’est intéressant d’un point de vue technologique. Par contre, j’ai l’impression de le vrai défi aujourd’hui n’est pas vraiment d’ordre technologique, on le voit avec le leap motion par exemple. C’est clairement une tuerie d’un point de vue technique (la mâchoire m’en été tombée en voyant la vidéo de présentation), mais… l’usage ne suit pas. Il faut une innovation du côté de l’interface, de l’expérience, comment dire, du design en quelque sorte (je dis ça en tant que technicien sans amour pour les designers).



C’est bien de pouvoir faire défiler un document comme dans la vidéo, mais comparé à une molette, et la possibilité de clic sur la barre latérale ? Le match est perdu d’avance. Pareil pour le zoom… J’imagine déjà la pénibilité de la chose par rapport à la molette toujours…



Je pense que l’interface a besoin d’une vraie rupture technologique ; le combo [clavier souris] est trop optimisé, à mon humble avis, chercher des petites améliorations sur le modèle existant est quasiment voué à l’échec. C’est l’habituelle rengaine de Niels Bohr (on n’a pas inventé l’ampoule en améliorant la bougie).







Je me dis que ça pourrait être un complément interessant à la souris en fait.

Quand tu dois alterner souvent entre saisie clavier et scroll/clique à la souris, éviter faire des aller retours la main droite (bon gauche dans mon cas !) entre le clavier et la souris peux être pas mal (apres faut voir le prix du bouzin aussi ).



Mais il reste, comme tu le soulignes avec le leap motion, un élément très important: l’intégration au systeme.










lincruste_2_la vengeance a écrit :



Standard ? Un clavier Apple, oui. <img data-src=" />





Regarde bien la vidéo, ce n’est pas un clavier Apple.









Mr.Nox a écrit :



Regarde bien la vidéo, ce n’est pas un clavier Apple.





En effet, première image en gros plan, y’a pas de touche Pomme (ensuite, je suis pas spécialiste Mac, donc je sais pas si les modèles récent en possèdent encore)









Snark a écrit :



En effet, première image en gros plan, y’a pas de touche Pomme (ensuite, je suis pas spécialiste Mac, donc je sais pas si les modèles récent en possèdent encore)







La touche pomme, c’est la touche command. Il y en a bien deux sur l’image dont tu parles. Et même si c’est un peu flou, ça ressemble bien au symbole Bowen Knot (ça ne passe pas sur le commentaire).



Ouais !



on pourra tout faire au clavier comme dans les séries américaines, trop bien.

<img data-src=" />


Microsoft reconnaissait déjà la gestuelle “va te faire foutre” une fois le produit acheté quelle nouvelle gestuelle va t’il créer…<img data-src=" />



<img data-src=" />


Eh bien oui, mea culpa, c’est bien un clavier Apple.<img data-src=" />


je parie que le gesture pour cancel se fait avec un seul doigt. Je vous laisse deviner lequel :)








Naneday a écrit :



faut stopper la jalousie envers Apple..





<img data-src=" />









-SQP- a écrit :



je parie que le gesture pour cancel se fait avec un seul doigt. Je vous laisse deviner lequel :)







celui qui va forcer les hommes à travailler en slip dans les open-spaces et qui ne permettra pas aux femmes d’annuler ?



Sinon si ça fait comme le leap motion, tous les gens que je connais qui en ont acheté un, ils ont laissé tombé au bout de quelques heures/jours, parce que c’est désagréable pour les bras.









darkbeast a écrit :



celui qui va forcer les hommes à travailler en slip dans les open-spaces et qui ne permettra pas aux femmes d’annuler ?





<img data-src=" />



Je ne sais pas pour vous mais j’aimerais bien un imac a la Microsoft avec une dalle IPS 350dpi une coque en magnésium 16 go de ram un intel core i7 ssd 256 go avec un second port sata 2.5” et ce clavier mais avec le clavier numérique.








hasterix a écrit :



C’est moi ou c’est un clavier de mac à la base ? <img data-src=" />







Et un windows XP! <img data-src=" />









yl a écrit :



Et un windows XP! <img data-src=" />







C’est plus un Windows 8 l’OS de la vidéo je pense.



Ce clavier est une reprise de ce qui existait déjà avec la tablette Surface, la seule différence ce sont des vraies touches, un vrai clavier. Au final, c’est aussi une solution pertinente pour proposer windows 8 aux écrans non tactile.








TZDZ a écrit :



Tu veux dire que ça (reconstitution des mains) c’est bidonné ? Je sais bien que dans la pratique ça n’a pas l’air génial, mais quand même la reconstitution à l’écran a l’air pas mal… Comme engin pas terrible, technologiquement c’est quand même fort, y compris par rapport à l’encombrement et au prix (pour un non spécialiste comme moi en tout cas).



D’après toi le problème vient de l’engin ou de la faiblesse des applications disponibles ?







Ma vidéo est grandement bidonée. On a acheté un leap pour le tester comme capteur dans des systèmes type cyber-physique. Donc les applications ou le manque d application compatible n’est pas un problème. C’est la finesse du truc qui est pas bonne du tout (et qui me fait dire que les vidéo “ne sont pas des vidéo de gameplay mais des cinématiques” si je peux risquer une comparaison avec le jeu vidéo)



Je rêve, ils font leur démo sous win XP qui n’est plus supporté. Bonjour la publicité pour vista, seven et 8…








Tranxen79 a écrit :



Je rêve, ils font leur démo sous win XP qui n’est plus supporté. Bonjour la publicité pour vista, seven et 8…





Oui effectivement, tu rêves : boutons de la barre des tâches carrés, pas de menu Démarrer… Et la fenêtre à 3:36 a un style un peu plat pour XP…



Surtout il utilise office 2013 qui n’est pas disponible sur xp ou vistahttp://office.microsoft.com/fr-fr/support/pourquoi-ne-puis-je-pas-installer-offi…


Autant pour moi, je n’avais pas mis la fenêtre en plein écran et effectivement, avec “le zoom” ce n’est pas du XP.



Merci


Le compagnon parfait de Windows8!