0
Demandez-moi de réparer une voiture ou une moto cassée, et vous n’auriez pas de chance.
Mais c’est exactement ce que Microsoft voulait que je fasse. Et l’outil qu’il m’a donné était son nouveau casque de réalité mixte HoloLens 2.
Après l’avoir enfilé, un ensemble d’instructions numériques est apparu sur un véritable VTT cassé, installé dans un faux atelier de réparation au siège de Microsoft. Il y avait des seaux de boulons à ma droite et des outils à ma gauche. Ensuite, un ensemble de flèches de dessin animé bleu néon est apparu, indiquant quels engrenages je devais déplacer et où les déplacer pour commencer la réparation.
Ensuite, on m’a dit de récupérer des pièces dans des bacs autour de la pièce. La flèche bleue m’a dirigé vers la poubelle avec le boulon dont j’avais besoin, puis la rondelle qui va avec, puis vers une table avec la bonne clé.
Quelle taille de boulon ? Quel type de clé ? Je n’avais pas à m’en soucier, car HoloLens 2 m’a guidé à chaque étape. Après environ huit minutes, je suis passé d’un regard désemparé sur un VTT cassé à l’émerveillement devant mon premier travail de réparation. Comme le dit Keanu Reeves dans l’épopée de science-fiction The Matrix après avoir téléchargé des compétences de combat directement dans son cerveau, « Je connais le kung-fu ».
C’est la promesse de HoloLens de Microsoft : un ordinateur qui peut vous aider à faire à peu près tout ce pour quoi vous utiliseriez vos mains. Pour ce faire, il détecte où il se trouve dans un bâtiment, puis place des images informatiques au-dessus du monde réel que vous voyez réellement. Et contrairement au HoloLens original de Microsoft, annoncé il y a quatre ans, ce nouveau casque est plus confortable et plus facile à utiliser.
Cela rend le travail avec HoloLens beaucoup plus immersif lorsque vous regardez les hologrammes qu’il crée. Et ceux-ci peuvent être n’importe quoi, d’un écran de cinéma massif à un modèle d’un nouveau bâtiment. Ou un ensemble d’instructions vous montrant comment faire cuire un lot de cookies ou réparer un moteur d’avion. Et avec une paire de caméras, le casque peut également servir de téléphone à un ami, permettant à quiconque de voir à travers les yeux de celui qui porte le casque. Pensez-y. Vos amis peuvent également utiliser une application pour encercler les choses qu’ils voient, qui s’affichent sous forme de notations holographiques lorsque vous portez le casque.
« L’objectif est que ces choses transforment les humains », a déclaré le chef de HoloLens, Alex Kipman, dans une interview au siège de Microsoft à Redmond, Washington. « Ils permettront aux personnes et aux organisations de faire des choses qu’elles n’étaient manifestement pas capables de faire auparavant. »
Microsoft n’est pas fou de penser grand au potentiel de ces casques. Les esprits les plus brillants de l’industrie technologique investissent déjà des milliards de dollars pour développer la réalité mixte (ou, comme certains l’appellent, la réalité augmentée). Ils parient tous que cela va changer la façon dont nous utilisons les ordinateurs dans les prochaines années. Le marché des équipements AR devrait exploser, passant de moins de 6 milliards de dollars l’an dernier à près de 200 milliards de dollars d’ici 2025, selon les données compilées par Statista.
« Nous n’avons pas à l’imaginer, cet avenir est là », a déclaré le PDG de Microsoft, Satya Nadella, lors d’un événement annonçant l’appareil dimanche au Mobile World Congress (MWC) à Barcelone. « Ensemble, ces progrès façonnent la prochaine phase de l’innovation. »
Une startup de haut niveau appelée Magic Leap a commencé à expédier un casque à 2 295 $ en août dernier après y avoir travaillé pendant sept ans et levé 2,3 milliards de dollars d’investissements auprès de bailleurs de fonds tels que AT&T, Google et Warner Bros. Facebook, qui vend un casque de réalité virtuelle entièrement immersif à 399 $ appelé Oculus Rift, travaille également sur un concurrent HoloLens. Même Apple en construit secrètement un, dont des sources ont déclaré à CNET qu’il pourrait arriver en 2020.
Microsoft ouvre les précommandes pour HoloLens 2 le 24 février pour 3 500 $. La société prévoit d’expédier l’appareil plus tard cette année.
HoloLens (le nom est inspiré des hologrammes) sonnait tout droit sorti de la science-fiction lors de sa première démonstration. « Nous ne parlons pas de vous mettre dans des mondes virtuels », a déclaré Kipman lors de la présentation de l’appareil en 2015. « Nous rêvons au-delà des mondes virtuels, au-delà des écrans, au-delà des pixels. »
Mais HoloLens avait ses problèmes. Le casque d’origine était difficile à mettre. Il était lourd à près de 1,3 livre, ce qui est un peu plus lourd qu’un iPad Air. Le HoloLens a également serré la tête de certaines personnes. Il ne tenait pas toujours sur vos lunettes. À 5 000 $, c’était cher. Et le logiciel utilisé pour l’exécuter nécessitait souvent une configuration et un ajustement supplémentaires.
Le pire était que les hologrammes apparaissaient dans une zone devant vous qui n’avait qu’environ la taille d’un jeu de cartes. (En langage AR, cette zone s’appelle le champ de vision.) Pratiquement, cela signifiait que vous ne voyiez généralement qu’une petite partie d’un hologramme.
« Le champ de vision du casque précédent était son plus gros inconvénient », a déclaré Scott Stein, rédacteur en chef de CNET pour les critiques, qui a essayé plus de casques que je ne connaissais. « Les objets virtuels doivent être alignés correctement, et la chute brise l’illusion et ajoute de la fatigue à essayer de retrouver des choses. »
Microsoft a donc décidé de résoudre ces problèmes. Kipman a invité Stein, Gabriel Sama, rédacteur en chef de CNET Español, et moi-même au siège de l’entreprise pour voir ce qu’il a accompli avec HoloLens 2. Et pour partager la promesse d’HoloLens 3 et au-delà.
En bout de ligne, selon Kipman : « Nous avons encore beaucoup de travail devant nous.
Acte suivant
Imaginez que vous traversez un magasin et au lieu de chercher cette bouteille de moutarde, des flèches comme celles qui m’ont aidé à réparer le VTT vous dirigent à travers le dédale d’allées, directement vers les condiments sur votre liste d’épicerie.
Ou ils pourraient afficher les directions lorsque vous marchez dans la rue.
Au lieu de flèches, un HoloLens 2 pourrait vous montrer à quoi ressembleraient de nouveaux meubles dans votre salon. Ou vous aider à lire un discours sans téléprompteur.
Pour Kipman, cette technologie est le Saint Graal des ordinateurs. Au cours des trois dernières décennies, nous avons été pris au piège en regardant un écran tout en interagissant avec un clavier, une souris ou un contrôleur. Même les smartphones ne sont que des écrans plus petits.
Ces types d’ordinateurs sont assez bons pour certaines choses, comme l’édition audio et vidéo, le codage d’une application ou l’écriture d’une histoire. Mais pour presque tout le reste, Microsoft pense que la réalité mixte est une meilleure alternative.
En effet, les chercheurs découvrent que HoloLens peut également modifier notre façon de communiquer. Dans une expérience au Virtual Human Interaction Lab de l’Université de Stanford, une personne a été placée dans une pièce vide, mais grâce à l’HoloLens, elle a pu parler à un personnage AR photoréaliste. L’avatar maintenait le contact visuel, interagissait naturellement et faisait des gestes comme s’il s’agissait d’une personne réelle.
« C’était à couper le souffle », a déclaré Jeremy Bailenson , professeur de communication qui dirige le laboratoire.
Monde différent
Les systèmes de réalité mixte comme HoloLens et Magic Leap ne sont pas les seules technologies conçues pour révolutionner la façon dont nous utilisons les ordinateurs. Il y a aussi la réalité virtuelle, dans laquelle les casques tiennent un écran si près de vos yeux que vous êtes amené à penser que vous êtes dans le monde généré par ordinateur. Après des décennies de développement de la réalité virtuelle, le PDG de Facebook, Mark Zuckerberg, a contribué à légitimer la technologie en dépensant plus de 3 milliards de dollars pour la start-up Oculus .
Bien que le marché soit encore naissant, les gens utilisent la réalité virtuelle pour s’entraîner en immersion (comme montrer à un soldat à quoi ressemble une zone de guerre), regarder des films et jouer à des jeux vidéo. Vous pouvez acheter un Oculus Rift pour 349 $, un HTC Vive pour 499 $ ou un Sony PlayStation VR pour 299 $. Ils sont à peu près les mêmes, bien que chacun propose des écrans de qualité différente ou des contrôleurs légèrement différents.
Les casques MR, quant à eux, sont radicalement différents d’une entreprise à l’autre. Le système Magic Leap One est composé de trois appareils, dont un casque appelé Lightwear, qui utilise une technologie similaire à celle de HoloLens pour superposer des images générées par ordinateur sur le monde réel. Mais contrairement à HoloLens, Lightwear est alimenté par un ordinateur de la taille d’une rondelle de hockey appelé Lightpack, qui dispose de suffisamment de puissance de calcul pour générer des images 3D réalistes. L’ordinateur se connecte au casque par un cordon et a une fente en son milieu, de sorte qu’il chevauche votre poche et que l’air puisse circuler autour de lui et le refroidir. Vous interagissez avec le Magic Leap via un troisième gadget : une télécommande portable appelée Control.
Nous savons qu’Apple développe secrètement un casque, mais nous ne savons pas grand-chose de sa conception, si ce n’est qu’il est alimenté par des puces conçues par Apple, communique sans fil avec un ordinateur et utilise des écrans supersharp.
La seule chose sur laquelle les entreprises de MR semblent s’entendre, c’est qu’elles ne vendent pas aux gens normaux – du moins pas encore. L’appareil de Magic Leap a été mis à la disposition des développeurs, avec une version grand public promise dans un avenir pas trop lointain.
Microsoft dit qu’il se concentre sur les utilisations professionnelles, même s’il a initialement présenté HoloLens comme un moyen de travailler et de jouer à des jeux comme son phénomène de construction mondiale Minecraft. Aujourd’hui, l’entreprise affirme que HoloLens est un moyen facile de transporter des employés partout dans le monde. Ou un moyen pour un travailleur de faire quelque chose de complexe sans avoir à apprendre le processus au préalable.
Kipman le décrit comme donnant aux gens des super pouvoirs. « C’est un concept qui a été dans nos rêves », dit-il.
Trouver un meilleur ajustement
HoloLens 2 n’est peut-être pas prêt pour vous et moi, mais c’est un appareil nettement meilleur que son prédécesseur.
Le premier HoloLens était volumineux. Toute la puissance de calcul était concentrée à l’avant, ainsi que l’amalgame de caméras, de détecteurs de mouvement et de microphones qui l’aident à comprendre où vous êtes, ce que vous faites avec vos mains et ce que vous dites. Il se serrait sur votre tête et, si vous portiez des lunettes comme Stein ou moi, il était inconfortable de les porter plus de quelques minutes.
Pour résoudre ce problème, Microsoft s’est tourné vers son Human Factors Engineering Lab . Le groupe, hébergé dans un bâtiment quelconque construit sur le campus de Microsoft en 2015 et doté d’un financement de 44 millions de dollars, a été créé pour aider le géant de la technologie à comprendre comment construire des appareils adaptés à la plupart des gens.
Carl Ledbetter , directeur principal de la conception de l’équipe de conception d’appareils de Microsoft, a commencé ma visite du laboratoire en me faisant prendre une manette de jeu vidéo Xbox surdimensionnée posée sur une table près de l’entrée. Il était plus lourd que les contrôleurs Xbox que j’avais utilisés et j’avais plus de mal à atteindre tous les boutons.
« Toi, dit-il, tu as cinq ans.
Le contrôleur surdimensionné est un outil pour aider les ingénieurs à comprendre toutes les personnes qui utilisent ses appareils, y compris les enfants. Microsoft a adopté une approche similaire avec HoloLens 2, en essayant de l’équiper pour autant de personnes que possible.
Pour améliorer la conception originale, l’équipe a décidé de répartir uniformément le poids de HoloLens 2 autour de votre tête en déplaçant la batterie et d’autres entrailles vers l’arrière dans un pack de la taille d’une boîte d’Altoids. Cela a contribué à le rendre confortable – c’était comme enfiler une casquette de baseball.
Cependant, toutes nos têtes ne sont pas identiques. Ainsi, Microsoft a passé un an à scanner la tête de plus de 600 personnes, en utilisant une machine avec 36 caméras interconnectées autour d’un siège pour capturer chaque formulaire. En fin de compte, ces analyses ont aidé Microsoft à comprendre les différents types de corps pour les hommes et les femmes, petits à grands, grands à petits. Certaines personnes ont les joues plus hautes, le nez plus bas ou de plus grosses bosses à l’arrière de la tête. Microsoft voulait que l’HoloLens 2 convienne à 95 % d’entre eux. (Désolé, Hodor.)
« Ce n’est pas seulement une question de taille de tête », a déclaré Ledbetter. « La tête de chacun est différente. »
Le HoloLens 2 possède également des capteurs qui scannent vos yeux. Cela l’aide à identifier rapidement qui vous êtes, de sorte que vous pouvez partager un casque avec plusieurs personnes, mais qu’il soit configuré à votre guise chaque fois que vous le mettez. L’appareil surveille également où vous regardez, de sorte qu’une application peut vous aider à lire en déplaçant le texte avec vous ou simplement en répondant à ce que vous regardez.
Et si vous avez besoin de retirer rapidement l’HoloLens pour discuter avec quelqu’un dans le monde réel, vous le retournez, comme si vous mettiez une paire de lunettes sur votre front.
« Une fois que la première maquette a été construite, c’était comme » Wow, nous devons le faire « , a déclaré Ledbetter. « C’était un délice.
Une nouvelle vue
Le changement le plus spectaculaire avec HoloLens 2, cependant, est le champ de vision, ou la quantité d’hologramme que vous voyez. Dans le premier HoloLens, si vous bougez trop la tête dans n’importe quelle direction, les hologrammes disparaissent.
Pour HoloLens 2, Microsoft a plus que doublé la zone où vous pouvez les voir. Il l’a fait en créant une nouvelle technologie d’hologramme.
Dans HoloLens 1, des hologrammes ont été créés en reflétant des images d’un petit écran dans le casque dans des lentilles spécialement conçues pour les ondes lumineuses rouges, bleues et vertes. Ces ondes lumineuses étaient ensuite projetées à l’arrière de vos yeux, où votre cerveau créerait l’image finale.
Dans HoloLens 2, le petit écran a été remplacé par un miroir appelé MEMS qui se déplace assez rapidement pour créer l’illusion d’un écran dans l’espace. Le MEMS crée 120 de ces écrans chaque seconde, filtrés à votre œil à travers de nouvelles lentilles plus élégantes dans le casque. Le résultat est des mouvements fluides, des animations plus lumineuses et une réponse rapide si vous bougez la tête.
Plus important encore, il y a beaucoup plus de place pour que les hologrammes apparaissent.
Avant que Microsoft ne commence à utiliser la technologie MEMS, certains dirigeants pensaient qu’il faudrait de nombreuses années avant que l’entreprise puisse améliorer le champ de vision HoloLens. « C’était un problème d’ingénierie important », a déclaré Zulfi Alam , un directeur général qui a travaillé sur les affichages et les écrans du HoloLens.
Kipman a qualifié la nouvelle approche de « miracle ».
Le résultat est que lorsque je réparais le VTT, je n’ai pas remarqué que les hologrammes n’étaient pas dans toutes les zones que je pouvais voir. Il y en avait juste assez pour que j’arrête d’y penser.
Inspiration inhabituelle
L’une des raisons pour lesquelles Microsoft dit que HoloLens 2 n’est pas encore assez bon pour les gens ordinaires est qu’il n’y a toujours pas assez à faire avec. Certaines personnes pensent que l’application qui tue, ou la fonctionnalité incontournable, de HoloLens et Magic Leap sera lorsqu’ils remplaceront tous les écrans de nos maisons. Nous mettions simplement un casque et les voyions comme des hologrammes.
Kipman n’est pas convaincu. C’est comme penser à une voiture comme à un « buggy sans cheval », dit-il. Au lieu de cela, HoloLens est pour les moments où un moniteur et un clavier ne fonctionnent pas . Cela peut être lorsque vous vérifiez les schémas d’un oléoduc sur le terrain, ou une radiographie d’un patient superposée sur le corps.
« Si vous pouvez prendre un travailleur qui gagne 150 000 dollars et le rendre 40% plus efficace, cela représente 60 000 dollars par an », a déclaré Jim Heppelmann , PDG du fabricant de logiciels d’entreprise PTC, dont le logiciel fonctionne avec HoloLens pour aider les travailleurs sur le terrain à utiliser des schémas pour réparer les machines cassées, entre autres. « J’achèterai des appareils à 5 000 $ toute la journée. »
Pour encourager encore plus ces relations commerciales, Microsoft a apporté plusieurs améliorations au logiciel qui alimente HoloLens. Parmi eux, la société a créé un logiciel qui utilise les capteurs du casque pour cartographier les bâtiments dans lesquels ils se trouvent afin qu’une personne utilisant un iPhone au lieu d’un HoloLens puisse voir les hologrammes dans la pièce. HoloLens fonctionne également à l’aide de la technologie du logiciel Windows PC de Microsoft, ce qui facilite le codage des applications et la connexion au Web.
Malgré l’excitation, tout cela pourrait encore faire faillite. Vous vous souvenez de Google Glass ?
Lorsque Glass a été annoncé en 2012, les gens avaient prédit que les lunettes intelligentes feraient des choses similaires à ce qui est attendu pour HoloLens. Google a principalement abandonné le projet en 2015 après d’importantes critiques sur son utilité et les problèmes de confidentialité soulevés par sa caméra connectée.
Intel avait également une initiative de lunettes intelligentes, qui a été lancée en 2013, mais la société a mis fin au projet l’année dernière après avoir eu du mal à trouver des entreprises partenaires . Et Osterhout Design Group, dont les lunettes intelligentes ont fait parler de lui au CES en 2017, a fermé ses portes et ses brevets ont été vendus le mois dernier .
Ces revers n’inquiètent pas Paul Bettner . Il est l’une des personnes à l’origine du jeu mobile à succès Words With Friends, qui a ensuite créé un premier jeu de réalité virtuelle très médiatisé appelé Lucky’s Tale . Finalement, Bettner et d’autres techniciens disent que des appareils comme le HoloLens se réduiront à la taille de lunettes normales, à quel point ils deviendront une partie de la vie quotidienne.
Mais pour y parvenir, les entreprises doivent faire des progrès progressifs, tout comme elles l’ont fait avec les smartphones. « Vous n’auriez pas pu passer de rien à l’iPhone », a-t-il déclaré. « Vous deviez d’abord fabriquer des téléphones à clapet, puis des Palm Treos et enfin tout le reste pour y arriver. »
HoloLens n’est pas la première tentative de Kipman pour changer la façon dont nous interagissons avec les ordinateurs. C’était Project Natal, un accessoire conçu pour la console de jeux vidéo Xbox 360 de Microsoft qui pouvait suivre votre corps lorsque vous vous déplaciez devant. Il l’a fait en recouvrant une pièce de milliers de points infrarouges , puis en utilisant une caméra pour cartographier où ils atterrissent.
Le Kinect, comme il a été nommé plus tard, était si populaire qu’il s’est vendu à 8 millions d’unités au cours de ses 60 premiers jours, ce qui lui a valu une place dans le Livre Guinness des records du monde en tant que gadget grand public le plus vendu jusqu’à présent (l’iPad d’Apple a attrapé le titre en 2011).
« L’inspiration était vraiment de pouvoir incorporer un humain dans le gameplay », a déclaré Kipman à l’époque . « Vous permettre d’entrer et de jouer nous inspire vraiment. »
Microsoft a finalement vendu 35 millions de Kinects, mais l’appareil s’est effondré alors que les développeurs avaient du mal à trouver des façons amusantes de l’utiliser dans leurs jeux. Pourtant, la technologie a contribué à inspirer Face ID et animoji sur les iPhones d’Apple, le déverrouillage du visage pour les PC Windows et, bien sûr, HoloLens.
Aujourd’hui, l’enthousiasme de Microsoft pour la RM est contagieux. Selon SuperData Research de Nielsen, les investissements dans les sociétés de logiciels travaillant sur la RA et la MR pour les consommateurs devraient atteindre 270,8 millions de dollars cette année, soit près du double de l’investissement dans les entreprises fabriquant des logiciels de VR similaires. Pendant ce temps, dans le monde des affaires, des entreprises comme Chevron ont acheté des centaines de casques HoloLens alors qu’elles commencent à les utiliser largement parmi leurs employés.
L’avenir
Alors que Microsoft se prépare à commencer à vendre HoloLens 2, Kipman envisage quelques années avant de présenter HoloLens 3.
Il a hésité lorsqu’on lui a posé des questions sur les détails, sauf pour promettre qu’il sera encore plus confortable, plus facile à utiliser et qu’il aura plus de capacités que ce qui est disponible actuellement. Quels que soient les détails, Kipman a déclaré que c’est ce qui a suffisamment intéressé l’armée américaine pour investir 480 millions de dollars dans plus de 100 000 casques d’écoute pour « augmenter la létalité en améliorant la capacité de détecter, de décider et de s’engager avant l’ennemi », selon un dossier du gouvernement . . (Le contrat, cependant, a suscité la dissidence dans les rangs de Redmond, que Nadella a rejeté.)
HoloLens ne sera pas le seul appareil en lice pour l’espace sur votre tête. Il y a toujours Magic Leap et le casque inopiné d’Apple. D’ici 2022, « des dizaines de millions » de ces objets auront été vendus, a déclaré Tim Merel , directeur général de l’observateur de marché Digi-Capital .
Pour l’instant, cependant, Kipman prévoit de garder HoloLens juste hors de portée pour vous et moi. « Je n’ai aucun intérêt à surévaluer ces produits », a-t-il déclaré. « Il y a un point où il y aura assez d’immersion, assez de confort et assez de valeur prête à l’emploi où je serai heureux d’annoncer un produit grand public. »
D’ici là, vous n’aurez plus qu’à patienter. Sauf si vous avez besoin de réparer un VTT.