Microsoft présente de nouvelles démonstrations HoloLens à la conférence Build

Le futur micro-casque HoloLens de Microsoft est le premier appareil de réalité augmentée haut de gamme présenté au public. Malheureusement, Microsoft a été si discret que nous ne savons pas grand chose à ce sujet..

Aujourd'hui, lors de la conférence des développeurs de Microsoft à San Francisco, nous avons eu un autre aperçu de la technologie. La démo elle-même est brillante mais pas très informative. Cependant, nous pouvons relever quelques détails importants en lisant entre les lignes. Dans ce cas, ce que Microsoft a choisi de ne pas montrer est plus informatif que ce qu’ils ont fait..

La démo

Plusieurs ingénieurs HoloLens sont venus sur scène pour présenter certaines des nouvelles démos qu'ils ont développées pour le matériel. Une démo est une reconstitution de l'appartement déprimant d'un ingénieur et couvre les murs et le sol avec des applications et des jouets virtuels. Un autre invite des médecins à montrer un modèle de corps humain, puis le démonte. Enfin, un robot kit développe le haut du corps virtuel et expressif et déploie un grand panneau de statut lui permettant d'être peaufiné en temps réel..

Le diable, les détails

Jusqu'à présent, tellement impressionnant - mais bon nombre de mes questions initiales au sujet des cinq questions de HoloLens à propos du "projet HoloLens" de Microsoft Cinq des questions à propos du "projet HoloLens" de Microsoft Le nouveau micro-casque de réalité augmentée de Microsoft est très excitant ? Lire la suite reste sans réponse. Alors regardons un peu plus près.

Occlusion

Est-ce que la démo se sent un peu mise en scène pour vous? Regardez attentivement les mouvements de la caméra. Ce n’est pas seulement la maladresse habituelle du salon. Regardez à nouveau la démo et recherchez des moments où un être humain passe devant un objet virtuel.

C'est appelé occlusion, et c'est un problème difficile en réalité augmentée. Afin de rendre ce phénomène correctement, le HoloLens doit cartographier le monde rapidement et avec suffisamment de précision pour couper la silhouette de la personne de l'image virtuelle. Sinon, vous aurez un conflit de profondeur: votre vision stéréo vous dira que l'objet virtuel est derrière la personne, mais il sera affiché au-dessus de celle-ci. Comme nous l’avons appris de la réalité virtuelle, ces types de conflits sont bouleversants et détruisent l’illusion que les objets avec lesquels vous interagissez sont des parties tangibles du monde..

La démo déploie des efforts considérables pour éviter cela. Vous pouvez voir le caméraman réagir lorsque l'une des personnes sur scène se dirige vers un objet virtuel, en évitant qu'elles ne se chevauchent. Toute la démo est minutieusement chorégraphiée. Sortir du fauteuil lors de la première démo, le gars sur scène se met en face d'un robot virtuel - et, de manière pratique, la caméra est dirigée ailleurs à ce moment précis.

Ils ne font que gâcher quelques fois. Pendant la démonstration du robot, le robot passe brièvement devant quelques points virtuels sur le sol et l'un des présentateurs les franchit. Dans les deux cas, il existe un conflit de profondeur: vous continuez à voir les points virtuels à travers les objets réels, ce qui implique que Microsoft n'a pas encore de solution à ce problème..

Nous pouvons en voir davantage dans la même démo, lorsqu'une visualisation de la carte de l'environnement du casque est affichée. Si vous examinez-le attentivement, vous constaterez que la carte est incorrecte à plusieurs égards: le tableau se trouve sur une plate-forme surélevée, qui devient un renflement vague dans la carte. De même, le robot est visible sur la carte, mais uniquement sous la forme d'une petite masse. Les bords du bureau sont manquants. Vous pouvez probablement attribuer ces problèmes à la résolution limitée du capteur de profondeur Kinect dans le casque. Quoi qu'il en soit, il n’ya tout simplement pas assez de précision pour occlure correctement les objets virtuels..

Soyons clairs: cela pourrait être un obstacle. HoloLens a pour objectif de combiner de manière convaincante des objets réels et virtuels. L'occlusion est une partie nécessaire de l'illusion. Occlusion est un outil de profondeur si puissant qu’ajouter une seule ligne blanche à une vidéo peut créer un effet 3D puissant tout seul..

Microsoft est clairement conscient de cela. Ils montrent une occlusion dans leurs documents promotionnels. Pourtant, d'après leurs démos, il ne semble pas qu'ils puissent le faire. Si Microsoft ne peut pas résoudre ce problème, ils n'ont pas de produit. Les utilisateurs ne vivent pas dans des démonstrations minutieusement chorégraphiées dans des maisons vides. Ils ne toléreront pas d'erreurs de rendu constantes et immersives. Honnêtement, je suis un peu surpris que de plus en plus de la presse spécialisée ne parle pas de ce problème. Je suis très curieux de savoir si Microsoft a l'intention de résoudre ce problème..

Interface utilisateur

Chaque fois que je regarde une vidéo montrant l'interface utilisateur HoloLens, la phrase qui me trottait dans la tête était “Est-ce qu'on va vraiment refaire ça?”

Avec chaque nouvelle plate-forme informatique, à la fois PC et smartphones, nous passons par un cycle de mauvaise interface utilisateur avant de le comprendre. Le problème est que les mauvaises interfaces utilisateur sont mauvaises de la même manière et qu'elles ne le sont pas non plus que l'interface utilisateur HoloLens est mauvaise. Je souhaite, pour une fois, que nous puissions reconnaître le modèle et passer à la bonne partie. Voici ce que HoloLens (et chaque nouvelle plate-forme) fait de travers:

• Tout d'abord, ils essaient de recréer d'anciens paradigmes au lieu d'en créer de nouveaux. Pensez aux anciens smartphones Treo construits autour d'un clavier physique et d'un stylet émulant la souris. Les HoloLens sont exactement les mêmes, utilisant votre tête pour émuler une souris et votre doigt pour cliquer. Heck, à un moment l'ingénieur “traîne” une fenêtre en la verrouillant à sa tête, ce que le guide des meilleures pratiques d’Oculus VR met explicitement en garde. HoloLens n'est pas un PC, et essayer d'utiliser une interface utilisateur pour PC ne va pas marcher.
• Deuxièmement, ils s’enveloppent dans les parties brillantes de l’interface et créent des duvet ornés et inutiles. Tu te souviens de Clippy? Microsoft Bob? Le faux cuir sur l'ancienne application de notes iOS? Ce truc est un fouillis visuel inutile. Le chien virtuel, le bocal à poissons et le robot sont exactement la même chose. Combien de fois devons-nous le faire avant de réaliser que le minimalisme est la seule bonne idée?

Tant que nous y sommes, le “hologrammes” eux-mêmes sont un désordre visuellement. Ils ne peuvent pas décider s'il s'agit de vitres propres ou de bêtises, de blobs de dessins animés. Les éléments de l'interface utilisateur sont trop volumineux et nécessitent des gestes étendus, allant jusqu'à la marche physique, ce qui est une mauvaise conception pour de nombreuses raisons..

Si cela me semble contrarié, c'est parce que les interfaces utilisateur immersives finiront par être vraiment très cool un jour. L'interface utilisateur HoloLens qui a été montrée jusqu'à présent est un gâchis total, et c'est dommage. Une bonne interface utilisateur fait la différence entre le Treo et l'iPhone - entre un ordinateur central IBM et le PC souris / clavier d'origine. C'est la différence entre un jouet pour nerds et une innovation qui change le monde.

Facteur de forme

Il y a une bonne nouvelle importante. Microsoft a apporté “des centaines” HoloLens à la foire, et les montrent aux participants. La dernière fois que Microsoft a fait des démonstrations, les gens étaient attachés à de gros casques filaires. Les casques utilisés sur scène étaient des accessoires ne pouvant afficher qu'une image en noir et blanc à basse résolution. Cependant, le présentateur déclare clairement que les casques sont “aime juste ceux que vous avez vus sur scène aujourd'hui.” En d’autres termes, Microsoft a réussi à miniaturiser le matériel HoloLens pour l’intégrer dans un format portable, ce qui est une excellente nouvelle..

Voici l'expérience d'un développeur avec le nouveau matériel:

“Je suis allé «sur le chantier» et ils ont superposé les plans au mur. Ensuite, je pouvais voir à quoi ressemblait une porte et remarquer qu’un faisceau gênait. Nous avons déménagé la porte, puis nous avons ajouté une couche d’électricité et de plomberie, et nous avons constaté qu’il y avait un tuyau qui gênait. J'ai "regardé et l'air a cliqué" sur le tuyau et laissé une note vocale au plombier pour qu'il éloigne le tuyau.

Puis je suis revenu dans le rôle du plombier et j'ai récupéré ma note (elle était suspendue là), j'ai regardé et j'ai cliqué, et j'ai entendu ma propre voix enregistrée.

Le port de l'appareil nécessite de s'y habituer. Ce n'était pas très bien ajusté et pressé un peu sur mon nez. Mais je pense pouvoir mieux l'ajuster dans le temps.

La zone holographique est moins étendue que je le pensais. C'est un rectangle devant vos yeux, mais si vous avez une bonne vision latérale (comme moi), c'est un peu dérangeant car l'hologramme sera recadré lorsque vous bougerez la tête..

Dans l’ensemble, c’est extrêmement impressionnant et j’ai hâte de le développer..”

Bien que l'auteur note que le champ de vision de l'appareil est toujours faible, il semble impressionné par l'ensemble du matériel, ce qui est un signe prometteur. En fin de compte, l'AR sera un substitut plus puissant et plus flexible à la réalité virtuelle - qui est déjà une technologie étonnante. Pourquoi la technologie de réalité virtuelle va-t-elle souffler dans 5 ans? Pourquoi la technologie de réalité virtuelle va-t-elle souffler dans 5 ans? L'avenir de la réalité virtuelle inclut suivi de la tête, des yeux et de l'expression, simulation du toucher, etc. Ces technologies étonnantes seront disponibles dans 5 ans ou moins. Lire la suite . La grande question est la suivante: à quelle distance sommes-nous??

Support développeur

Bien que cela n’ait pas été mentionné dans la vidéo d’annonce, Microsoft a également annoncé que, via son partenariat avec Unity, HoloLens in Unity serait également pris en charge, ce qui en fait l’un des outils les plus couramment utilisés pour le développement de jeux vidéo indépendants. La prise en charge inclura la possibilité d'effectuer un rendu via HoloLens et d'obtenir des entrées à partir du périphérique de différentes manières. Tant Unity Free que Unity Pro bénéficieront du support gratuit HoloLens. Bien que l'intégration ne soit pas encore terminée, Microsoft donne déjà des cours de courte durée à la conférence Build à l'aide du prototype des intégrations Unity, afin de donner aux développeurs un premier aperçu de ce que sera le codage pour AR..

C'est un geste bienvenu mais pas surprenant. Toute nouvelle plate-forme vit ou meurt de la qualité de son contenu de lancement, et les HoloLens ne feront pas exception. Par ailleurs, Microsoft a toujours été attaché aux relations avec les développeurs.

Fièvre prototype

Les HoloLens se dirigent lentement vers la réalité commerciale. Je garde de profondes réserves au sujet de certaines limitations du matériel, mais le périphérique est indéniablement cool. 8 utilisations réelles de Microsoft HoloLens 8 utilisations réelles de Microsoft HoloLens Microsoft HoloLens de Microsoft est cool, mais à quoi l'utiliserez-vous réellement? Nous courons les possibilités les plus excitantes. Lire la suite, et quelque chose comme ça sera un jour très utile. Êtes-vous excité pour les HoloLens? Avez-vous eu l'occasion d'en essayer un à la conférence? Je veux juste un bocal à poisson virtuel? Faites le nous savoir dans les commentaires!

Explorer plus sur: Microsoft, Virtual Reality, Windows 10.