Une nouvelle photo de Magic Leap 2 semble montrer le contrôleur de l'appareil équipé de caméras pour un suivi à l'envers, ce qui serait la première fois que nous voyions l'approche utilisée dans un casque XR commercial.
Bien que nous ayons appris de nombreux détails intéressants sur le prochain casque Magic Leap 2 AR en janvier, il semble qu'il reste encore quelques secrets à découvrir.
Une photo de Magic Leap 2 publiée par Peter H. Diamandis est, à notre connaissance, la première fois que nous avons un aperçu clair de l'avant du contrôleur Magic Leap 2. La photo montre clairement ce qui semble être deux capteurs de caméra sur le contrôleur, indiquant une forte probabilité qu'il ait un suivi intégré à l'envers.
Le Magic Leap 1 original avait également un contrôleur de mouvement, mais il utilisait un suivi magnétique. C'était la raison pour laquelle le carré curieux sortait du côté droit du casque (il contenait un récepteur qui détectait le champ magnétique émis par le contrôleur).
Magic Leap 2 a abandonné le carré et semble passer à un suivi entièrement intégré pour son contrôleur. À notre connaissance, ce sera la première fois qu'un casque XR commercial utilise cette approche ; c'est-à-dire en supposant que Magic Leap 2 bat le projet Cambria de Meta sur le marché (ce dernier devrait également utiliser le suivi intégré pour ses contrôleurs, sur la base de certains détails divulgués, même si cela n'a pas encore été confirmé).
D'autres casques XR autonomes, comme Quest 2, utilisent généralement un suivi intérieur-extérieur basé sur un casque pour suivre leurs contrôleurs (ou les mains de l'utilisateur). Autrement dit : les caméras sur le casque recherchent les contrôleurs (généralement équipés de LED IR) et utilisent leur emplacement pour cartographier leur mouvement par rapport au casque.
Bien que cette approche se soit avérée efficace, elle ne fonctionne que lorsque les contrôleurs sont en vue des caméras du casque. Cela signifie qu'il est possible que le casque perde la trace des contrôleurs s'ils passent trop de temps en dehors de la vue de la caméra (comme si vous les teniez trop bas, trop haut ou derrière votre dos). Mettre des caméras sur les contrôleurs eux-mêmes permettrait un suivi à l'envers qui, en théorie, a une couverture, peu importe où l'utilisateur le tient.
Au-delà de la couverture de suivi "n'importe où", mettre le suivi à l'envers directement sur le contrôleur signifie que le casque n'aurait pas besoin d'être couvert par autant de caméras (Quest 2 utilise quatre caméras tandis que Rift S en tête à cinq), et cela signifie l'élimination des «anneaux de suivi» (vus sur la plupart des contrôleurs de casque autonomes), ce qui les rend plus élégants et peut-être moins sujets à la casse.
Il y a aussi plus d'avantages potentiels. Donner aux contrôleurs leur propre suivi à l'envers pourrait faciliter l'utilisation d'une combinaison de méthodes de saisie, comme un contrôleur dans une main et un suivi manuel sans contrôleur dans l'autre. Actuellement, c'est un défi car les caméras des casques ont tendance à utiliser des paramètres d'exposition différents pour les contrôleurs de suivi par rapport au suivi des mains. De plus, le découplage du suivi du contrôleur du casque a le potentiel de réduire la latence du suivi du contrôleur.
Mais, comme on dit, il n'y a pas de repas gratuit. Donner aux contrôleurs intégrés un suivi à l'envers signifie probablement mettre un processeur dédié à l'intérieur avec suffisamment de puissance pour croquer les images entrantes et calculer une position, ce qui devrait entraîner des coûts plus élevés et plus de décharge de la batterie par rapport à de simples LED IR allumées- planche.
Il y a aussi le problème du flou de mouvement pour les caméras embarquées. Bien qu'il ait été démontré que le suivi de l'intérieur vers l'extérieur fonctionne bien pour les casques, les contrôleurs peuvent se déplacer beaucoup plus rapidement, en particulier pendant les jeux intenses - si vite, en fait, qu'il a incité Valve à mettre à jour sa technologie de suivi SteamVR pour tenir compte de la vitesse de pointe Beat Saber joueurs.
Comme vous pouvez l'imaginer, faire pivoter une caméra aussi rapidement est susceptible d'induire un flou de mouvement sur le capteur d'image, en particulier dans les scènes plus sombres où le temps d'exposition doit être augmenté pour recueillir plus de lumière.
Bien sûr, Magic Leap 2 n'est pas destiné aux joueurs, il est donc possible que cela ne soit pas un problème pour les cas d'utilisation du casque axés sur l'entreprise. Ou peut-être que les capteurs d'image des contrôleurs sont suffisamment rapides pour éviter le flou de mouvement même lors de mouvements rapides ?
Il est fort probable que les capteurs ne soient pas au-dessus de la moyenne, mais le contrôleur s'appuiera simplement principalement sur le suivi basé sur l'IMU jusqu'à ce que le contrôleur ralentisse suffisamment pour obtenir une position appropriée (c'est la même approche que les casques autonomes existants utilisent pour gérer les contrôleurs qui quittent occasionnellement le champ de vision du casque).
Dans tous les cas, nous en saurons plus à mesure que Magic Leap 2 approchera de la disponibilité commerciale. Le casque devrait être lancé cette année, mais aucune date de sortie précise n'a encore été annoncée. Dans le tweet qui comprenait la photo du contrôleur, Peter H. Diamandis a déclaré qu'il accueillerait Peggy Johnson, PDG de Magic Leap, lors de son événement Abundance 360 fin avril, ce qui pourrait signaler la prochaine fois que la société divulguera des détails officiels sur le casque.
Note de la rédaction: Avant que quelqu'un dans les commentaires ne dise "Les contrôleurs de suivi SteamVR Tracking effectuent un suivi à l'envers depuis des années!" la langue vernaculaire de l'industrie ne considère pas les systèmes utilisant des marqueurs artificiels comme un « suivi à l'envers ».
