Nouvelles

Nov 25, 2023

Mains en verre intelligentes Xiaomi AR

Le Xiaomi Wireless AR Smart Glass Explorer Edition Mobile World Congress 2023

L'édition Xiaomi Wireless AR Smart Glass Explorer

Le Mobile World Congress 2023 vient de démarrer à Barcelone, et Xiaomi fait déjà connaître sa présence avec un événement physique en direct pour lancer sa série de téléphones phares Xiaomi 13 et une annonce surprise d'un prototype de lunettes intelligentes AR (réalité augmentée) véritablement sans fil.

Le mot-clé ici est "prototype", car les lunettes ne seront apparemment pas en vente de si tôt. Je ne sais pas pourquoi, car je l'ai testé à huis clos, et il se sentait plus poli et "prêt" que la plupart des prototypes de preuve de concept.

Le nom officiel des lunettes est Xiaomi Wireless AR Smart Glass Explorer Edition, et comme son nom l'indique, les lunettes sont entièrement sans fil. Cela seul est impressionnant, car toutes les autres lunettes AR grand public de marques comme nReal et TCL nécessitent un câble pour se brancher sur un appareil hôte. Les ingénieurs de Xiaomi affirment avoir développé une liaison de communication propriétaire à faible latence qui permet à la connexion sans fil entre le verre intelligent et l'appareil hôte d'atteindre une latence de seulement 50 millisecondes, ce qui est suffisamment faible pour que l'humain moyen ne puisse pas détecter le décalage. J'ai fait une démonstration des lunettes pendant 30 minutes et je ne pouvais certainement pas le dire.

Le verre intelligent utilise une paire d'écrans MicroOLED pour produire des visuels avec 58PPD (pixel par degré), ce qui, encore une fois, est suffisamment haute résolution pour que les yeux humains ne puissent pas détecter les visuels. Le contenu diffusé devant mon visage semblait vibrant et vif, et semblait flotter devant moi.

La puce Snapdragon XR2 Gen 1 de Qualcomm, spécialement conçue pour ces casques de réalité mixte/réalité augmentée, est utilisée pour alimenter le verre intelligent. Compte tenu de la technologie et de la taille légèrement plus grande que d'habitude, les lunettes peuvent être considérées comme légères à 126 g.

Les lunettes Xiaomi AR sont relativement légères à 126g.

Xiaomi dit qu'il a été en mesure de maintenir un poids faible (relativement) en construisant les verres avec un alliage de magnésium et de la fibre de carbone, ainsi qu'une batterie d'anode silicium-oxygène auto-conçue qui est de plus petite taille.

Le verre intelligent comporte deux caméras et un capteur sur sa face avant qui sont utilisés pour cartographier l'espace physique devant le porteur, après quoi les lunettes peuvent projeter des visuels et des graphiques sur le "monde réel". La démo que j'ai essayée comprenait un jeu de tir dans lequel j'ai planté une station de base de mitrailleuse sur une vraie table devant moi, et j'ai dû abattre des animaux de type extraterrestre qui marchaient vers moi. Une autre démo m'a fait basculer un interrupteur virtuel pour allumer ou éteindre une vraie lampe Xiaomi qui se trouvait dans la chambre d'hôtel.

Les commandes peuvent être effectuées via l'interaction avec le smartphone connecté ou avec des gestes de la main. Ce dernier est une autre percée futuriste. Jusqu'à présent, les lunettes AR exigent que les utilisateurs portent des gants ou des capteurs manuels pour les mouvements de la main, mais la solution de Xiaomi permet aux capteurs de détecter mon bras, ma main et mes doigts si je les place devant les lunettes.

Une image promotionnelle publiée par Xiaomi montrant le geste de la main en action.

Une image grossièrement capturée de ce que j'ai vu en portant les lunettes.

Je peux aussi simplement utiliser le verre intelligent Xiaomi comme écran portable, soit en lisant une vidéo sur un immense écran virtuel immersif, soit en ayant plusieurs fenêtres flottant devant moi. La possibilité de tendre le bras pour déplacer les fenêtres était vraiment futuriste. Les ingénieurs de Xiaomi ont comparé l'expérience à Iron Man des mouvements Marvel. J'ai une référence plus ancienne : on dirait Tom Cruise dans Minority Report.

Une scène de Minority Report.

Lors de la visualisation de vidéos, vous voudrez peut-être bloquer la vue transparente des lunettes pour obtenir plus d'immersion (la vidéo flotte donc simplement sur un écran noir). La plupart des lunettes AR grand public ont désormais un cache-objectif physique. Le prototype de Xiaomi utilise à la place la technologie électrochromique pour assombrir l'objectif.

Les verres peuvent être transparents (ci-dessus) ou grisés (ci-dessous).

Regarder YouTube sur les lunettes.

Je suis sorti de la session de démonstration très impressionné et souhaitant que ceux-ci soient publiés bientôt. J'utilise quotidiennement des lunettes AR (j'utilise le nReal Air) comme écran portable, et le câble nécessaire me gêne constamment. Même dans sa forme actuelle, l'édition Wireless AR Smart Glass Explorer de Xiaomi peut déjà faire plus que n'importe quelle autre lunette AR actuellement sur le marché.

Une image promotionnelle montrant les lunettes.

J'ai demandé à un représentant de Xiaomi pourquoi la société fabrique ces prototypes de produits qui ne sont apparemment pas prêts à être commercialisés de sitôt (la société a présenté l'année dernière un prototype de chien robot et, quelques années auparavant, un téléphone avec un écran enveloppant). Le représentant dit que les ingénieurs de Xiaomi aiment se lancer dans des prototypes pour repousser les limites et tester ce qui est possible. Et même si le produit prototype réel ne sera jamais commercialisé en tant que produit grand public, la technologie derrière le produit peut être affinée pour les produits Xiaomi ultérieurs.

Le chien robot prototype de Xiaomi.

Il cite le chien robot (officiellement nommé Xiaomi Cyber ​​Dog) comme exemple : il est clair que la plupart des gens n'achèteront pas de chien robot de si tôt, mais la puce d'apprentissage automatique et la technologie de reconnaissance de scène qui alimentent le chien peuvent être utilisées dans d'autres produits Xiaomi qui ont une utilisation plus pratique dans le monde réel.

Et finalement, "c'est juste amusant de construire ces choses", a-t-il déclaré. Je suis d'accord.