Menu Fermer

Le suivi de la main arrive aux lunettes Nreal AR – VRScout

Le suivi de main haute fidélité vous permet de pincer, d’attraper et de zoomer en RA.

NrealLe système 3D de Nebula fait l’objet d’une mise à jour importante qui permettra de suivre la main des lunettes Nreal Light AR, permettant aux utilisateurs d’interagir avec des objets numériques en 3D grâce à de multiples gestes de la main, ce qui rendra la possession d’une paire de lunettes Nreal Light encore plus utile pour une utilisation quotidienne au travail, dans les environnements d’apprentissage et pour rester en contact avec ses amis et sa famille.

Le suivi haute-fidélité des mains pour le système de la nébuleuse Nreal est le fruit d’un partenariat avec Clay AIRune société de suivi des mains et de reconnaissance des gestes qui a travaillé sur un logiciel d’interaction très précis et agnostique au niveau matériel pour soutenir des solutions de contrôle optique des mains pour des clients tels que Lenovo, Bose, Qualcomm et Thales.

(Crédit image : Nreal)

Avec le suivi des mains déjà disponible sur des appareils tels que le Magic Leap 1, l’HoloLens 2 de Microsoft, et maintenant sur l’Oculus Quest, Nreal comprend que si elle veut rester compétitive sur ce marché, elle devra également offrir le suivi des mains à ses consommateurs ainsi qu’aux 3 500 créateurs qui développent des expériences de RA à l’échelle mondiale sur les lunettes Nreal Light.

Afin d’apporter le suivi de la main aux lunettes Nreal Light, Clay AIR a tiré parti des caméras spatiales intégrées au casque pour superposer un modèle de squelette de main en 3D et en full HD sur votre main physique. Le mouvement de votre main est ensuite suivi et rendu en temps réel à l’aide d’algorithmes d’apprentissage profond de pointe.

(Crédit image : Nreal)

Si vous possédez un jeu de lunettes Nreal Light’s AR ou si vous êtes un développeur, l’une de vos premières questions concernant le suivi de main natif est de savoir quel sera l’impact de cette fonctionnalité sur la durée de vie de la batterie. La réponse à cette question est, étonnamment, peu de choses. Vous ne devriez pas voir de contrainte supplémentaire sur la batterie de vos lunettes ou de tout smartphone Qualcomm Snapdragon 855 5G connecté.

Nreal va bientôt lancer le suivi des mains par le biais de son propre SDK. Cette fonctionnalité peut être facilement déployée sur des applications Android natives fonctionnant sur le système 3D de Nreal, telles que Facebook, Spotify, Netflix et Instagram. En tant que développeur, vous pourrez créer des expériences personnalisées de suivi de la main qui comprennent des modèles de main en 3D, des doigts séparés, une boîte de délimitation, des curseurs et des peaux personnalisées.

(Crédit image : Nreal)

La bibliothèque de gestes fournie par Clay AIR comprendra, entre autres options personnalisables, le pincement, le pointage, la saisie, le glissement et le zoom.

Dans un communiqué de presse officiel de Nreal, Chi Xu, PDG et fondateur de Nreal, a déclaré : « En proposant le suivi des mains avec Clay AIR, Nreal offre à ses développeurs et utilisateurs du kit grand public Nreal Light un degré de flexibilité supplémentaire dans la manière dont ils pourraient vouloir interagir avec leur environnement de RM », ajoutant : « qu’il s’agisse du suivi des mains, de leur smartphone 5G comme contrôleur, d’un contrôleur tiers 6DoF, ou même dans un futur proche du suivi des yeux en partenariat avec 7invensun ».

L’introduction de cette nouvelle fonctionnalité dans le système de la nébuleuse de lumière Nreal consiste en fait à créer une expérience matérielle et logicielle conviviale qui puisse mettre la RA à la portée du plus grand nombre sans la rendre trop complexe. « La technologie de suivi des mains et de reconnaissance des gestes est un catalyseur nécessaire pour rendre la RA accessible et pratique à l’échelle mondiale », a déclaré Thomas Amilien, PDG de Clay AIR.

En définitive, ce partenariat marque un point d’inflexion important avec la première intégration du suivi de la main via des caméras monochromes intégrées déjà utilisées pour le suivi spatial en RA, en conjonction avec un partenariat élargi avec Deutsche Telekom.

Au final, cette nouvelle fonctionnalité est une grande victoire pour Nreal, Clay AIR et, plus important encore, pour les consommateurs. C’est l’adoption par les consommateurs qui fera avancer la RA. Il nous faut juste arriver à un point où les utilisateurs peuvent accéder à des expériences de RA robustes sans avoir à porter des appareils lourds et encombrants.

Ce partenariat pourrait bien nous permettre d’y arriver.

Crédit photo : Nreal

Cet article a été rédigé par Bobby Carlton et traduit par VR360inside. Les produits sont sélectionnés de manière indépendante. VR360inside perçoit une rémunération lorsqu’un de nos lecteurs procède à l’achat en ligne d’un produit mis en avant.