Menu Fermer

Un développeur apporte les fonctionnalités AR de Google Lens à la réalité virtuelle

Traduction de texte AR en temps réel dans un espace de réalité virtuelle.

En mai dernier, lors de la conférence des développeurs d'E / S 2019, Google a dévoilé plusieurs nouvelles fonctionnalités destinées à ses applications de recherche Google et Lens. Ces ajouts incluent des modèles animés en 3D accessibles directement via Google Search, la possibilité de numériser les menus du restaurant pour obtenir des informations supplémentaires sur les plats recommandés, ainsi que des calculs automatiques des pourboires.

Cependant, l’ajout le plus intéressant est un outil de traduction qui utilise l’appareil photo de votre smartphone pour convertir n’importe quel texte physique – qu’il s’agisse d’un panneau de signalisation, d’un menu de restaurant, d’une brochure ou de toute autre écriture écrite ou imprimée – dans votre langue préférée. temps.

Alors j'ai eu Google Lens travaillant en VR 👀pic.twitter.com/rFCS7nUgbx

– Phasedragon (@Phasedragoon) 22 août 2019

Cette même utilité peut également s'appliquer aux environnements de réalité virtuelle, comme l'a prouvé un développeur indépendant qui a réussi la semaine dernière à importer une version fonctionnelle de l'outil basé sur les AR de Google dans un espace de réalité virtuelle interactif.

Dans une vidéo publiée sur Twitter par l'utilisateur @Phasedragon, on peut voir le développeur bricoler avec une version montée au poignet de Google Lens alors qu'il était en réalité virtuelle, utiliser l'application pour traduire divers textes, notamment une pancarte en bois, des pamphlets et plusieurs bannières. – du coréen à l'anglais.

"Je viens de relier quelques applications, mais je n'ai rien fait de particulier, à part essayer de voir lesquelles ont fonctionné", a déclaré le modeste créateur dans un tweet de suivi. «Sparkocam pour capturer le bureau et l'exporter en tant que webcam virtuelle, l'émulateur de studio Android pour exécuter l'objectif Google et la boîte à outils OVR pour l'afficher en réalité virtuelle.»

Sortir avec @VRDesignGuy traduire toutes les choses! pic.twitter.com/Hr0KQ3MGQ7

– Phasedragon (@Phasedragoon) 23 août 2019

Phasedragon déclare qu'il avait initialement tenté le projet avec Microsoft Translate, mais avait finalement opté pour Google Lens en raison de l'incompatibilité de Translate avec AR.

Avec les applications de réalité virtuelle telles que VRChat, Rec Room, Sansar et d’autres expériences immersives à plusieurs utilisateurs dont la popularité, tant au pays qu’à l’étranger, gagnent en popularité, les bases de lecteurs de réalité virtuelle existantes ne feront que se diversifier. Alors que de plus en plus de cultures commencent à entrer dans l'écosystème, les appareils de traduction tels que Google Lens ne sont peut-être pas seulement un produit utile, mais un produit nécessaire.

Crédit d'image en vedette: Phasedragon

Le poste Développeur apporte les fonctionnalités AR de Google Lens à la VR est apparu en premier sur VRScout.