Android XR : Google confirme l'accès aux caméras pour la MR

Google confirme l'accès aux caméras sur Android XR : un tournant pour les développeurs de réalité mixte

Android XR s'apprête à transformer le monde de la réalité étendue (XR) avec une annonce majeure : les développeurs pourront désormais accéder aux caméras passthrough et de suivi du visage sur les casques XR. Cette avancée permet une expérience de réalité mixte (MR) plus dynamique et immersive, ouvrant ainsi de nouvelles possibilités pour les applications XR.

Comme l'a confirmé Google, les développeurs d'applications Android XR peuvent demander l'autorisation d'accéder à la caméra orientée vers le monde extérieur, qui offre une vue passthrough de l'environnement de l'utilisateur, ainsi qu'à la caméra selfie, qui diffuse une version avatar du visage de l'utilisateur. Cela diffère de l'utilisation traditionnelle des caméras selfie sur les smartphones, car cela garantit la confidentialité de l'utilisateur en fournissant un avatar virtuel plutôt qu'une image réelle de l'utilisateur.

Ce que cela signifie pour les développeurs et les utilisateurs

Contrairement aux plateformes comme Quest de Meta ou Vision Pro d'Apple, qui limitent les développeurs aux données spatiales et aux fonctionnalités de passthrough en arrière-plan, Android XR offre des capacités plus avancées. En utilisant les API Camera2 et CameraX, Android XR permet l'analyse en temps réel des images capturées. Cela permet aux développeurs d'envoyer les images directement à des modèles d'apprentissage automatique, fournissant ainsi des informations plus détaillées sur l'environnement de l'utilisateur et facilitant la création d'expériences MR propulsées par l'IA.

La confidentialité et le contrôle : une priorité pour Android XR

Malgré le potentiel d'une interactivité accrue, Google a fait de la confidentialité une priorité. Les applications demandant l'accès aux caméras doivent d'abord obtenir l'autorisation explicite de l'utilisateur, garantissant que ce dernier contrôle ce qui est capturé et partagé. Cette approche reflète la manière dont les smartphones Android gèrent les autorisations d'accès à la caméra, alignant ainsi Android XR avec l'écosystème mobile plus large, qui inclut la compatibilité des applications entre XR et appareils mobiles.

Cependant, pour l'instant, toutes les caméras des casques XR ne seront pas accessibles aux applications. Les caméras non standard, telles que les caméras orientées vers l'avant ou les caméras internes reconstruites, ne sont pas accessibles via les API d'Android XR. Cette décision permet de protéger la vie privée des utilisateurs tout en permettant la création de contenus MR riches en utilisant les caméras orientées vers le monde extérieur et les caméras selfie.

L'avenir d'Android XR et le Samsung Project Moohan

Android XR est encore en phase de prévisualisation et bien que le premier appareil utilisant cette plateforme, le Samsung Project Moohan, n'ait pas encore été officiellement lancé, les développeurs et les utilisateurs attendent avec impatience sa sortie publique. Le succès à long terme de la plateforme dépendra de la manière dont elle trouvera un équilibre entre innovation, confidentialité et sécurité, notamment en offrant de nouvelles opportunités pour le développement de la réalité mixte.

Dans les mois à venir, Android XR devrait jouer un rôle clé dans l'évolution des technologies XR, promettant d'apporter des expériences immersives et améliorées par l'IA aux utilisateurs et aux développeurs. Pour l'instant, il reste à voir quelles fonctionnalités seront incluses dans la première version officielle, mais une chose est claire : Android XR est un pas en avant prometteur dans l'évolution de la réalité mixte.

La décision de Google de permettre aux applications d'accéder aux caméras passthrough et de suivi du visage sur Android XR représente un tournant majeur dans l'espace XR. En donnant aux développeurs l'accès à ces flux de caméras essentiels, Google ouvre de nouvelles possibilités pour des expériences MR plus immersives et interactives. Cependant, la confidentialité et le contrôle resteront des considérations clés, et il sera intéressant de voir comment Google gérera cet équilibre délicat à l'avenir.