Meta , anciennement Facebook, a présenté SceneScript, sa dernière avancée en matière de recherche sur l'intelligence artificielle, qui s'apprête à révolutionner la réalité mixte. Ce système de pointe promet d'améliorer les capacités de compréhension spatiale des casques et lunettes de réalité virtuelle, leur permettant d'interpréter l'agencement des pièces et la disposition du mobilier avec une précision et une efficacité sans dent .
Des expériences de réalité mixte enrichissantes
SceneScript exploite la même technique fondamentale que les grands modèles de langage (LLM), mais se concentre spécifiquement sur la compréhension spatiale dans les environnements 3D. En analysant les captures de nuages de points 3D — déjà familières aux utilisateurs de casques de réalité virtuelle avancés pour tracde position — SceneScript prédit les éléments architecturaux et le mobilier, générant des formes 3D primitives qui délimitent les contours des différents objets dans une pièce.
Le casque Quest 3 de Meta, réputé pour sa capacité à générer des maillages 3D bruts d'environnements, ne peut actuellement pas distinguer des éléments spécifiques tels que les portes, les fenêtres, les tables, les chaises et les canapés au sein de ces maillages. Bien que les utilisateurs puissent les sélectionner manuellement, ce processus est fastidieux et facultatif, ce qui pose problème aux développeurs qui ont besoin de données spatiales précises.
L'intégration de SceneScript à la configuration des scènes de réalité mixte du Quest 3 pourrait révolutionner la création de contenu en permettant aux développeurs de positionnermaticles éléments virtuels par rapport au mobilier. Ce processus simplifié élimine le marquage manuel des objets et l'interprétation algorithmique, ouvrant la voie à des expériences immersives où le contenu virtuel interagit de manière fluide avec l'environnement physique.
Exploiter le potentiel des assistants IA
Au-delà de l'amélioration des expériences de réalité mixte, SceneScript recèle un immense potentiel pour les assistants IA des futurs casques et lunettes de réalité augmentée. Meta envisage des scénarios où les utilisateurs pourront exploiter de l'IA pour évaluer les contraintes spatiales, par exemple pour déterminer si un bureau rentre dans une chambre ou calculer la quantité de peinture nécessaire pour couvrir une pièce. De plus, des commandes intuitives telles que « Placez l'application [RA/RM] sur la grande table » pourraient simplifier les interactions des utilisateurs et accroître leur productivité.
Bien que SceneScript de Meta représente une avancée significative dans la compréhension spatiale pilotée par l'IA, cette technologie demeure au stade de la recherche, sans projet d'intégration immédiate dans des produits commerciaux. Cependant, la perspective d'une fusion harmonieuse des environnements virtuels et physiques est porteuse d'espoir pour l'avenir de la réalité mixte, offrant des possibilités illimitées d'innovation et d'expériences immersives.
La présentation de SceneScript par Meta marque un tournant décisif dans l'évolution de la réalité mixte. En exploitant la puissance de l'IA avancée, SceneScript promet de transformer la façon dont les casques et lunettes perçoivent et interagissent avec les espaces physiques, jetant ainsi les bases d'expériences immersives qui brouillent les frontières entre le réel et le virtuel. Si la commercialisation de cette technologie reste encore à venir, son potentiel révolutionnaire pour la création de contenu et les interactions utilisateur est indéniable, annonçant une nouvelle ère pour l'informatique spatiale et l'innovation pilotée par l'IA.
