2024-01-26 01:07:38
Un projet de chercheurs de Reality Labs, la division XR de Meta, montre une méthode permettant d’interagir avec le monde réel grâce à la réalité augmentée.
Je suis à peu près aussi expérimenté qu’eux en ce qui concerne l’espace XR. Je vois tout le temps des articles de recherche qui sont intéressants mais qui, en fin de compte, constituent un pas de plus sur un chemin prévisible. Il est rare que je tombe sur quelque chose que je n’avais jamais envisagé conceptuellement. Mais ce nouveau projet de recherche de Reality Labs est exactement cela.
En fait, c’est tellement différent que c’est difficile à expliquer.
Des chercheurs du Meta Reality Labs Research et de l’Université de Duisburg-Essen ont mis au point une méthode permettant de rendre virtuels des objets réels afin de pouvoir interagir avec eux en temps réel. Non seulement en numérisant les objets, mais aussi en effaçant de manière transparente leurs homologues réels, la méthode crée un mélange époustouflant entre les mondes réel et virtuel. La vidéo ci-dessous avec des exemples l’explique mieux que je ne le pourrais avec du texte seul :
Les chercheurs Mohamed Kari, Reinhard Schütte et Raj Sodhi appellent ce concept «Réactivité de la scène‘ et a publié son travail à la fin de l’année dernière au Symposium ACM sur les logiciels et technologies d’interface utilisateur.
Comme le disent les auteurs, cette méthode crée une « illusion visuelle selon laquelle les actions virtuelles affectent la scène physique ».
Qu’est-ce qui rend cela si intéressant ? Nous avons tous vu des démos AR dans lesquelles des objets virtuels semblent flotter dans votre pièce, s’attacher à vos murs ou même marcher « derrière » des objets. Et nous avons vu des objets virtuels qui semblent respecter la physique de la pièce en roulant sur une table puis en tombant correctement lorsqu’ils atteignent le bord.
Mais numériser les objets réels dans l’espace pour donner à l’utilisateur un contrôle virtuel sur eux – tout en effaçant l’objet réel là où il se trouvait autrefois – c’est une astuce sacrément intéressante. Ce qui est peut-être encore plus puissant lorsque les personnages virtuels de la scène semblent interagir directement avec des objets du monde réel.
J’apprécie tout à fait que les auteurs aient même franchi l’étape suivante et montré comment empêcher l’illusion de se briser.
Donner à l’utilisateur le contrôle d’un objet virtualisé (apparemment « réel »), mais ne pas lui permettre de s’approcher suffisamment pour toucher réellement l’objet, signifie que l’attente d’un retour tactile ne peut pas être brisée. Et un autre détail astucieux est d’empêcher les utilisateurs de tomber sur des objets effacés de la scène en les faisant réapparaître. seulement s’ils s’approchent trop.
Ce qui a été montré dans l’œuvre est visuellement imparfait et constitue en grande partie une preuve de concept qui repose sur de nombreux travaux manuels spécifiques à la scène. Mais avec les progrès rapides de la vision par ordinateur et de l’intelligence artificielle, il n’est pas difficile d’imaginer comment un tel système pourrait être construit de manière automatique et indépendante de la scène, et pourrait être très convaincant.
Les auteurs ont des idées étonnamment créatives pour des applications pratiques de ce type d’illusion de réalité augmentée, notamment « pour la santé, nous imaginons que lorsque l’utilisateur tend la main vers une barre de chocolat malsaine, elle se transforme en quelque chose de moins attrayant, comme une araignée. Ou encore, la barre de chocolat fait pousser des jambes, s’enfuit, se transforme en banane en courant et se rephysicalise à l’emplacement d’une banane physique.
Donc, si, à l’avenir, nous nous retrouvons à courir après une barre de chocolat magique pour découvrir qu’elle s’est transformée en banane au moment où nous l’atteignons, nous saurons exactement qui blâmer.
#recherche #Meta #Reality #Labs #montre #des #capacités #époustouflantes
1706234101
