Le robot remplaçant imite vos mouvements en VR
Des chercheurs de Cornell et de l’Université Brown ont développé un robot de téléprésence optimisé qui répond automatiquement et en temps réel aux mouvements et aux gestes d’un utilisateur distant effectués en réalité virtuelle.
Le système robotique, appelé VRoxy, permet à un utilisateur distant dans un petit espace, comme un bureau, de collaborer via VR avec des coéquipiers dans un espace beaucoup plus grand. VRoxy représente la dernière incarnation robotique à distance des chercheurs du Cornell Ann S. Bowers College of Computing and Information Science.
« Le grand avantage de la réalité virtuelle est que nous pouvons exploiter toutes sortes de techniques de locomotion que les gens utilisent dans les jeux de réalité virtuelle, comme passer instantanément d’une position à une autre », a déclaré Mose Sakashita, doctorant dans le domaine des sciences de l’information. « Cette fonctionnalité permet aux utilisateurs distants d’occuper physiquement un espace très limité mais de collaborer avec leurs coéquipiers dans un environnement distant beaucoup plus vaste. »
Sakashita est l’auteur principal de « VRoxy : Wide-Area Collaboration From an Office Using a VR-Driven Robotic Proxy », qui sera présenté au Symposium ACM sur les logiciels et technologies d’interface utilisateur (UIST), qui s’est tenu du 29 octobre au 1er novembre. à San Francisco.
Selon les chercheurs, la réactivité automatique et en temps réel de VRoxy est essentielle pour les coéquipiers distants et locaux. Avec un robot proxy comme VRoxy, un coéquipier distant confiné dans un petit bureau peut interagir dans une activité de groupe organisée dans un espace beaucoup plus grand, comme dans un scénario de collaboration de conception.
Pour les coéquipiers, le robot VRoxy imite automatiquement la position du corps de l’utilisateur et d’autres signaux non verbaux vitaux qui seraient autrement perdus avec les robots de téléprésence et sur Zoom. Par exemple, le moniteur de VRoxy, qui affiche un rendu du visage de l’utilisateur, s’inclinera en conséquence en fonction de la concentration de l’utilisateur.
VRoxy s’appuie sur un robot Cornell similaire appelé ReMotion, qui ne fonctionnait que si les utilisateurs locaux et distants disposaient du même matériel et d’espaces de travail de taille identique. Cela a changé avec VRoxy. Le système mappe les petits mouvements des utilisateurs distants en VR aux mouvements plus importants dans l’espace physique, ont indiqué les chercheurs.
VRoxy est équipé d’une caméra à 360 degrés, d’un moniteur qui affiche les expressions faciales capturées par le casque VR de l’utilisateur, d’un doigt pointeur robotique et de roues omnidirectionnelles.
Enfilant un casque VR, un utilisateur VRoxy a accès à deux modes d’affichage : le mode Live affiche une image immersive de l’espace collaboratif en temps réel pour les interactions avec les collaborateurs locaux, tandis que le mode navigation affiche les parcours rendus de la pièce, permettant aux utilisateurs distants de se « téléporter ». » là où ils aimeraient aller. Ce mode de navigation permet une mobilité plus rapide et plus fluide pour l’utilisateur distant et limite le mal des transports, selon les chercheurs.
La nature automatique du système permet aux coéquipiers distants de se concentrer uniquement sur la collaboration plutôt que sur le pilotage manuel du robot, ont indiqué les chercheurs.
Dans ses travaux futurs, Sakashita souhaite doter VRoxy de bras robotiques qui permettraient aux utilisateurs distants d’interagir avec des objets physiques dans l’espace réel via le proxy du robot. Ailleurs, il imagine VRoxy faire sa propre cartographie d’un espace, un peu comme un aspirateur Roomba. Actuellement, le système s’appuie sur des marqueurs de plafond pour aider le robot à naviguer dans une pièce. L’extension prenant en charge la cartographie en temps réel pourrait permettre le déploiement de VRoxy dans une salle de classe, a-t-il déclaré.
