Faciliter la navigation des personnes malvoyantes grâce à la réalité augmentée

Faciliter la navigation des personnes malvoyantes grâce à la réalité augmentée

La perte de vision et la déficience visuelle sont depuis longtemps une préoccupation majeure pour le bien-être humain dans une population de plus en plus vieillissante. Dans le cadre d'un effort collaboratif, des chercheurs de l'Université polytechnique de Hong Kong (PolyU) et de l'Université de Waterloo ont inventé un appareil révolutionnaire qui utilise la technologie de la réalité augmentée (RA), révolutionnant la navigation des personnes malvoyantes dans leur monde. Cet appareil leur offre un nouveau sentiment d'indépendance et de liberté.

Le projet de recherche « Détection d'obstacles en réalité augmentée » (ObstAR) est dirigé par le professeur Allen Cheong, directeur associé (engagement national et international) et professeur à l'École d'optométrie de PolyU, et directeur adjoint du Centre de recherche sur les yeux et la vision (CEVR), en collaboration avec le professeur Ben Thompson, président de recherche universitaire et professeur à l'École d'optométrie et des sciences de la vision de l'Université de Waterloo, et directeur général et directeur scientifique du CEVR. La recherche vise à développer un dispositif de navigation basé sur la réalité augmentée qui permet aux personnes malvoyantes de minimiser leur dépendance aux outils d'assistance conventionnels, comme les cannes de marche ou l'aide d'autrui. Le CEVR est un partenariat entre PolyU et l'Université de Waterloo, opérant dans le cadre du pôle Health@InnoHK.

Le professeur Cheong a déclaré : « Les personnes ayant une déficience visuelle peuvent rencontrer diverses formes de perte de vision, qui peuvent être attribuées à des troubles neurologiques ou oculaires ou même au processus naturel de vieillissement. Des solutions de navigation sur mesure sont nécessaires pour répondre aux besoins des personnes. Le professeur Cheong se spécialise dans la réadaptation gériatrique et visuelle, dirigeant la clinique de réadaptation visuelle de la clinique d'optométrie PolyU.

Recherche clinique pour des applications pratiques

La recherche combine une étude clinique qui examine le comportement des patients malvoyants et des participants en bonne santé lorsqu'ils naviguent parmi des obstacles familiers et inconnus, avec la mise en œuvre pratique d'une aide à la navigation construite à l'aide de lunettes AR et d'un algorithme de reconnaissance d'intelligence artificielle.

Pour améliorer la capacité à reconnaître l'environnement et à éviter les obstacles, l'appareil intègre une suite d'algorithmes avancés, notamment la navigation par évitement d'obstacles, la reconnaissance et la segmentation d'objets, la reconnaissance de scènes, la reconnaissance de texte et la reconnaissance de gestes. Cette approche globale vise à répondre aux divers besoins de navigation des patients, en garantissant une navigation sûre et une meilleure connaissance de l'environnement.

L'un des principaux axes de recherche consiste à identifier des zones d'intérêt spécifiques (AOI), telles que les feux de circulation, les passages piétons, les virages serrés et les grandes bannières. Ce guidage personnalisé peut grandement bénéficier aux utilisateurs qui empruntent fréquemment les mêmes itinéraires, car le système peut offrir un soutien personnalisé en fonction de leur familiarité avec l'environnement.

Naviguer vers une nouvelle frontière

La conception distinctive d'ObstAR réside dans le développement d'un algorithme innovant de segmentation d'images et de fusion d'informations, utilisant des caméras RVB (rouge, vert, bleu) et de profondeur pour permettre une navigation évitant les obstacles en temps réel. Cette avancée permet d'identifier des chemins navigables plus éloignés dans la zone de capture de la caméra, tout en permettant une reconnaissance plus précise des obstacles difficiles à identifier à l'aide des techniques traditionnelles de segmentation d'images. En outre, l'équipe vise à intégrer des instructions de synthèse vocale en temps réel pour compléter les zones non couvertes par la réalité augmentée, garantissant ainsi un support complet aux utilisateurs.

ObstAR est notamment à l’avant-garde des technologies d’assistance, offrant une solution transformatrice pour les personnes malvoyantes. Il a reçu la prestigieuse « Médaille d'Or avec Félicitations du Jury » lors de la 49ème Expo des Inventions de Genève.

Le professeur Cheong a déclaré : « Les progrès de la RA et son acceptation croissante fournissent une plate-forme idéale pour introduire cette nouvelle forme de technologie d'assistance. Ce projet démontre pleinement l'immense potentiel de la technologie pour améliorer la qualité de vie des personnes malvoyantes. ouvrent de nouvelles possibilités pour la liberté de mobilité et l'inclusion sociale des personnes malvoyantes.

Les recherches du professeur Cheong portent sur les aspects psychophysiques, comportementaux et cliniques du vieillissement et de la basse vision. Son objectif principal est d'utiliser différentes interventions pour améliorer les performances fonctionnelles des patients dans les activités quotidiennes, telles que la lecture, la mobilité et la navigation. La recherche vise également à établir des modèles de réadaptation visuelle rentables pour améliorer la qualité de vie des patients.

Le professeur Cheong estime que l'ObstAR a un impact potentiel profond. Les utilisateurs pourraient gagner en confiance pour relever les défis quotidiens, améliorant ainsi leurs performances fonctionnelles et leur bien-être général. « Nous avons pour mission de redéfinir l'indépendance des personnes vivant avec une perte de vision. Il ne s'agit pas seulement de créer un produit innovant, mais d'apporter des changements et des améliorations à leur vie », a-t-elle déclaré.