Une extension Google Slides peut rendre le logiciel de présentation plus accessible aux utilisateurs aveugles

Une extension Google Slides peut rendre le logiciel de présentation plus accessible aux utilisateurs aveugles

Les lecteurs d’écran, qui convertissent le texte numérique en audio, peuvent rendre les ordinateurs plus accessibles à de nombreux utilisateurs handicapés, notamment ceux qui sont aveugles, malvoyants ou dyslexiques. Pourtant, les logiciels de diaporama, tels que Microsoft PowerPoint et Google Slides, ne sont pas conçus pour rendre cohérents les résultats des lecteurs d’écran.

Ces programmes s’appuient généralement sur l’ordre Z, qui suit la façon dont les objets sont superposés sur une diapositive, lorsqu’un lecteur d’écran navigue dans le contenu. Étant donné que l’ordre Z ne rend pas compte de manière adéquate de la manière dont une diapositive est disposée dans un espace bidimensionnel, les logiciels de diaporama peuvent être inaccessibles aux personnes handicapées.

Une équipe dirigée par des chercheurs de l’Université de Washington a créé A11yBoard pour Google Slides, une extension de navigateur et une application téléphonique qui permet aux utilisateurs aveugles de naviguer à travers des présentations de diapositives et du texte complexes. Combinant un ordinateur de bureau avec un appareil mobile, A11yBoard permet aux utilisateurs de travailler avec l’audio, le toucher, les gestes, la reconnaissance vocale et la recherche pour comprendre où se trouvent différents objets sur une diapositive et déplacer ces objets pour créer des mises en page riches. Par exemple, un utilisateur peut toucher une zone de texte sur l’écran et le lecteur d’écran décrira sa couleur et sa position. Ensuite, à l’aide d’une commande vocale, l’utilisateur peut réduire cette zone de texte et l’aligner à gauche avec le titre de la diapositive.

L’équipe a présenté ses recherches le 25 octobre à ASSETS 2023 à New York. A11yBoard n’est pas encore accessible au public.

« Pendant longtemps et encore aujourd’hui, l’accessibilité a souvent été considérée comme : « Nous faisons du bon travail si nous permettons aux personnes aveugles d’utiliser des produits modernes ». Absolument, c’est une priorité », a déclaré l’auteur principal Jacob O. Wobbrock, professeur à l’École d’information de l’UW. « Mais ce n’est que la moitié de notre objectif, car cela consiste uniquement à permettre aux aveugles d’utiliser ce que d’autres créent. Nous voulons donner aux gens les moyens de créer leur propre contenu, au-delà d’une diapositive PowerPoint qui n’est qu’un titre et une zone de texte. »

A11yBoard pour Google Slides s’appuie sur une ligne de recherche menée dans le laboratoire de Wobbrock explorant la manière dont les utilisateurs aveugles interagissent avec les « plans de travail » – des canevas numériques sur lesquels les utilisateurs travaillent avec des objets tels que des zones de texte, des formes, des images et des diagrammes. Le logiciel de diaporama s’appuie sur une série de ces plans de travail.

Lorsque l’auteur principal Zhuohao (Jerry) Zhang, doctorant à l’UW à l’iSchool, a rejoint le laboratoire de Wobbrock, les deux hommes ont cherché une solution aux défauts d’accessibilité des outils de créativité, comme les logiciels de diaporama. S’appuyant sur des recherches antérieures du laboratoire de Wobbrock sur les problèmes rencontrés par les personnes aveugles lors de l’utilisation des plans de travail, Wobbrock et Zhang ont présenté un prototype d’A11yBoard en avril. Ils ont ensuite travaillé pour créer une solution déployable via un logiciel existant, en optant pour une extension Google Slides.

Pour l’article actuel, les chercheurs ont travaillé avec le co-auteur Gene SH Kim, étudiant de premier cycle à l’Université de Stanford et aveugle, pour améliorer l’interface. L’équipe l’a testé avec deux autres utilisateurs aveugles, leur demandant de recréer des diapositives. Les testeurs ont tous deux noté qu’A11yBoard avait considérablement amélioré leur capacité à comprendre le contenu visuel et à créer eux-mêmes des diapositives sans aller-retour constant avec les collaborateurs ; ils n’avaient besoin de faire appel à un assistant voyant qu’à la fin du processus.

Les testeurs ont également souligné des points à améliorer : rester continuellement conscient de la position des objets tout en essayant de les modifier représentait toujours un défi, et les utilisateurs étaient obligés d’effectuer chaque action individuellement, comme aligner plusieurs groupes visuels de gauche à droite, au lieu de compléter ces actions répétées. actions par lots. En raison du fonctionnement de Google Slides, la version actuelle de l’application ne permet pas non plus aux utilisateurs d’annuler ou de rétablir les modifications sur différents appareils.

À terme, les chercheurs prévoient de rendre l’application accessible au public. Mais ils prévoient d’abord d’intégrer un grand modèle de langage, tel que GPT, dans le programme.

« Cela pourrait potentiellement aider les personnes aveugles à créer des diapositives plus efficacement, en utilisant des commandes en langage naturel telles que » Alignez ces cinq cases en utilisant leur bord gauche «  », a déclaré Zhang. « Même en tant que chercheur en accessibilité, je suis toujours étonné de voir à quel point ces outils courants peuvent être inaccessibles. Avec A11yBoard, nous avons décidé de changer cela. »