Étude de l'utilisation de l'information tridimensionnelle dans les systèmes de substitution sensorielle de la vision vers l'audition

Au Canada, plus 756000 personnes sont atteintes de pertes visuelles partielles ou totales. Les
\nimplants rétiniens sont coûteux et lourds à mettre en place. Les systèmes de substitution sensorielle
\nde la vision vers l’audition (VASSDs), qui encodent l’environnement visuel en sons, sont des
\ntechnologies alternatives aux implants rétiniens, non invasives et peu coûteuses. Les VASSDs
\nrécents utilisent des caméras 3D, ce qui permet de transmettre directement l’information de
\nprofondeur aux utilisateurs. Bien que ces systèmes soient prometteurs, leur utilisation reste
\npour le moment limitée aux laboratoires de recherche. Le but de cette thèse est de permettre la
\nconception de VASSDs plus efficaces afin qu’ils soient adoptés de façon généralisée. Nous avons
\ndonc conduit des expériences permettant d’analyser et comprendre comment les utilisateurs se
\ncomportent avec ces systèmes, de choisir pertinemment les informations visuelles à encoder et de
\ndévelopper des règles d’encodage de l’information visuelle en sons qui soient intuitives.
\nNous avons d’abord quantifié les potentiels avantages de l’ajout de l’encodage sonore de la
\nprofondeur dans les systèmes récents. Pour cela, nous avons développé et réalisé des expériences
\nde localisation et de déplacement à l’aveugle avec un système comportant un mode 2D et 3D.
\nLes deux modes encodent en temps réel la position des objets dans des images capturées par une
\ncaméra. Le mode 3D encode en plus la distance entre le système et l’objet. Pour la localisation, les
\nparticipants ont été plus rapides à comprendre la scène avec le mode 3D qui encode la profondeur.
\nCependant, avec le mode 2D , ils étaient tout de même capables d’estimer les distances après un
\ncourt l’entraînement. Pour la navigation, les participants ont été aussi performants avec le mode
\n2D qu’avec le mode 3D.
\nNous avons ensuite évalué l’efficacité de différentes méthodes d’encodage de la profondeur en
\nsons afin de déterminer la plus efficace. La fréquence, l’amplitude et la réverbération sonore ainsi
\nque le taux de répétition de sons courts et aigus (bips) et le rapport signal/bruit d’un mélange
\nd’un son pur avec du bruit ont été étudiés. Des participants voyants aux yeux bandés devaient
\npositionner un objet au bon endroit avec l’aide des différentes méthodes d’encodage sonore de
\nla profondeur. Dans l’ensemble, le taux de répétition des bips a donné les meilleurs résultats
\nsur le plan quantitatif (précision du positionnement et mémorabilité) et sur le plan qualitatif (les
\nparticipants ont considéré que cette méthode était la plus naturelle pour encoder la profondeur).
\nLa sonification basée sur la fréquence du son fournit une bonne précision, mais les participants
\nne la trouvaient pas naturelle pour encoder la profondeur. Le mélange d’un son pur avec un bruit
\nblanc a reçu un bon retour qualitatif et pourrait également être envisagé.
\nNos expériences ont été réalisées avec des participants voyants ayant les yeux bandés. Nos
\nrésultats demeurent valides avec des personnes devenues non voyantes tard dans leur vie puisque
\nles mêmes stratégies que les personnes voyantes sont utilisées pour accomplir des tâches spatiales.
\nNous rapportons aussi des expériences menées avec un sujet non voyant de naissance qui
\nsuggèrent que nos résultats pourraient demeurer valides avec une telle population.

Récupéré en direct depuis OpenAlex et désinversé. Les résumés ne sont pas conservés dans cette base de données : les index inversés représentent 8,6 Go des 9,3 Go de texte de la base, et le serveur dispose de 13 Go libres.