L’outil IA aide les utilisateurs atteints de troubles de la vision à mieux mémoriser leur environnement

Le système d’IA VIPTour est sur le point d’améliorer considérablement la manière dont les personnes aveugles ou malvoyantes (BLV) découvrent de nouveaux environnements.

Une équipe de recherche a développé VIPTour, un système qui permet aux utilisateurs de découvrir des parcs et des attractions touristiques de manière indépendante, ce qui améliore leur plaisir et leur compréhension des espaces. Leurs résultats ont été publiés dans Nature.

Le système intègre une caméra compacte à une application pour smartphone qui exécute un algorithme IA connu sous le nom de FocusFormer. FocusFormer traite les scènes en temps réel, pour identifier des points importants tels que les marqueurs de sécurité.

Le système fournit des recommandations d’exploration, qui s’adaptent aux préférences individuelles de l’utilisateur, comme le choix des sons naturels plutôt que des informations historiques.

Les chercheurs soutiennent que la communauté BLV pourrait bénéficier de VIPTour grâce à un accompagnement personnalisé basé sur les centres d’intérêt des utilisateurs, un audio simplifié, des descriptions tactiles de scènes complexes, ainsi que des capacités de relecture et de partage de la visite. Le système est conçu pour fournir des fonctions qui servent à améliorer les expériences des utilisateurs au-delà d’une simple assistance.

Dans des essais impliquant plus de 30 participants BLV, les bénéfices étaient frappants. Le bien-être émotionnel s’est considérablement amélioré, avec une augmentation de 67,9% des émotions positives et une hausse de 94,7% de l’excitation. Les utilisateurs ont également montré une amélioration de 772,73% dans le rappel des scènes, et la rétention de la mémoire à long terme a doublé.

Beaucoup ont déclaré se sentir plus autonomes, moins dépendants des autres pour naviguer ou comprendre leur environnement. Les chercheurs soulignent comment des millions d’individus BLV sont exclus des activités de loisirs en raison d’environnements inaccessibles, a noté l’équipe de recherche.

Alors que les outils existants aident les gens à passer d’un endroit à un autre, ils échouent souvent à créer des expériences agréables et mémorables. VIPTour tente de combler ce vide en alliant une IA avancée à une conception centrée sur l’utilisateur et réfléchie.

Les développeurs espèrent que VIPTour inspirera davantage de technologies inclusives qui se concentrent non seulement sur l’accessibilité, mais aussi sur l’autonomie et la joie.