Une nouvelle application décrit le monde visuel

Capture d'écran de l'application Seeing AI extraite d'une vidéo de Microsoft. Elle montre un téléphone portable avec une femme souriante et la légende suivante : "Jenny near, top right, three feet away" (Jenny près, en haut à droite, à un mètre de distance). Les boutons sur l'écran indiquent : Texte court, Document, Produit et Personne. La personne est sélectionnée.

Capture d'écran de l'application Seeing AI de la vidéo de Microsoft. Elle montre un téléphone portable avec une femme souriante et la légende suivante

Merci à John Brandt à MaineCITE pour ce billet sur l'application Seeing AI de Microsoft destinée aux personnes souffrant de déficiences visuelles. L'application est gratuite et fait partie d'un effort de recherche continu.

Alors que le nombre d'applications destinées aux personnes déficientes visuelles et utilisant l'intelligence artificielle (IA) et l'omniprésence du "nuage" ne cesse de croître, le dernier-né de Microsoft, Voir l'IApeut changer la donne.

Selon le Business Insider Microsoft a présenté le prototype il y a plus d'un an, mais a publié la version officielle cette semaine.

Selon Microsoft, la nouvelle application "[...] raconte le monde qui vous entoure. Conçu pour la communauté des malvoyants, ce projet de recherche exploite la puissance de l'intelligence artificielle pour décrire les personnes, les textes et les objets". Le logiciel comporte actuellement cinq fonctions, appelées "canaux". Deux canaux concernent exclusivement la reconnaissance de texte (un pour les signes et les phrases courtes, et un qui lit des pages entières de texte). L'un des canaux permet de détecter et de déchiffrer les codes-barres. Un autre canal sera bientôt ajouté, il s'agira d'un lecteur de devises.

Les deux derniers "canaux" sont peut-être les plus intéressants. L'un d'eux, "Personne", est capable de détecter la présence d'un groupe de personnes ou de personnes individuelles en fonction de leur sexe, ainsi que l'expression de leur visage. Avec un peu d'entraînement et l'aide de l'utilisateur, l'application est capable de reconnaître le visage des personnes et de les nommer spécifiquement, même si elles font partie d'un groupe.

L'autre canal passionnant, "Scene", est encore en version bêta, mais il peut identifier d'autres scènes et donner sa meilleure idée de ce qui se passe. Lors d'un test effectué par l'auteur alors qu'il était assis dans le salon, l'application a indiqué "homme assis sur le canapé du salon".

Conçue pour l'iPhone, l'application peut être utilisée avec des iPads ou des iPods, mais nécessite un signal WiFi actif. L'application n'est actuellement disponible que pour les appareils iOS (aucune information sur une version Android). Ironiquement, l'annonce de cette nouvelle application intervient peu de temps après que Microsoft a annoncé la fin du système d'exploitation Windows Phone.

Attendez-vous à des améliorations significatives à l'avenir. Microsoft attend avec impatience les commentaires des utilisateurs qui pourront l'aider à améliorer l'intelligence artificielle et la précision de l'application.

Site web de Microsoft sur l'IA
Lien de téléchargement dans iTunes
Regardez la vidéo de Microsoft "Seeing AI" (voir l'IA)

Cet article a été publié pour la première fois sous le titre "Amazing new app for folks with low vision" sur MaineCITE le 14 juillet 2017 et est reposté ici avec permission. Aucune approbation de produit ne doit être déduite. 

Publié le : juillet 25, 2017 - Catégories : Emerging Tech -
Partager cet article

Blog Digest mensuel

Rechercher dans le blog

Archives

Catégories

Blogs sur les programmes nationaux d'AT

Blogs sur les programmes nationaux d'AT

Le Centre AT3, l'Association of AT Act Programs (ATAP) et l'Administration on Community Living (ACL) n'accordent aucune approbation, représentation ou garantie, explicite ou implicite, aux produits, dispositifs ou informations présentés dans ce blog. L'AT3 Center, l'ATAP et l'ACL n'ont pas examiné, revu ou testé les produits ou dispositifs mentionnés.

Conseils pour l'emploi : montre deux femmes derrière un bureau utilisant des technologies d'assistance, dont l'une est en fauteuil roulant.Troubles de la motricité fine
Un homme portant des lunettes de protection travaille attentivement avec des outils.Le LipSync Buildathon ajoute un appareil de pointe à la bibliothèque de prêt du PIAT !

Articles connexes

Si vous avez apprécié cet article, nous vous invitons à découvrir d'autres articles ci-dessous.