Avec StorySign, Huawei rend accessible la lecture aux enfants sourds

L'appli est disponible gratuitement. [© Huawei]

Et si une intelligence artificielle permettait de traduire le texte d'un livre en langue des signes ? Voici le concept que Huawei met en avant avec StorySign, une nouvelle appli mobile qui s'adresse aux enfants sourds.

Le constructeur chinois vient de lancer cette plate-forme en s'adressant aux 32 millions d'enfants atteints de ce handicap recensés dans le monde. L'apprentissage de la lecture étant plus compliqué pour eux (ils ne savent en général lire qu'à l'âge de 9 ans), StorySign va donc prendre le relais pour la lecture de livres simples, dotés de courts textes. L'idée est aussi de venir en soutien des parents qui ne maîtrisent pas non plus la langue.

En France, deux tiers des parents confient ne connaître que partiellement cette méthode, précise Huawei, qui rappellent que «95 % des enfants sourds ont des parents entendants».

storysign_huawei_app.jpg

Disponible gratuitement, l'application se base sur le livre Spot le Chien (éd. Nathan) afin de partager l'histoire écrite par Eric Hill. Concrètement, il suffit d'ouvrir StorySign et de pointer l'objectif photo du mobile vers le texte. L'écriture est ensuite automatiquement reconnue par l'appareil et traduite par un petit personnage en 3D, baptisé Star, s'exprimant dans la langue des signes sur l'écran du smartphone.

L'enfant peut ainsi suivre une histoire au fil des pages, sans avoir à se référer à ses parents pour lui faire comprendre. Parallèlement, les parents peuvent aussi regarder attentivement le petit avatar afin de mieux assimiler la langue des signes.

mate20pro_twilight_star_french.jpg

Cette application, qui est une première sur un système grand public, est compatible avec d'autres mobiles que ceux de Huawei. Elle témoigne surtout du potentiel de l'usage de l'intelligence artificielle sur les smartphones actuels, en terme de reconnaissance textuelle.

Les modèles Huawei P20 Pro et Mate 20 Pro, avec leur puce neuronales embarquées, démontrent qu'il est aussi possible de reconnaître le texte depuis n'importe quelle position. D'autres livres seront compatibles à terme sur StorySign, tandis que d'autres outils liés à l'IA et au mobile devraient étoffer les possibilités d'interagir avec leur environnement pour les enfants sourds dans les années à venir.

Vous aimerez aussi

Ailleurs sur le web

Derniers articles