Pour toute personne, la langue des signes est difficile à apprendre. Le fait est que non seulement les gestes sont utilisés, mais aussi les expressions faciales, ainsi que l'articulation, plus le «langage corporel». La valeur des informations transmises dépend de tous ces facteurs. Il existe des programmes d'apprentissage de la langue des signes, mais beaucoup d'entre eux ne sont pas très efficaces, et le prix n'est pas toujours humain. Dans un avenir proche, tout peut changer - maintenant des méthodes sont développées pour étudier la langue des signes en utilisant l'IA.
Il s'agit d'automatiser le processus d'apprentissage, qui est complètement intuitif.
Ici vous pouvez . se familiariser avec les capacités de l'outil d'analyse de la langue des signes (groupe suédo-allemand) en fournissant tous les détails nécessaires. Néanmoins, les développeurs espèrent créer des plates-formes d'IA qui peuvent parfois accélérer le processus d'apprentissage.
L'IA a
été et est utilisée pour reconnaître, traduire et interpréter la langue des signes. Mais les possibilités de tels projets sont incomplètes, elles ne couvrent pas tous les aspects. Les développeurs du nouveau plan système utilisant l'IA pour faire savoir à l'étudiant ce qu'il fait mal et expliquer comment résoudre ce problème.
La pratique de la langue des signes est difficile car ce n'est ni lire ni écrire. Pour apprendre à utiliser un PC, les développeurs ont créé un jeu informatique. Elle enseigne progressivement les gestes, montrant quel geste correspond à une lettre ou un concept particulier. Ensuite, le joueur doit répéter ce geste, en enregistrant ses actions sur la caméra. Le programme montrera le succès de la répétition et ce qui doit être fait pour améliorer le résultat. De plus, dans un tel jeu, il y a une compétition sociale entre les participants, ce qui implique les utilisateurs dans le processus.
L'intelligence artificielle intervient à toutes les étapes de la formation. La première étape consiste à interagir avec le réseau de neurones convolutionnels - il extrait des informations visuelles sur les actions de l'utilisateur à partir de la vidéo. Ces données sont envoyées au module d'évaluation suivant, qui compare le résultat avec les normes disponibles dans la base de données et émet sa note.
Tout cela est réalisé sous une forme compréhensible pour l'utilisateur, il est clair que l'étudiant ne voit pas tout le processus. Il ne fonctionne qu'avec les manifestations externes des actions du réseau neuronal.
Dans un avenir proche, les développeurs prévoient de créer des systèmes qui aideront les locuteurs d'autres groupes de langues à apprendre la langue des signes. La chose la plus difficile ici est de former le réseau neuronal et d'enregistrer des vidéos avec une démonstration de chaque concept et son, c'est long et cela prend du temps.
De plus, le système apprendra à "comprendre" les expressions faciales d'une personne en référence à l'apprentissage de la langue des signes. À l'heure actuelle, le système fonctionne de manière optimale dans une salle de classe. À l'avenir, les développeurs prévoient de rendre l'application avec l'IA plus universelle afin qu'elle puisse être utilisée dans la rue. Les créateurs de la plateforme espèrent que leur produit pourra être utilisé pour enseigner la langue des signes à des personnes de tout âge.
