Para cualquier persona, el lenguaje de señas es difícil de aprender. El hecho es que no solo se utilizan gestos, sino también expresiones faciales, así como la articulación, además del "lenguaje corporal". El valor de la información transmitida depende de todos estos factores. Existen programas para aprender el lenguaje de señas, pero muchos de ellos no tienen mucho éxito, además el precio no siempre es humano. En un futuro cercano, todo puede cambiar: ahora se están desarrollando métodos para estudiar el lenguaje de señas con IA.
Se trata de automatizar el proceso de aprendizaje, que es completamente intuitivo.
Aquí puedes . familiarizarse con las capacidades de la herramienta de análisis de lenguaje de señas (grupo sueco-alemán) con la provisión de todos los detalles necesarios. Sin embargo, los desarrolladores esperan crear plataformas de inteligencia artificial que puedan ayudar a acelerar el proceso de aprendizaje a veces.
La IA ha
sido y se utiliza para reconocer, traducir e interpretar el lenguaje de señas. Pero las posibilidades de tales proyectos son incompletas, no cubren todos los aspectos. Los desarrolladores del nuevo sistema planean usar AI para que el alumno sepa qué está haciendo mal y le diga cómo se puede solucionar.
La práctica del lenguaje de señas es difícil porque no es ni lectura ni escritura. Para aprender a usar una PC, los desarrolladores crearon un juego de computadora. Gradualmente enseña gestos, mostrando qué gesto corresponde a una letra o concepto en particular. Luego, el jugador debe repetir este gesto, registrando sus acciones en la cámara. El programa mostrará qué tan exitosa fue la repetición y qué se debe hacer para mejorar el resultado. Además, en dicho juego existe una competencia social entre los participantes, que involucra a los usuarios en el proceso.
La inteligencia artificial está involucrada en todas las etapas del entrenamiento. El primer paso es interactuar con la red neuronal convolucional: extrae del video información visual sobre las acciones del usuario. Estos datos se envían al siguiente módulo de evaluación, que compara el resultado con los estándares disponibles en la base de datos y emite su calificación.
Todo esto se lleva a cabo de forma comprensible para el usuario, está claro que el alumno no ve todo el proceso. Funciona solo con las manifestaciones externas de las acciones de la red neuronal.
En un futuro cercano, los desarrolladores planean crear sistemas que ayuden a los hablantes de otros grupos de idiomas a aprender el lenguaje de señas. Lo más difícil aquí es entrenar la red neuronal y grabar videos con una demostración de cada concepto y sonido, esto es mucho tiempo y lleva tiempo.
Además, se enseñará al sistema a "comprender" las expresiones faciales de una persona con referencia al aprendizaje del lenguaje de señas. Por el momento, el sistema funciona de manera óptima en un aula. En el futuro, los desarrolladores planean hacer que la aplicación con IA sea más universal para que pueda usarse en la calle. Los creadores de la plataforma esperan que su producto pueda usarse para enseñar lenguaje de señas a personas de cualquier edad.
