El nuevo sistema le permite traducir el lenguaje de señas en texto

Investigadores de la Universidad de Texas A&M están trabajando en un sistema en miniatura que convierte el lenguaje de señas en texto. La idea del proyecto es algo diferente de lo que están haciendo grandes empresas como Google. En lugar de desarrollar un software similar a Babelfish que traduce el habla de un idioma a otro, el nuevo dispositivo le permite convertir las contracciones musculares en palabras.

El sistema incluye sensores para rastrear el movimiento del antebrazo, el hombro y la muñeca. Los desarrolladores también colocaron aquí un sensor EMG (electromiografía), que reconoce las señales que generan los músculos de la muñeca. La información recopilada se decodifica y se transmite de forma inalámbrica a un teléfono o PC.

“Decodificamos la actividad muscular al recopilar las señales que generan en la muñeca. Algunas señales son generadas por abreviaturas involuntarias y aleatorias, mientras que otras surgen debido a gestos significativos, por ejemplo, como resultado de la comunicación entre una persona sorda y tonta que usa lenguaje de señas ”, comentó el profesor Roozbeh Jafari, representante del equipo de desarrollo.

El objetivo del proyecto es crear un dispositivo en miniatura (lo ideal es un reloj) y el software correspondiente que le permite convertir las señales musculares en oraciones completas, y no solo en palabras. Este último ya es capaz de un prototipo, que fue creado por un equipo de investigadores.

Dichos relojes inteligentes deberían ser lo suficientemente potentes como para realizar los cálculos necesarios. Además, el dispositivo debe tener un altavoz a través del cual el interlocutor de una persona sorda o sorda pueda escuchar la "traducción" del lenguaje de señas por una computadora. Esta puede ser una forma de comunicación un poco más lenta que el discurso ordinario, pero más precisamente más conveniente que la comunicación utilizando las herramientas existentes.

“Cuando se pone el sistema por primera vez, funciona con un cierto nivel de precisión. Pero cuando trabajas con el sistema más de cerca, aprende, reconoce las características del cuerpo del propietario y se vuelve más preciso ", dice el profesor.

Thalmic Labs, desarrollador de brazaletes Myo recientemente, creó un sistema que permitía a un hombre controlar su brazo protésico con la ayuda del pensamiento. La transferencia de datos en dicho sistema se realizó mediante Bluetooth.

Source: https://habr.com/ru/post/es387363/