O novo sistema permite traduzir a linguagem de sinais em texto

Pesquisadores da Texas A&M University estão trabalhando em um sistema em miniatura que converte a linguagem de sinais em texto. A idéia do projeto é um pouco diferente do que grandes empresas como o Google estão fazendo. Em vez de desenvolver um software semelhante ao Babelfish, que traduz a fala de um idioma para outro, o novo dispositivo permite transformar contrações musculares em palavras.

O sistema inclui sensores para rastrear o movimento do antebraço, ombro e punho. Os desenvolvedores também colocaram aqui um sensor EMG (eletromiografia), que reconhece os sinais gerados pelos músculos do pulso. As informações coletadas são decodificadas e transmitidas sem fio para um telefone ou PC.

“Decodificamos a atividade muscular coletando os sinais que eles geram no pulso. Alguns sinais são gerados por abreviações involuntárias e aleatórias, enquanto outros surgem devido a gestos significativos - por exemplo, como resultado da comunicação entre uma pessoa surda e burra usando a linguagem de sinais ”, comentou o professor Roozbeh Jafari, representante da equipe de desenvolvimento.

O objetivo do projeto é criar um dispositivo em miniatura (o ideal é um relógio) e o software correspondente que permite converter sinais musculares em frases inteiras, e não apenas em palavras simples. O protótipo, criado por uma equipe de pesquisadores, já é capaz disso.

Esses relógios inteligentes devem ser poderosos o suficiente para realizar os cálculos necessários. Além disso, o dispositivo deve ter um alto-falante através do qual o interlocutor de uma pessoa com deficiência auditiva ou surda-muda possa ouvir a "tradução" da linguagem de sinais por um computador. Essa pode ser uma maneira de comunicação um pouco mais lenta que a fala comum, mas mais precisamente mais conveniente que a comunicação usando as ferramentas existentes.

“Quando você coloca o sistema pela primeira vez, ele funciona com um certo nível de precisão. Mas quando você trabalha com o sistema mais de perto, ele aprende, reconhece as características do corpo do proprietário e se torna mais preciso ”, diz o professor.

Thalmic Labs, desenvolvedor Myo Bracelet recentemente, criou um sistema que permitia ao homem controlar seu braço protético com a ajuda do pensamento. A transferência de dados nesse sistema foi realizada usando Bluetooth.

Source: https://habr.com/ru/post/pt387363/