يتيح لك النظام الجديد ترجمة لغة الإشارة إلى نص

يعمل الباحثون في جامعة تكساس إيه آند إم على نظام مصغر يحول لغة الإشارة إلى نص. تختلف فكرة المشروع إلى حد ما عما تفعله الشركات الكبيرة مثل Google. بدلاً من تطوير برنامج يشبه Babelfish يترجم الكلام من لغة إلى أخرى ، يسمح لك الجهاز الجديد بتحويل تقلصات العضلات إلى كلمات.

يتضمن النظام مستشعرات لتتبع حركة الساعد والكتف والمعصم. وضع المطورون هنا أيضًا مستشعر EMG (تخطيط كهربية) ، والذي يتعرف على الإشارات التي يتم إنشاؤها بواسطة عضلات الرسغ. يتم بعد ذلك فك تشفير المعلومات التي تم جمعها وإرسالها لاسلكيًا إلى الهاتف أو الكمبيوتر الشخصي.

"نحن نفك شفرة نشاط العضلات من خلال جمع الإشارات التي تولدها على الرسغ. وعلق البروفيسور روزبه جعفري ، ممثل فريق التطوير ، على أن بعض الإشارات تنتج عن اختصارات عشوائية لا إرادية ، بينما تنشأ إشارات أخرى بسبب إيماءات ذات معنى - على سبيل المثال ، نتيجة للتواصل بين شخص أصم وأخرس باستخدام لغة الإشارة.

الهدف من المشروع هو إنشاء جهاز مصغر (المثالي هو الساعة) والبرنامج المقابل الذي يسمح لك بتحويل إشارات العضلات إلى جمل كاملة ، وليس مجرد كلمات مفردة. النموذج الأولي ، الذي تم إنشاؤه من قبل فريق من الباحثين ، قادر بالفعل على هذا الأخير.

يجب أن تكون هذه الساعات الذكية قوية بما يكفي لإجراء العمليات الحسابية اللازمة. بالإضافة إلى ذلك ، يجب أن يكون للجهاز مكبر صوت يمكن من خلاله لمحاور شخص يعاني من ضعف السمع أو الصم أن يسمع "ترجمة" لغة الإشارة بواسطة الكمبيوتر. يمكن أن تكون هذه طريقة أبطأ قليلاً للتواصل من الكلام العادي ، ولكنها أكثر دقة من التواصل باستخدام الأدوات الموجودة.

"عندما تضع النظام لأول مرة ، فإنه يعمل بمستوى معين من الدقة. ولكن عندما تعمل مع النظام بشكل أوثق ، فإنه يتعرف على خصائص جسم المالك ويتعرف عليها ويصبح أكثر دقة.

مختبرات Thalmic ، مطور Myo Bracelet مؤخرًا، أنشأ نظامًا سمح للرجل بالتحكم في ذراعه الاصطناعية بمساعدة الفكر. تم نقل البيانات في مثل هذا النظام باستخدام البلوتوث.

Source: https://habr.com/ru/post/ar387363/