يوضح Arnav Kapoor ، أحد مطوري نوع جديد من الواجهة ، تشغيل الجهازأنشأ مهندسو معهد ماساتشوستس للتكنولوجيا
نظامًا يقوم بترجمة الكلمات والجمل المنطوقة في نص. لكي يعمل النظام بنجاح ، يحتاج مشغّل شبكة الجوّال إلى نطق الكلمات والعبارات بوضوح لأنفسهم. في هذه الحالة ، تبدأ عضلات الوجه والحلق واللسان المسؤولة عن الكلام في العمل. إنهم لا يعملون بكامل قوتهم ، ولكن ينشطون فقط ، وهو ما يكفي للنظام الجديد "للقراءة".
من الخارج ، يبدو الأمر كذلك - الشخص صامت ببساطة ، والنظام "يتحدث" ، أو بالأحرى يطبع. يتكون التطوير من جزأين: أداة يجب ارتداؤها على الوجه وشبكة عصبية "مدربة" بشكل خاص ، تقوم بتحليل المعلومات الواردة وربطها بالحروف والكلمات. بالإضافة إلى ذلك ، تتيح لك الواجهة التحكم في الأدوات - تبديل القنوات على التلفزيون ، وتتبع التكاليف والحفاظ على النشاط العادي تمامًا.
تشتمل الأداة التي يتم ارتداؤها على الأذن على "سماعة أذن" ، أي سماعة تنقل الصوت على طول العظم إلى الأذن الداخلية. تظل القناة الخارجية مفتوحة ويسمع الشخص كل ما يحدث حولها.
مثل هذا النظام سهل الحمل ومناسب للارتداء في الشارع وفي المنزل. بعض الطرق لاستخدامها غير عادية. على سبيل المثال ، يمكنك لعب الشطرنج ، والتحدث مع نفسك لتحركات العدو والحصول على المساعدة من الكمبيوتر.
يمكنك استخدام التطوير ليس فقط للأشخاص الذين يعانون من مشاكل جسدية ، ولكن أيضًا للمستخدمين العاديين في مجموعة متنوعة من المواقف. كانت مهمة المطورين هي إنشاء نظام يمكنه تحسين قدرات الشخص ، ويكمل فكره ، وبطريقة ما ، حواسه.
يقول Petty Maes ، أحد المشاركين في المشروع: "لم نعد قادرين على العيش بدون هواتف ذكية وأجهزة رقمية أخرى". "لكن استخدام هذه الأدوات يمنعنا ، فمن الضروري مقاطعة العمل معها. على سبيل المثال ، هناك محادثة ، وفجأة هناك حاجة لاستخدام الهاتف. تحتاج إلى العثور عليه ، والتقاطه ، وإدخال كلمة المرور وفتح التطبيق. لذلك ، جربت أنا وطلابي أنواعًا جديدة من الأنظمة وعوامل الشكل الخاصة بها لفترة طويلة ، والتي تسمح للناس بالاستفادة من التقنيات والخدمات الحديثة دون أن تشتت انتباههم الأدوات ، في الواقع ".
تم الإبلاغ عن النتائج في مؤتمر واجهة المستخدم الذكية لرابطة الحاسبات الآلية.
من حيث المبدأ ، الفكرة التي اقترحها العلماء ليست جديدة. ظهرت في مكان ما في القرن التاسع عشر ، ومع ظهور التقنيات الجديدة ، بدأوا في العمل بجدية على تنفيذها. في الستينيات ، بدأ اعتبار العبارات والكلمات لنفسه أثناء القراءة عاملًا خارجيًا يعيق سرعة القراءة (في الواقع ، هو). لكن التحدث له مزاياه ، ويمكن استخدامه في تطوير واجهات الكمبيوتر. تم إعطاء مثال واحد أعلاه.
في عملية إنشاء النظام ، كان العلماء بحاجة أولاً لفهم أي عضلات على وجه الشخص تكون أكثر نشاطًا في عملية التحدث. بعد ذلك ، بدأ تطوير جهاز نموذجي لتحويل "الأفكار إلى نص". كان العنصر الرئيسي لاستشعار الإشارة في النظام 16 قطبًا كهربائيًا.
أخذوا الشهادات وفحصوا ما قاله الرجل لنفسه. ثم ، بناءً على مجموعة البيانات المستلمة ، بدأ المطورون في تدريب الشبكة العصبية. بالمناسبة ، غطّى الجهاز في البداية جانبي الوجه. ولكن اتضح بعد ذلك أن الشبكة العصبية تحول الإشارات إلى نص دون مشاكل حتى إذا كانت الأقطاب الكهربائية على جانب واحد فقط من الوجه. لذلك ، لتقليل حجم النظام ، تم تخفيضه إلى النصف.
بدأ تدريب الشبكة العصبية صغيرًا - مع 20 كلمة فقط. مع مرور الوقت ، تم زيادة القاموس ، وأصبحت الشبكة العصبية أكثر "ذكاء". وفقا للعلماء ، يمكن تخصيصها لأي شخص ، مما يزيد من دقة التعرف على "الأفكار". كلما زاد التدريب لديك ، كان النظام يعمل بشكل أفضل.
لم يكن لدى المطورين خطط لجعله مثالياً ، هذا مجرد إثبات للمفهوم. يمكن استخدام التكنولوجيا في العديد من المجالات ، بما في ذلك التصنيع. يمكنك أن تتخيل مؤسسة صناعية ، مستوى الضوضاء الذي يتداخل عنده مع التواصل العادي للموظفين بشأن قضايا العمل. في هذه الحالة ، يمكنك استخدام مثل هذا النظام. وضع مماثل مع رجال الاطفاء أو الغواصين. لن يحتاجوا إلى الحديث ، سيعبر النظام عن "أفكار".
حتى الآن ، نحن لا نتحدث عن تسويق التكنولوجيا ، ولكن هذا التطور ليس مستبعدًا أيضًا.
