Geekly articles weekly

JeVois: منصة رؤية حاسوبية رباعية النواة مفتوحة المصدر

أنا مغرم بالروبوتات ، أراقب باستمرار الإنترنت بحثًا عن حلول مثيرة للاهتمام. لقد وجدت عن طريق الخطأ مشروعًا مثيرًا للاهتمام ، وسارع إلى مشاركة المعلومات معك. مشروع JeVois للتمويل الجماعي هو منصة رؤية مفتوحة المصدر : مستشعر فيديو ومعالج رباعي النواة في حزمة صغيرة بحجم 28 سم مكعب. راجع التسليم المقرر في فبراير 2017. هذه الوحدة قادرة على نقل البيانات عبر USB أو المنفذ التسلسلي. بحسب مؤلفي المشروع ، يجب أن يعمل كل شيء خارج الصندوق. كل ما هو مطلوب هو إدخال بطاقة ذاكرة microSD مع برنامجك (يتم دعم دعم opencv 3.1 والعديد من الخوارزميات الأخرى) وتوصيلها بجهاز كمبيوتر أو متحكم.


بدأ JeVois في التطور كمشروع تعليمي ، حيث أدرك المؤلفون الحاجة الملحة لوحدة الرؤية الاصطناعية هذه عند التصميم في الروبوتات. حاليا ، لا توجد حلول متخصصة يمكن أن تعمل مع التوت أو اردوينو خارج الصندوق.




تم تصميم JeVois لملء هذه الفجوة من خلال توفير وحدة رؤية حاسوب مكتفية ذاتيًا يمكنها توفير كل من إرسال الفيديو وإرسال نتيجة خوارزمية رؤية الكمبيوتر من خلال المنفذ التسلسلي.

يعمل JeVois على النحو التالي: يتم التقاط الفيديو من الكاميرا ، ويتم معالجته على الفور من خلال خوارزمية رؤية الجهاز على معالجه الخاص ، ويتم نقل النتائج عبر USB إلى الكمبيوتر و / أو من خلال التسلسل إلى وحدة التحكم الدقيقة.



على الكمبيوتر ، تم الكشف عن JeVois ككاميرا USB. الكاميرا الذكية JeVois هي مشروع مفتوح المصدر ، وهذا يعني أوسع إمكانيات التخصيص والتعديل لتناسب احتياجاتك. أعلن مؤلفو المشروع عن ثلاثة أوضاع تشغيل قياسية:

  1. نقل فيديو USB مع نقل البيانات التسلسلية لنتائج تحليل الفيديو (على سبيل المثال ، إحداثيات ومحتويات أي رمز QR تم تحديده).
  2. نقل المعلومات النصية بدون فيديو.
  3. انقل الفيديو الذي تم وضع علامة عليه بالمناطق الأكثر إثارة للاهتمام لمزيد من التحليل على جهاز كمبيوتر أكثر قوة ، على سبيل المثال ، باستخدام الشبكات العصبية.

المواصفات الفنية




الكاميرا الذكية هي كمبيوتر لينكس كامل على متن الطائرة. يمكن أن تعمل من تلقاء نفسها ، دون الاتصال بجهاز كمبيوتر أو متحكم. بفضل مروحة التبريد ، يمكن أن تعمل في حمولة كاملة دون ارتفاع درجة الحرارة ، مع الحفاظ على سرعة معالج ثابتة تبلغ 1.34 جيجاهرتز.

البرمجيات




في المثال في الفيديو ، تبلغ سرعة معالجة الخوارزمية 73 إطارًا في الثانية على معالج الكاميرا الذكية ، أي 13.68 مللي ثانية مطلوبة لمعالجة إطار فيديو واحد. لاحظ أيضًا أن المعالج لم يتم تحميله بالكامل وفقًا لهذه الخوارزمية (148.7٪ من الحمل ، في حين أن 400٪ يتوافق مع الحمل الكامل لجميع نوى المعالج الأربعة). لذلك ، يمكن أن تعمل خوارزميات إضافية بالتوازي مع تحليل الفيديو.


أمثلة على التعرف على مؤشر الواقع المعزز (ArUco) ، واكتشاف الأشياء والتعرف عليها ، واكتشاف الطرق للقيادة المستقلة.


تتبع 120 هرتز من العين (تتدفق الكاميرا بسرعة 120 إطارًا في الثانية ، ويتم إجراء المعالجة بمعدل 200 إطارًا في الثانية)



بحلول شهر أبريل ، يعد المطورون بإنشاء مجتمع وإنهاء البرامج التي ستوفر وظائف متقدمة.

مقارنة نموذج التوت Pi3




تم تحقيق مشروع JeVois جزئيًا من خلال المنح البحثية من مؤسسة العلوم الوطنية و DARPA.

آمل حقًا في التطوير الناجح لهذه المنصة ، فهذا سيساعد على تحقيق قفزة كمية في مشاريع DIY.

إعطاء SLAM للروبوتات!

Source: https://habr.com/ru/post/ar400393/

More articles:


All Articles