JeVois: Platform Visi Komputer Quad-Core Open-Source

Saya suka robot, terus memantau Internet untuk mencari solusi menarik. Saya tidak sengaja menemukan proyek yang sangat menarik, saya segera berbagi informasi dengan Anda. Proyek crowdfunding JeVois adalah platform visi mesin OpenSource : sensor video dan prosesor quad-core dalam paket kecil 28 cc. lihat Pengiriman dijadwalkan untuk Februari 2017. Modul ini mampu mengirimkan data melalui USB atau port serial. Menurut penulis proyek, semuanya harus bekerja di luar kotak. Yang diperlukan hanyalah memasukkan kartu memori microSD dengan program Anda (dukungan untuk opencv 3.1 dan banyak algoritma lain dideklarasikan) dan sambungkan ke komputer atau mikrokontroler.


JeVois mulai berkembang sebagai proyek pendidikan, ketika penulis menyadari kebutuhan mendesak akan modul penglihatan artifisial ketika mendesain robotika. Saat ini, tidak ada solusi khusus yang dapat bekerja dengan raspberry pi atau arduino di luar kotak.




JeVois bertujuan untuk mengisi kesenjangan ini dengan menyediakan modul visi komputer mandiri yang dapat menyediakan transmisi video dan transmisi hasil dari algoritma visi komputer melalui port serial.

JeVois bekerja sebagai berikut: video diambil dari kamera, diproses dengan cepat melalui algoritma penglihatan mesin pada prosesornya sendiri, dan hasilnya ditransmisikan melalui USB ke komputer dan / atau melalui serial ke mikrokontroler.



Di komputer, JeVois terdeteksi sebagai kamera USB. Kamera pintar JeVois adalah proyek opensource, ini menunjukkan kemungkinan personalisasi dan modifikasi terluas yang sesuai dengan kebutuhan Anda. Penulis proyek mengumumkan tiga mode operasi standar:

  1. Transmisi video USB dengan transfer data serial dari hasil analisis video (misalnya, koordinat dan konten kode QR apa pun yang telah diidentifikasi).
  2. Mentransfer informasi teks tanpa video.
  3. Transfer video yang ditandai dengan bidang yang paling menarik untuk analisis lebih lanjut pada PC yang lebih kuat, misalnya, menggunakan jaringan saraf.

Spesifikasi Teknis




Kamera pintar adalah komputer Linux yang lengkap. Ia dapat bekerja sendiri, tanpa terhubung ke PC atau mikrokontroler. Berkat kipas pendingin, ini dapat beroperasi pada beban penuh tanpa kepanasan, sambil mempertahankan kecepatan prosesor konstan 1,34 GHz.

Perangkat lunak




Dalam contoh dalam video, kecepatan pemrosesan algoritma adalah 73 fps pada prosesor kamera pintar, yaitu, 13,68 ms diperlukan untuk memproses satu frame video. Perhatikan juga bahwa prosesor tidak dimuat sepenuhnya sesuai dengan algoritma ini (148,7% dari beban, sementara 400% sesuai dengan beban penuh dari semua 4 inti prosesor). Oleh karena itu, algoritma tambahan juga dapat bekerja secara paralel dengan analisis video.


Contoh pengakuan penanda augmented reality (ArUco), deteksi dan pengenalan objek, deteksi jalan untuk mengemudi secara otonom.


Melacak 120Hz mata (kamera mengalir pada 120 frame per detik, pemrosesan dilakukan pada 200+ FPS)



Pada bulan April, pengembang berjanji untuk menciptakan komunitas dan menyelesaikan perangkat lunak yang akan menyediakan fungsionalitas canggih.

Perbandingan Model Raspberry Pi3




Proyek JeVois sebagian dimungkinkan oleh hibah penelitian dari National Science Foundation dan DARPA.

Saya sangat berharap untuk keberhasilan pengembangan platform ini, ini akan membantu untuk membuat lompatan kuantum dalam proyek-proyek DIY.

Berikan SLAM untuk robot!

Source: https://habr.com/ru/post/id400393/


All Articles