Robot TIAGo belajar membawa 20 jenis bir dari kulkas

Robot mengenali bir yang diinginkan di antara 20 sampel

Salah satu peserta dalam kontes sistem AI Nvidia Jetson Challenge menemukan aplikasi luar biasa dari sistem Kecerdasan Buatan. Sementara peserta lain mencoba menggunakan visi mesin dalam perawatan kesehatan, keselamatan, sistem industri IoT dan solusi robotika inovatif, pengembang Jerman mengajarkan robot mereka PAL Robotics TIAGo ... untuk membawa bir dari kulkas!

Robot TIAGo gratis ("bebas" bukan dalam arti kehendak bebas, tetapi dalam arti perangkat lunak open source dan desain yang diterbitkan beberapa komponen untuk pembuatan dan perakitan independen) dari perusahaan Spanyol PAL Robotics adalah robot layanan yang dirancang untuk melayani orang di dalam ruangan. Perangkat lunak ini dibuat pada standar kerangka terbuka Sistem Operasi Robot (ROS), sehingga model ini sangat ideal untuk berbagai penelitian dan eksperimen di bidang robotika.

Dokumentasi terperinci tersedia untuk TIAGo, termasuk instruksi pengoperasian untuk OpenCV, PCL, navigasi offline, MoveIt! dan sistem interaksi dengan orang-orang. Ada simulator Gazebo yang siap pakai untuk pengujian cepat algoritma, desain robot, pengujian regresi dan pelatihan sistem visi mesin dalam skenario realistis.

Sekelompok programmer Jerman - Rafael Memesheimer (pemimpin tim), Lucas Buchhold (segmentasi semantik), dan Ivanna Mikhalchishina (manipulasi) - menghubungkan robot TIAGo ke komputer modular Nvidia Jetson TX2 , yang dirancang khusus untuk menghitung tugas AI, termasuk visi mesin.


Nvidia Jetson TX2. Foto: Nvidia

Jetson TX2 adalah modul built-in yang hemat energi untuk komputasi AI yang cepat, dibangun pada arsitektur Pascal . Berkat faktor bentuk miniaturnya, konsumsi daya yang rendah sebesar 7,5 watt, sangat bagus untuk robot, drone, multicopter, kamera pintar dan perangkat medis portabel, kata pabrikan. Modul ini dilengkapi dengan 8 GB RAM, dengan bandwidth bus memori 59,7 GB / s. Untuk referensi, berikut adalah spesifikasi teknis Jetson TX2, serta modul Jetson TX1 yang lebih murah dari generasi sebelumnya berdasarkan arsitektur Maxwell.

	Jetson tx2	Jetson tx1
GPU	NVIDIA Pascal, 256 CUDA Cores	NVIDIA Maxwell, 256 CUDA Cores
CPU	HMP Dual Denver 2/2 MB L2 + Quad ARM A57 / 2 MB L2	Quad ARM A57 / 2 MB L2
Video	Pengkodean 4K x 2K 60 Hz (HEVC) Dekode 4K x 2K 60 Hz (12 bit)	4K x 2K 30 Hz (HEVC) Dekode 4K x 2K 60 Hz (10 bit)
Memori	8 GB 128 bit LPDDR4 59,7 GB / s	4 GB 64 bit LPDDR4 25,6 GB / s
Tampilan	2x DSI, 2x DP 1.2 / HDMI 2.0 / eDP 1.4	2x DSI, 1x eDP 1.4 / DP 1.2 / HDMI
CSI	Hingga 6 kamera (dua baris) CSI2 D-PHY 1.2 (2.5 Gbps per baris)	Hingga 6 kamera (dua baris) CSI2 D-PHY 1.1 (1,5 Gbit / s per baris)
Pcie	Gen 2 | 1x4 + 1x1 ATAU 2x1 + 1x2	Gen 2 | 1x4 + 1x1
Berkendara	EMMC 32 GB, SDIO, SATA	16 GB eMMC, SDIO, SATA
Lainnya	BISA, UART, SPI, I2C, I2S, GPIOs	UART, SPI, I2C, I2S, GPIOs
USB	USB 3.0 + USB 2.0
Komunikasi	1 Gigabit Ethernet, 802.11ac WLAN, Bluetooth
Dimensi dan mekanika	50 × 87 mm (konektor 400-pin untuk papan penghubung)

Mainan ini berharga $ 499 dan $ 344, dan lengkap dengan kit dev bahkan lebih mahal (untuk institusi pendidikan di AS dan Kanada, diskon $ 300 ).

Jadi, berdasarkan robot TIAGo dan modul Jetson TX2, siswa Jerman mengembangkan program kontrol otonom yang menemukan jalan ke lemari es, membuka pintu,



mengenali bir menggunakan segmentasi semantik jaringan saraf HomeNet ( kode sumber ),



menangkapnya dengan manipulator,



menutup pintu



dan bir dibawa ke nyonya rumah.


Sekarang, siswa dengan serius berharap untuk menerima salah satu hadiah dalam kompetisi - $ 10.000, kartu video NVIDIA TITAN Xp, kit pengembang Jetson TX2, atau kursus gratis di Deep Learning Institute. Finalis kompetisi juga akan dibayar tiket untuk GTC 2018 (Konferensi Teknologi GPU) - sebuah konferensi tentang inovasi GPU dan Kecerdasan Buatan, yang akan diadakan 25-29 Maret di California.