TIAGo机器人学会了从冰箱中带出20种啤酒


机器人可以识别20个样本中所需的啤酒

Nvidia Jetson挑战 AI系统竞赛中,一位参与者发现了人工智能系统的非凡应用。 当其他参与者试图在医疗保健,安全,工业物联网系统和创新的机器人解决方案中使用机器视觉时,德国开发人员教他们的机器人PAL机器人TIAGo ...从冰箱里拿啤酒!

来自西班牙公司PAL Robotics的免费TIAGo机器人(“免费”不是自由意志,而是开源软件和一些用于独立制造和组装的组件的已发布设计),是一种旨在为室内人员提供服务的服务机器人。 该软件是在标准开放框架机器人操作系统(ROS)上创建的,因此该模型非常适合机器人领域的各种研究和实验。

有关TIAGo的详细文档 ,包括OpenCV,PCL,离线导航,MoveIt!的操作说明! 和与人互动的系统。 有一个现成的Gazebo仿真器,用于在实际场景中快速测试算法,机器人设计,回归测试以及机器视觉系统的培训。

一组德国程序员-Rafael Memesheimer(团队负责人),Lucas Buchhold(语义细分)和Ivanna Mikhalchishina (操作)-将TIAGo机器人与模块化计算机Nvidia Jetson TX2连接,该计算机专门设计用于计算AI任务,包括机器视觉。


Nvidia Jetson TX2。 照片:Nvidia

Jetson TX2是基于Pascal架构构建的高效节能的内置模块,用于快速AI计算。 该制造商表示,由于其外形小巧,功耗仅为7.5瓦,因此非常适合机器人,无人机,多直升机,智能相机和便携式医疗设备。 该模块配备8 GB的RAM,内存总线带宽为59.7 GB / s。 作为参考,这里是Jetson TX2的技术规格,以及上一代基于Maxwell架构的便宜Jetson TX1模块。

杰特逊TX2杰特逊TX1
显卡NVIDIA Pascal,256个CUDA内核NVIDIA Maxwell,256个CUDA内核
中央处理器HMP双丹佛2/2 MB L2 +
四臂ARM A57 / 2 MB L2
四臂ARM A57 / 2 MB L2
录影带4K x 2K 60 Hz编码(HEVC)
4K x 2K 60 Hz解码(12位)
4K x 2K 30赫兹(HEVC)
4K x 2K 60 Hz解码(10位)
记忆8 GB 128位LPDDR4
59.7 GB /秒
4 GB 64位LPDDR4
25.6 GB /秒
展示架2个DSI,2个DP 1.2 / HDMI 2.0 / eDP 1.42个DSI,1个eDP 1.4 / DP 1.2 / HDMI
CSI最多6台摄像机(两行)
CSI2 D-PHY 1.2(每线2.5 Gbps)
最多6台摄像机(两行)
CSI2 D-PHY 1.1(每条线1.5 Gbit / s)
聚氯乙烯第2代| 1x4 + 1x1或2x1 + 1x2第2代| 1x4 + 1x1
驱动器32 GB eMMC,SDIO,SATA16 GB eMMC,SDIO,SATA
其他CAN,UART,SPI,I2C,I2S,GPIOUART,SPI,I2C,I2S,GPIO
USB接口USB 3.0 + USB 2.0
沟通交流1个千兆以太网,802.11ac WLAN,蓝牙
尺寸和力学50×87 mm(用于连接板的400针连接器)

这些玩具的价格分别为499美元和344美元,并且带有开发套件的价格甚至更高(对于美国和加拿大的教育机构, 折扣价为300美元 )。

因此,德国学生在TIAGo机器人和Jetson TX2模块的基础上,开发了一个自主控制程序,该程序可以找到通往冰箱的路,打开门,



使用神经网络语义分割HomeNet( 源代码 )识别啤酒,



用机械手抓他



关门



然后把啤酒带给女主人。


现在,学生们非常希望获得比赛的奖励之一-10,000美元,NVIDIA TITAN Xp视频卡,Jetson TX2开发人员工具包或深度学习学院的免费课程。 竞赛的决赛入围者还将获得GTC 2018 (GPU技术会议)的门票,该会议将于3月25日至29日在加利福尼亚州举行,这是一场有关GPU创新和人工智能的会议。

Source: https://habr.com/ru/post/zh-CN410663/


All Articles