机器人可以识别20个样本中所需的啤酒在
Nvidia Jetson挑战 AI系统竞赛中,一位参与者发现了人工智能系统的非凡应用。 当其他参与者试图在医疗保健,安全,工业物联网系统和创新的机器人解决方案中使用机器视觉时,德国开发人员教他们的机器人PAL机器人TIAGo ...从冰箱里拿啤酒!
来自西班牙公司PAL Robotics的免费TIAGo机器人(“免费”不是自由意志,而是开源软件和一些用于独立制造和组装的组件的已发布设计),是一种旨在为室内人员提供服务的服务机器人。 该软件是在标准开放框架机器人操作系统(ROS)上创建的,因此该模型非常适合机器人领域的各种研究和实验。
有关TIAGo的
详细文档 ,包括OpenCV,PCL,离线导航,MoveIt!的操作说明! 和与人互动的系统。 有一个现成的
Gazebo仿真器,用于在实际场景中快速测试算法,机器人设计,回归测试以及机器视觉系统的培训。
一组德国程序员-Rafael Memesheimer(团队负责人),Lucas Buchhold(语义细分)和
Ivanna Mikhalchishina (操作)-将TIAGo机器人与模块化计算机
Nvidia Jetson TX2连接,该计算机专门设计用于计算AI任务,包括机器视觉。
Nvidia Jetson TX2。 照片:NvidiaJetson TX2是基于
Pascal架构构建的高效节能的内置模块,用于快速AI计算。 该制造商表示,由于其外形小巧,功耗仅为7.5瓦,因此非常适合机器人,无人机,多直升机,智能相机和便携式医疗设备。 该模块配备8 GB的RAM,内存总线带宽为59.7 GB / s。 作为参考,这里是Jetson TX2的技术规格,以及上一代基于Maxwell架构的便宜Jetson TX1模块。
| 杰特逊TX2 | 杰特逊TX1 |
---|
显卡 | NVIDIA Pascal,256个CUDA内核 | NVIDIA Maxwell,256个CUDA内核 |
中央处理器 | HMP双丹佛2/2 MB L2 + 四臂ARM A57 / 2 MB L2 | 四臂ARM A57 / 2 MB L2 |
录影带 | 4K x 2K 60 Hz编码(HEVC) 4K x 2K 60 Hz解码(12位) | 4K x 2K 30赫兹(HEVC) 4K x 2K 60 Hz解码(10位) |
记忆 | 8 GB 128位LPDDR4 59.7 GB /秒 | 4 GB 64位LPDDR4 25.6 GB /秒 |
展示架 | 2个DSI,2个DP 1.2 / HDMI 2.0 / eDP 1.4 | 2个DSI,1个eDP 1.4 / DP 1.2 / HDMI |
CSI | 最多6台摄像机(两行) CSI2 D-PHY 1.2(每线2.5 Gbps) | 最多6台摄像机(两行) CSI2 D-PHY 1.1(每条线1.5 Gbit / s) |
聚氯乙烯 | 第2代| 1x4 + 1x1或2x1 + 1x2 | 第2代| 1x4 + 1x1 |
驱动器 | 32 GB eMMC,SDIO,SATA | 16 GB eMMC,SDIO,SATA |
其他 | CAN,UART,SPI,I2C,I2S,GPIO | UART,SPI,I2C,I2S,GPIO |
USB接口 | USB 3.0 + USB 2.0 |
沟通交流 | 1个千兆以太网,802.11ac WLAN,蓝牙 |
尺寸和力学 | 50×87 mm(用于连接板的400针连接器) |
这些玩具的价格分别为499美元和344美元,并且带有开发套件的价格甚至更高(对于美国和加拿大的教育机构,
折扣价为300美元 )。
因此,德国学生在TIAGo机器人和Jetson TX2模块的基础上,开发了一个自主控制程序,该程序可以找到通往冰箱的路,打开门,

使用神经网络语义分割HomeNet(
源代码 )识别啤酒,

用机械手抓他

关门

然后把啤酒带给女主人。
现在,学生们非常希望获得比赛的奖励之一-10,000美元,NVIDIA TITAN Xp视频卡,Jetson TX2开发人员工具包或深度学习学院的免费课程。 竞赛的决赛入围者还将获得
GTC 2018 (GPU技术会议)的门票,该会议将于3月25日至29日在加利福尼亚州举行,这是一场有关GPU创新和人工智能的会议。