O robô reconhece a cerveja desejada entre 20 amostrasUm dos participantes do concurso de sistemas
Nvidia Jetson Challenge AI encontrou uma aplicação extraordinária do sistema de Inteligência Artificial. Enquanto outros participantes tentavam usar a visão de máquina em sistemas de cuidados de saúde, segurança, IoT industriais e soluções inovadoras de robótica, os desenvolvedores alemães ensinaram seu robô PAL Robotics TIAGo ... a trazer cerveja da geladeira!
O robô TIAGo gratuito (“livre” não no sentido de livre arbítrio, mas no sentido de software de código aberto e do design publicado de alguns componentes para fabricação e montagem independentes) da empresa espanhola PAL Robotics é um robô de serviço projetado para atender pessoas em ambientes fechados. O software foi criado no ROS (Sistema operacional do robô) de estrutura aberta padrão, portanto este modelo é ideal para várias pesquisas e experimentos no campo da robótica.
Está disponível
documentação detalhada para o TIAGo, incluindo instruções de operação para OpenCV, PCL, navegação offline, MoveIt! e sistemas de interação com as pessoas. Existe um simulador de
Gazebo pronto para testes rápidos de algoritmos, design de robôs, testes de regressão e treinamento de sistemas de visão de máquina em cenários realistas.
Um grupo de programadores alemães - Rafael Memesheimer (líder da equipe), Lucas Buchhold (segmentação semântica) e
Ivanna Mikhalchishina (manipulação) - conectou o robô TIAGo a um computador modular
Nvidia Jetson TX2 , projetado especialmente para tarefas de IA de computação, incluindo visão de máquina.
Nvidia Jetson TX2. Foto: NvidiaO Jetson TX2 é um módulo embutido com eficiência energética para computação rápida de IA, construído na
arquitetura Pascal . Graças ao seu formato em miniatura, baixo consumo de energia de 7,5 watts, é ótimo para robôs, drones, multicopter, câmeras inteligentes e dispositivos médicos portáteis, disse o fabricante. O módulo está equipado com 8 GB de RAM, com uma largura de banda de barramento de memória de 59,7 GB / s. Para referência, aqui estão as especificações técnicas do Jetson TX2, bem como o módulo Jetson TX1 mais barato da geração anterior, com base na arquitetura Maxwell.
| Jetson tx2 | Jetson tx1 |
|---|
| GPU | NVIDIA Pascal, 256 núcleos CUDA | NVIDIA Maxwell, 256 núcleos CUDA |
| CPU | HMP Dual Denver 2/2 MB L2 +
Quad ARM A57 / 2 MB L2 | Quad ARM A57 / 2 MB L2 |
| Vídeo | Codificação 4K x 2K 60 Hz (HEVC)
Decodificação 4K x 2K 60 Hz (12 bits) | 4K x 2K 30 Hz (HEVC)
Decodificação 4K x 2K 60 Hz (10 bits) |
| A memória | LPDDR4 de 8 GB e 128 bits
59,7 GB / s | LPDDR4 de 4 GB e 64 bits
25,6 GB / s |
| Exibição | 2x DSI, 2x DP 1.2 / HDMI 2.0 / eDP 1.4 | 2x DSI, 1x eDP 1.4 / DP 1.2 / HDMI |
| CSI | Até 6 câmeras (duas linhas)
CSI2 D-PHY 1.2 (2,5 Gbps por linha) | Até 6 câmeras (duas linhas)
CSI2 D-PHY 1.1 (1,5 Gbit / s por linha) |
| Pcie | Geração 2 1x4 + 1x1 OU 2x1 + 1x2 | Geração 2 1x4 + 1x1 |
| Drive | EMMC, SDIO, SATA de 32 GB | EMMC, SDIO, SATA de 16 GB |
| Outros | CAN, UART, SPI, I2C, I2S, GPIOs | UART, SPI, I2C, I2S, GPIOs |
| USB | USB 3.0 + USB 2.0 |
| Comunicação | 1 Gigabit Ethernet, 802.11ac WLAN, Bluetooth |
| Dimensões e mecânica | 50 × 87 mm (conector de 400 pinos para placas de conexão) |
Esses brinquedos custam US $ 499 e US $ 344, e o kit completo de desenvolvimento é ainda mais caro (para instituições de ensino nos EUA e no Canadá, um
desconto de US $ 300 ).
Assim, com base no robô TIAGo e no módulo Jetson TX2, os estudantes alemães desenvolveram um programa de controle autônomo que encontra o caminho para a geladeira, abre a porta,
reconhece a cerveja usando a segmentação semântica da rede neural HomeNet (
código fonte ),
o captura com um manipulador,
fecha a porta
e a cerveja é trazida para a anfitriã.
Agora, os estudantes esperam seriamente receber um dos prêmios da competição - US $ 10.000, uma placa de vídeo NVIDIA TITAN Xp, um kit de desenvolvedor Jetson TX2 ou um curso gratuito no Deep Learning Institute. Os finalistas da competição também serão pagos pelos ingressos para o
GTC 2018 (GPU Technology Conference) - uma conferência sobre inovações de GPU e inteligência artificial, que será realizada de 25 a 29 de março na Califórnia.