JeVois:开源四核计算机视觉平台

我喜欢机器人,经常监视Internet以寻找有趣的解决方案。我不小心发现了一个非常有趣的项目,我急忙与您分享信息。JeVois众筹项目是一个开源的机器视觉平台:视频传感器和四核处理器,采用28cc微型封装。请参阅计划于2017年2月交付。此模块能够通过USB或串行端口传输数据。根据该项目的作者所说,一切都应该开箱即用。所需要做的只是在程序中插入microSD存储卡(声明了对opencv 3.1和许多其他算法的支持)并将其连接到计算机或微控制器。


JeVois开始发展为一个教育项目,因为作者意识到在机器人设计中迫切需要这种人工视觉模块。当前,没有开箱即用的适用于树莓派或arduino的专业解决方案。




JeVois旨在通过提供一个自足的计算机视觉模块来填补这一空白,该模块既可以提供视频传输,又可以通过串行端口传输计算机视觉算法的结果。

JeVois的工作方式如下:从摄像机捕获视频,通过其自己的处理器上的机器视觉算法动态处理视频,然后将结果通过USB传输到计算机和/或通过串行传输到微控制器。



在计算机上,JeVois被检测为USB相机。智能摄像机JeVois是一个开源项目,这意味着可以进行个性化和修改以满足您的需求的最大可能性。该项目的作者宣布了三种标准操作模式:

  1. USB视频传输以及视频分析结果的串行数据传输(例如,已识别的任何QR码的坐标和内容)。
  2. 传输没有视频的文本信息。
  3. 传输标有最有趣区域的视频,以便在功能更强大的PC上进行进一步分析,例如使用神经网络。

技术指标




智能相机是船上完整的Linux计算机。它可以独立工作,而无需连接到PC或微控制器。多亏了冷却风扇,它可以在满负载下运行而不会过热,同时保持1.34 GHz的恒定处理器速度。

软体类




在视频示例中,该算法在智能相机的处理器上的处理速度为73 fps,即处理一个视频帧需要13.68 ms。另请注意,根据此算法,处理器未完全加载(负载的148.7%,而所有4个处理器内核的满负载则为400%)。因此,其他算法也可以与视频分析并行工作。


增强现实标记(ArUco)的识别,物体的检测和识别,自动驾驶的道路检测的示例。


跟踪眼睛的120Hz(相机以每秒120帧的速度流动,以200+ FPS的速度执行处理)



到4月,开发人员承诺创建一个社区并最终确定将提供高级功能的软件。

Raspberry Pi3型号比较




JeVois项目部分由美国国家科学基金会和DARPA的研究资助使成为可能。

我真的希望该平台的成功开发,这将有助于实现DIY项目的飞跃。

为机器人提供SLAM!

Source: https://habr.com/ru/post/zh-CN400393/


All Articles