肇观电子Feynman 3D+AI智能深度相机助力618
扫描二维码
随时随地手机看文章
(全球TMT2022年6月7日讯)所有机器人618的新品和去年双11最大的区别之一就是将机器人里的视觉系统升级为了3D+AI避障,而各家强调的也是这方面性能。肇观电子自主研发的智能深度相机Feynman先进的3D+AI技术成为了移动机器人们的核心卖点。
相机整机具有深度图精度高、帧率高、AI算力强、ISP成像质量好、集成度高、功耗低、体积小等诸多优点。主控芯片内嵌几何和深度引擎DEP,AI加速引擎NPU与视觉加速引擎DSP,采用主动双目视觉技术,在室内外各种场景,都能生成高帧率和高精度的深度图,支持端侧实时智能AI算法的部署。同时还提供SDK,赋能客户部署差异化算法,支持客户深度定制,以满足各种智能设备定位、避障和智能分析等需求。
Feynman相机搭载了散斑结构光、双目红外摄像头IR模组、彩色摄像头RGB全局曝光模组以及惯性测量单元 (IMU)。这些丰富的传感器组合提供了多维度的信息,使得Feynman相机能够帮助机器人构建强大的环境感知和理解能力。
由于Feynman相机自带1.2Tops INT8 / 0.6Tops FP16 NPU(Neural Processing Unit)和666 DMIPS DSP(Digital Signal Processor)视觉加速算力,因此,在产生深度图的同时可以基于RGB图像或者深度图完成物体识别、检测和智能分析等功能。
深度距离的精确程度取决于深度图的精度。Feynman相机具有强大的深度视觉处理能力,它无需其他处理器,就可以产生性能高达720P 30FPS的深度图,且具有极低的空洞率。实测数据表明,Feynman空洞率为0.2%。Feynman的深度图具有90度对角的广角视场,可以帮助智能设备看得更广,实现更好的避障和路径规划。下图可以看出,Feynman所看到的场景比常规深度相机看到的视野更宽广。
Feynman 3D+AI深度相机的竞争优势,尤其在智能方面的亮点更加突出。相机的结构非常紧凑,尺寸为89.8mm x 25mm x 30.8mm,和市面主流深度相机的大小兼容。
Feynman相机不仅适用于室内,场景复杂的室外仍然适用,比方说在小区内完成最后一公里货物配送。在阳光下也可以获得好的深度图。市面上常见的深度相机,其主动光在太阳光下容易受到干扰,从而无法获得良好的深度图。Feynman相机采用独特的光学设计,在室外阳光下应用时,能在降低太阳光干扰的同时,保持信噪比,从而保证深度图的准确性和完整性。
除了在机器人领域的广泛应用,Feynman相机也在工业场景有诸多应用,针对工业场景,Feynman提供了具有千兆以太网,电源和控制信号航插的扩展款。