单目摄像头和FPGA的ADAS产品原型系统
扫描二维码
随时随地手机看文章
1月5日-8日拉斯维加斯消费电子展(CES)上,地平线机器人(以下简称“地平线”)将与英特尔联合展示一款基于单目摄像头和FPGA的ADAS产品原型系统。
车辆检测结果
该原型由英特尔和地平线联合开发完成,基于地平线最新设计的一款低功耗深度神经网络处理器架构IP。分工上,英特尔提供了FPGA硬件平台,地平线提供了实现在FPGA上的深度神经处理器架构,深度神经网络算法,以及整套嵌入式人工智能解决方案。该系统可实现高速公路和市区道路场景下的ADAS功能,可对车辆、车道线,行人,以及可行驶区域等同时实时检测和识别。
现场展示会尽量还原行车中视觉部分实时计算的过程。使用一个和硬件平台连接的单目摄像头拍摄路况,并在硬件平台中对交通环境进行处理,模拟行车时基于计算机视觉的驾驶辅助功能。受限于室内展示无法提供真实道路环境,摄像头会拍摄显示器播放的行车路况视频,来模拟真实情况中摄像头从前挡玻璃处观察前方路况。实时运算处理的结果会由另一个显示器输出,观众可在画面中看到目标检测识别后的结果,来演示算法的识别率和硬件性能。
众所周知,在基于视觉的ADAS功能实现中,图像相关算法性能与计算资源高度相关。其中基于深度学习的图像处理算法,对硬件的计算性能、功耗、以及成本把控都会提出更高要求。为了减轻对硬件压力,算法本身的优化将成为重中之重。本次产品原型的展示,不仅能佐证英特尔的硬件平台性能,而且对地平线算法优化的功力亦能有所体现。据披露,这是业界首次在Intel的FPGA平台上展现深度学习计算性能,也是地平线首次向外界展示其处理器架构研发的最新成果。
地平线成立于2015年7月,设有北京总部和深圳、南京分公司,汽车业务主要针对自动驾驶提供基于深度神经网络和深度学习的嵌入式人工智能解决方案,主要产品是核心处理器架构,软件算法和全套技术解决方案,是一家面向前装的二级零部件供应商。
目前地平线在软件算法上提供了基于深度学习的整体方案,具有高性能、低运算量的特点。在今年智车优行“奇点汽车”发布会上,地平线首次向外界展示了真车环境下,利用单目摄像头同时实现行人/车辆/车道线检测的ADAS产品原型系统。在今年3月份时,地平线已独立开发推出了专门根据自身深度学习算法设计的软硬件解决方案——Hugo1.0平台。
英特尔近期重申了进入汽车领域的决心,期待用汽车业务续写PC时代的辉煌。公司近两年通过一系列收购来为进军汽车领域积蓄力量,陆续完成了对可编程逻辑器件厂商Altera、意大利半导体制造商Yogitech和计算机视觉公司Itseez Inc的收购。近期又宣布成立专门致力于提供自动驾驶技术解决方案的事业部——自动驾驶事业部(简称ADG)。
在汽车领域,英特尔的合作业务已陆续展开。目前这家公司已在联合宝马、Mobileye共同开发无人驾驶汽车技术,让宝马自动驾驶汽车在2021年上路。此次与地平线的合作,将为英特尔在汽车领域的研发探索提供一则全新案例。