Imagination嵌入式视觉应用发展
扫描二维码
随时随地手机看文章
受访人:Imagination Technologies多媒体技术市场营销总监Peter McGuinness
1. 问:一般来说,嵌入式视觉涉及广泛的各种应用。你认为有哪些市场特别适合嵌入式视频应用?
答:市场对嵌入式视频产品有巨大需求,而且正持续成长——同时,下一代的电脑视频技术已为各种广泛的新型应用奠定基础,从汽车和安全、到消费类电子与零售等各行业等都涵盖在内。
归功于低功耗并行处理器的广泛应用、3D传感器的日渐普及,以及活跃的算法开发人员生态系统,现在,很多嵌入式设备都能够以按需的方式来分析环境,或是保持连线状态,随时进行环境资料的感应获取。
嵌入式视频的消费类应用案例包括运算摄影学、增强现实、手势控制和场景理解(scene understanding)。今天,很多手机都能通过侦测脸部来自动调整相机焦距与曝光。
在汽车市场,为电动车增加电脑视觉功能可减少并避免意外事件的发生。今天,许多制造商可提供先进驾驶辅助系统(ADAS),采用视觉数据以及雷达和LIDAR(光达)等传统技术来实现盲点侦测、行人侦测与自动紧急刹车等重要的安全功能。汽车制造商已开始在快速扩展的安全应用中采用基于相机的技术。Mobileye这类的芯片厂商正在开发专属的解决方案,能够即时“解读”场景,并为驾驶员提供基于分析结果的立即评估。
在监控市场,为安全摄影机增加嵌入式视觉功能可降低CCTV厂商的成本,并提高可靠度。例如,通过使用先进的人群分析算法,通过侦测人群中走路行为的细微改变,可找出隐藏武器等物品的存在。
在消费类市场,像Nest公司开发的安全产品,它能在侦测到家中有人影走动时通过智能手机通知使用者,并能过滤掉墙上阴影移动或窗外树木摇晃等不重要的信息。
在超市这类一直依赖支付和商店会员卡来追踪消费者行为的零售环境中,也开始利用电脑视觉来发掘新的客户商机。Vadaro等厂商开发的零售摄影机能辨认出商店里的客人是新客户还是老顾客,估算他们的年龄、性别、逗留时间以及关注的产品。除了为零售厂商和广告商提供有价值的反馈之外,这些摄影机还能通过计算排队人数等自动操作方式来提升客户服务。
2. 问:此外,您可提供哪些IP解决方案来满足嵌入式视觉设计的市场需求?
答:通常,视频应用处理器会包括:用来获取图像传感器数据的图像信号处理器(ISP)、可有效运行像素数据平行运算的向量处理器,如GPU以及用来制定高端决策的CPU。一台传感器融合设备会进一步将视觉处理与雷达、超声波、声纳和LIDAR等互补技术,以及来自指南针、加速器和轮型光学编码器等数据输入结合在一起。
Imagination可提供所有所需的硬件元件,来打造新型的高效视觉产品,包括:
· 图像信号处理器:PowerVR Raptor ISP能运行许多通用的图像预处理操作,包括噪音消除和色值标准化。
· 向量处理器(GPU):PowerVR GPU是高性能的向量处理器,能以低功耗有效运行许多的数据平行运算。例如,百度的工程师可在一台内置Imagination-based联发科SoC的手机中,将卷积神经网络(convolution neural network)从CPU卸载到PowerVR GPU,以提升匹配性能并延长手机的电池寿命,从数小时到一天都不用充电。
· 加速器:除了支持高效的向量处理,PowerVR GPU还能提供多个硬件加速器,包括纹理处理单元(TPU)和色域转换单元,这些都能被视觉算法所运用。
3. 问:市场上有各种嵌入式视觉系统解决方案,包括DSP、GPU和FPGA。您认为哪一种比较好?
答:没有一种解决方案是比较好的,它们各有不同的目标市场与应用。然而,随着视觉应用在消费市场逐渐成熟,我们预期,除了你提到的这些技术之外,将会有更多最优化、且专门的解决方案出现。