[导读]视线跟踪技术,和EyeTech Digital Systems公司的眼动仪类似,其看似简单:即找出视线的聚焦点但很复杂。自1901年这项技术发明以来有有百年历史,近二十年来,EyeTech一直处于该领
视线跟踪技术,和EyeTech Digital Systems公司的眼动仪类似,其看似简单:即找出视线的聚焦点但很复杂。自1901年这项技术发明以来有有百年历史,近二十年来,EyeTech一直处于该领域最前沿。下面是EyeTech的视线跟踪流程:
最初,EyeTech使用商业模拟摄像机和电脑,创建一个“窗口鼠标”,来控制眼睛定位。EyeTech眼球追踪技术从瞳孔位置确定视线方向,从人类角膜确定850纳米红外光线。这项技术最初是为残疾用户发明的,帮助他们更充分地与外界交流。包括由ALS,脑瘫,肌肉萎缩症、脊髓损伤、创伤性脑损伤,和中风引起的残疾病人。因为目光追踪定位科技,受到这些疾病干扰的人的生活有了质的飞跃。EyeTech网上有一系列推荐视频。
然而辅助技术市场的规模相对较小,EyeTech的创始人罗伯特•沙普意识到:如果能降低实施成本,规模,和能耗,这项技术可能有更庞大的潜在用户群。下面是沙普的目标:
•独立操作(不需要电脑的)
•“紧凑型”大小
•低功率(< 5 w)
•成本低(< 200美元)
•优越的目光追踪定位能力
•多操作系统支持
•现场升级
•合理的开发时间和成本
对于典型的嵌入式系统,这些都不算困难。但当算法需要用电脑进行负载处理时,这些目标就存在设计上的重大挑战。毫无疑问,如果能找到一个有足够的处理功率的设备,沙普和他的团队就会使用单片机。面对现有的x86处理器PC级别代码,显然上述设想不易实现。
沙普了解到Xilinx Zynq SoC是合适的设备项目。Zynq SoC芯片上,双核ARM cortex - a9 MPCore处理器可以运行现有的基于电脑的代码,重新编译并提供一个可操作的系统。然后,为加速代码的各个部分,沙普的团队工作绩效最差任务的交给Zynq SoC芯片上的PL(可编程逻辑)。移植代码花了两年时间,工程师团队从两人到四人,他们利用兼职时间研究项目。
最终,可以跟踪的项目能使产品凝视帧速率从40上升到到200 +帧/秒。许多视线跟踪应用程序可以适应较慢的帧速率,但某些应用程序(如测试脑损伤)需要较快的帧速率和一个精确的结果。
这是AEye的印刷电路板
这是一个相当小的电路板! Zynq Z-7020 SoC宽度17毫米,电路板仅略高于Zynq SoC套装软件。注意上图右边美国硬币,可以进行尺寸估计。这里有一个AEye板的硬件框图:
这是EyeTech如何给Zynq SoC的处理系统和可编程逻辑分配任务:
沙普指出,由于硬件和软件的划分不绝对,Zynq SoC中高性能处理系统和可编程逻辑的实用性有助于创造理想的快速开发环境。设计团队要想实现比200 fps帧速率更高标准,就必须将任务从处理系统移动到可编程逻辑。
视线跟踪技术如何成为主流?每辆车的视线跟踪系统帮助对抗司机疲劳;通过化学诱导使注意力集中,帮助人们减少分散在手机、平板电脑上的注意力。如果证明有效,保险公司可能立刻会游说新车主安装跟踪系统。这是科幻小说里才出现的场景吗?看看这个Mesa, AZ电视新闻频道3的视频。
(注意:这个博客是一个总结报告。在圣克拉拉举行的2015嵌入式视觉峰会上,Xilinx的罗伯特•沙普和丹•艾萨克斯做了如上的总结报告。)
本站声明: 本文章由作者或相关机构授权发布,目的在于传递更多信息,并不代表本站赞同其观点,本站亦不保证或承诺内容真实性等。需要转载请联系该专栏作者,如若文章内容侵犯您的权益,请及时联系本站删除。
9月2日消息,不造车的华为或将催生出更大的独角兽公司,随着阿维塔和赛力斯的入局,华为引望愈发显得引人瞩目。
关键字:
阿维塔
塞力斯
华为
加利福尼亚州圣克拉拉县2024年8月30日 /美通社/ -- 数字化转型技术解决方案公司Trianz今天宣布,该公司与Amazon Web Services (AWS)签订了...
关键字:
AWS
AN
BSP
数字化
伦敦2024年8月29日 /美通社/ -- 英国汽车技术公司SODA.Auto推出其旗舰产品SODA V,这是全球首款涵盖汽车工程师从创意到认证的所有需求的工具,可用于创建软件定义汽车。 SODA V工具的开发耗时1.5...
关键字:
汽车
人工智能
智能驱动
BSP
北京2024年8月28日 /美通社/ -- 越来越多用户希望企业业务能7×24不间断运行,同时企业却面临越来越多业务中断的风险,如企业系统复杂性的增加,频繁的功能更新和发布等。如何确保业务连续性,提升韧性,成...
关键字:
亚马逊
解密
控制平面
BSP
8月30日消息,据媒体报道,腾讯和网易近期正在缩减他们对日本游戏市场的投资。
关键字:
腾讯
编码器
CPU
8月28日消息,今天上午,2024中国国际大数据产业博览会开幕式在贵阳举行,华为董事、质量流程IT总裁陶景文发表了演讲。
关键字:
华为
12nm
EDA
半导体
8月28日消息,在2024中国国际大数据产业博览会上,华为常务董事、华为云CEO张平安发表演讲称,数字世界的话语权最终是由生态的繁荣决定的。
关键字:
华为
12nm
手机
卫星通信
要点: 有效应对环境变化,经营业绩稳中有升 落实提质增效举措,毛利润率延续升势 战略布局成效显著,战新业务引领增长 以科技创新为引领,提升企业核心竞争力 坚持高质量发展策略,塑强核心竞争优势...
关键字:
通信
BSP
电信运营商
数字经济
北京2024年8月27日 /美通社/ -- 8月21日,由中央广播电视总台与中国电影电视技术学会联合牵头组建的NVI技术创新联盟在BIRTV2024超高清全产业链发展研讨会上宣布正式成立。 活动现场 NVI技术创新联...
关键字:
VI
传输协议
音频
BSP
北京2024年8月27日 /美通社/ -- 在8月23日举办的2024年长三角生态绿色一体化发展示范区联合招商会上,软通动力信息技术(集团)股份有限公司(以下简称"软通动力")与长三角投资(上海)有限...
关键字:
BSP
信息技术
山海路引 岚悦新程 三亚2024年8月27日 /美通社/ -- 近日,海南地区六家凯悦系酒店与中国高端新能源车企岚图汽车(VOYAH)正式达成战略合作协议。这一合作标志着两大品牌在高端出行体验和环保理念上的深度融合,将...
关键字:
新能源
BSP
PLAYER
ASIA
上海2024年8月28日 /美通社/ -- 8月26日至8月28日,AHN LAN安岚与股神巴菲特的孙女妮可•巴菲特共同开启了一场自然和艺术的疗愈之旅。 妮可·巴菲特在疗愈之旅活动现场合影 ...
关键字:
MIDDOT
BSP
LAN
SPI
8月29日消息,近日,华为董事、质量流程IT总裁陶景文在中国国际大数据产业博览会开幕式上表示,中国科技企业不应怕美国对其封锁。
关键字:
华为
12nm
EDA
半导体
上海2024年8月26日 /美通社/ -- 近日,全球领先的消费者研究与零售监测公司尼尔森IQ(NielsenIQ)迎来进入中国市场四十周年的重要里程碑,正式翻开在华发展新篇章。自改革开放以来,中国市场不断展现出前所未有...
关键字:
BSP
NI
SE
TRACE
上海2024年8月26日 /美通社/ -- 第二十二届跨盈年度B2B营销高管峰会(CC2025)将于2025年1月15-17日在上海举办,本次峰会早鸟票注册通道开启,截止时间10月11日。 了解更多会议信息:cc.co...
关键字:
BSP
COM
AI
INDEX
上海2024年8月26日 /美通社/ -- 今日,高端全合成润滑油品牌美孚1号携手品牌体验官周冠宇,开启全新旅程,助力广大车主通过驾驶去探索更广阔的世界。在全新发布的品牌视频中,周冠宇及不同背景的消费者表达了对驾驶的热爱...
关键字:
BSP
汽车制造
此次发布标志着Cision首次为亚太市场量身定制全方位的媒体监测服务。 芝加哥2024年8月27日 /美通社/ -- 消费者和媒体情报、互动及传播解决方案的全球领导者Cis...
关键字:
CIS
IO
SI
BSP
上海2024年8月27日 /美通社/ -- 近来,具有强大学习、理解和多模态处理能力的大模型迅猛发展,正在给人类的生产、生活带来革命性的变化。在这一变革浪潮中,物联网成为了大模型技术发挥作用的重要阵地。 作为全球领先的...
关键字:
模型
移远通信
BSP
高通
北京2024年8月27日 /美通社/ -- 高途教育科技公司(纽约证券交易所股票代码:GOTU)("高途"或"公司"),一家技术驱动的在线直播大班培训机构,今日发布截至2024年6月30日第二季度未经审计财务报告。 2...
关键字:
BSP
电话会议
COM
TE
8月26日消息,华为公司最近正式启动了“华为AI百校计划”,向国内高校提供基于昇腾云服务的AI计算资源。
关键字:
华为
12nm
EDA
半导体