当前位置:首页 > 智能硬件 > 机器视觉
[导读]   远程呈现机器人,顾名思义,就是用户能在遥远的地方通过机器人替身去查看和感知机器人所处的环境。在太空机构、科研和军用领域,这样的设备已经出现了,它们能带给研究者和士兵身临其境的使用体验,但这些

  远程呈现机器人,顾名思义,就是用户能在遥远的地方通过机器人替身去查看和感知机器人所处的环境。在太空机构、科研和军用领域,这样的设备已经出现了,它们能带给研究者和士兵身临其境的使用体验,但这些高端的设备造价高昂,没几百万美元就不要想了。而消费者市场的远程呈现机器人(如Double或Beam)虽然造价较低,但所能带来的体验却很差劲——不过是传输到你的显示器上面的视频流而已。

  

  现在,一个来自美国宾夕法尼亚大学的机器人专家小组正在使用经济实惠的传感器、执行器和虚拟现实技术(Oculus Rift)如搭建一个平台,来为用户提供能与高端远程呈现系统相媲美的价格合理的系统。该系统名叫DORA (Dexterous ObservaTIonal Roving Automaton轻便型观察用巡回自动机) 。该系统能够精确跟踪人的头部运动,并将相应的运动传递到通过信号连接的机器人上,然后人可以根据机器人上配置的相关传感器反馈的信号获得身临其境的体验。他们的目标是让用户能够远程操控机器人,甚至会让用户忘记自己并不在现场。

  当你戴上Oculus Rift这样的虚拟现实设备时,你就进入到了一个虚拟的世界之中。而随着该系统能几乎实时地追踪你的头部运动,软件更新也能以超过你能感知的速度对你眼前的屏幕进行刷新。就我的感觉来说,这个系统的效果非常好,几乎能让人短暂地沉浸在那样的场景中。

  但是,如果系统中的所有组件并不能完美地协作,就会对体验产生巨大的影响。糟糕的时候甚至会让你感到头晕目眩。因为我们的眼镜、内耳和大脑对于真实的体验有严格的标准,当我们的各个感受器官不匹配时,会给大脑带来严重的分歧,从而引起不适感。所以我们需要知道怎样的传感才是正确合适的。

  这也是远程实景体验难以实现的原因,因为信号传输必然存在的延迟,我们只能让体验尽可能地完美。所以要解决的问题不仅是设计出能够准确跟踪你的头部运动的机器人,而且还要让机器人传送回来的信息能够骗过你的大脑,这样才能呈现出身临其境的真实体验。为了实现这一目标,你需要一些复杂的东西,这也是DORA系统试图成功的地方。

  “Dora基于基本的人类体验——也就是通过视觉和听觉的刺激形成对世界的感知,在忽略微妙的暗示时也使用这种方式实现人与人之间的交互。在其核心,DORA平台探索当一个人处于某个场景中时和一个人的存在如何对空间中的其他人产生影响时出现的问题。”

  是的,他们就是这么说的。

  让我们来看看DORA的工作过程吧。

  Oculus头设使用IMU(惯性测量单元)追踪运动,使用红外信标确定运动位置。然后得到的位置数据通过无线信号发送给机器人上面安装的Arduino或Intel Edison微控制器,然后机器人在根据收到的信号做出反应:俯仰、移动、转向、翻转等。

  

  DORA的每个相机都能回传30帧每秒的976 x 582的视频数据,当然,这一参数比Oculus所能处理的最高分辨率和刷新率都低。这主要是因为DORA还是一个原型系统,在信号处理上进行了一些预留,即使之后研究人员对相机进行升级,整个系统也是能够处理的。

  对于这样一个系统,延迟是其中的一个最大的问题。当你移动你的脑袋的时候,你能预料到进入你视野的场景会发生怎样的变化。如果延迟过大,就可能带来眩晕和恶心的感觉。

  使用像Oculus这样的虚拟现实系统,传感器必须要能够测量你的头部运动并将数据发送到你的计算机,然后你的计算机必须计算出你视野发生的改变,并将相应的场景呈现在你的眼前。Oculus曾援引虚拟现实研究的结论说“60毫秒的延迟是可接受的虚拟现实的上限……而当延迟低于20毫秒时,延迟将变得不可察觉”。

  DORA面临的主要挑战不只是无线网络连接的问题,还有机械部件的运动限制问题。DORA的创造者说在典型的使用场景下,系统的延迟为70毫秒。该团队承认这仍然过高,但还不算完全不能接受,我们期望看到未来能实现更多优化。

  

  行走中的DORA机器人

  目前,DORA依靠一个无线链路进行连接,工作范围为7公里。这就是DORA设计的目的,但如果要将这一系统应用到远程博物馆或远程控制平台上,那显然要将连接过渡到WiFi或4G网络上。而这又会带来额外的延迟,但DORA团队希望随着无线基础设施的改善,未来可以在更远的地方访问DORA。

  DORA团队的领头人是机器人学教授Vijay Kumar称他们已经在50位志愿者身上对这一系统进行了测试,而其中只有三例报告了某种程度的运动不适,不过这和典型的Oculus场景带给他们的感觉差不多。

  我自己(笔者)还没试过DORA系统,但该团队的成员之一Emre Tan?rgan这样描述了远程呈现所带来的临场感:

  “你感觉到你被传送到了真实世界的另一个地方,而不是处在一个虚拟的环境中。事实上你可以看见人们和你进行交互,好像他们就在那里,而目前来看要从虚拟场景中实现相同的体验还比较困难。你可以说虚拟现实使用的实时的计算机图像不久就能赶上真实世界,但还有一个不同就是DORA带来的感觉是完全鲜活的。另外像这样的系统还有内在的不可预测性,除非你去过那里,不然你没法知道你会遇到什么。”

  该团队告诉我们他们将进行一些集资活动,并且会正式推出一些产品,但目前该团队还并未拿出一个切实可行的计划。其早期的应用市场可能包括相对性控制、博物馆这样的半结构化坏境和一些紧急响应系统;当然,感兴趣的玩家也是目标市场之一,而事实上这也是我最感兴趣的地方。

  Suitable Technologies这样的远程呈现公司已经在测试参观博物馆这样的远程呈现体验了。而使用DORA,你也能获得相似的体验,而且还能体会到身临其境的感觉,而不只是观看屏幕上显示的动态图像。当然,目前这套系统还不能和真实场景匹敌,但DORA揭示了未来的方向,至少我们离那一天已经不远了。

本站声明: 本文章由作者或相关机构授权发布,目的在于传递更多信息,并不代表本站赞同其观点,本站亦不保证或承诺内容真实性等。需要转载请联系该专栏作者,如若文章内容侵犯您的权益,请及时联系本站删除。
换一批
延伸阅读

9月2日消息,不造车的华为或将催生出更大的独角兽公司,随着阿维塔和赛力斯的入局,华为引望愈发显得引人瞩目。

关键字: 阿维塔 塞力斯 华为

加利福尼亚州圣克拉拉县2024年8月30日 /美通社/ -- 数字化转型技术解决方案公司Trianz今天宣布,该公司与Amazon Web Services (AWS)签订了...

关键字: AWS AN BSP 数字化

伦敦2024年8月29日 /美通社/ -- 英国汽车技术公司SODA.Auto推出其旗舰产品SODA V,这是全球首款涵盖汽车工程师从创意到认证的所有需求的工具,可用于创建软件定义汽车。 SODA V工具的开发耗时1.5...

关键字: 汽车 人工智能 智能驱动 BSP

北京2024年8月28日 /美通社/ -- 越来越多用户希望企业业务能7×24不间断运行,同时企业却面临越来越多业务中断的风险,如企业系统复杂性的增加,频繁的功能更新和发布等。如何确保业务连续性,提升韧性,成...

关键字: 亚马逊 解密 控制平面 BSP

8月30日消息,据媒体报道,腾讯和网易近期正在缩减他们对日本游戏市场的投资。

关键字: 腾讯 编码器 CPU

8月28日消息,今天上午,2024中国国际大数据产业博览会开幕式在贵阳举行,华为董事、质量流程IT总裁陶景文发表了演讲。

关键字: 华为 12nm EDA 半导体

8月28日消息,在2024中国国际大数据产业博览会上,华为常务董事、华为云CEO张平安发表演讲称,数字世界的话语权最终是由生态的繁荣决定的。

关键字: 华为 12nm 手机 卫星通信

要点: 有效应对环境变化,经营业绩稳中有升 落实提质增效举措,毛利润率延续升势 战略布局成效显著,战新业务引领增长 以科技创新为引领,提升企业核心竞争力 坚持高质量发展策略,塑强核心竞争优势...

关键字: 通信 BSP 电信运营商 数字经济

北京2024年8月27日 /美通社/ -- 8月21日,由中央广播电视总台与中国电影电视技术学会联合牵头组建的NVI技术创新联盟在BIRTV2024超高清全产业链发展研讨会上宣布正式成立。 活动现场 NVI技术创新联...

关键字: VI 传输协议 音频 BSP

北京2024年8月27日 /美通社/ -- 在8月23日举办的2024年长三角生态绿色一体化发展示范区联合招商会上,软通动力信息技术(集团)股份有限公司(以下简称"软通动力")与长三角投资(上海)有限...

关键字: BSP 信息技术
关闭
关闭