当前位置:首页 > 物联网 > 网络层
[导读]结合音频和生命体征数据,AI深度学习系统不仅将可能成为焦虑人群的“社交教练”,而且有望在未来能够研发出“情感智能”,大大改善人们的社交质量。

 结合音频和生命体征数据,AI深度学习系统不仅将可能成为焦虑人群的“社交教练”,而且有望在未来能够研发出“情感智能”,大大改善人们的社交质量。

有一个不争的事实,那就是人们对某一次对话内容可以有迥然不同的理解方式。举例而言,对于焦虑人群而言,这会使他们的社会交往变得极具挑战。但是,如果有一套客观的方法来测度和理解我们交流时所流露出的情绪,情况是否会变得不同?

麻省理工学院计算机科学与人工智能实验室(CSAIL)和医学工程与科学研究所(IMES)的研究人员已近乎给出我们一个潜在的解决方案:一种可穿戴式AI系统,根据人的讲话方式和生命体征来预测交谈是快乐的、悲伤的还是中性的。

Tuka Alhanai是该团队主要成员之一,他也将出席下星期在旧金山举行的国际人工智能协会(AAAI)第31届大会。他表示:“想象一下,在对话结束时,你可以像倒带一样,重现令你周围人感到最焦虑的时刻。而我们的研究只是朝这个方向迈出了一小步,但也表明,人们离出门时随身装一个AI社交教练的时代可能不远了。”

当参与者讲述一个故事时,系统开始对音频、音频的文本转录和身体信号进行分析,并对故事整体基调做判定,准确率达到了83%。使用深度学习技术,该系统还能为会话内的每个五秒间隔打出“情绪分数”。

研究团队的另外一位核心成员MohammadGhassemi表示:“据我们所知,这是第一个以被动但可靠的方式收集对话者身体数据和语音数据的实验,即使受试者进行自然的、非结构化的对话,而我们的研究结果表明,利用收集到的数据为对话的情绪语调进行实时分类是可行的。”

研究人员还表示,若能在多人对话情境中,使用装有这一系统的智能穿戴设备,比如智能手表,从而能够产生更多可供系统算法分析的数据,将有助于系统性能的进一步提高。

德国帕绍大学教授兼复合智能系统主席Bj?rnSchuller虽没有参与本研究,但他这样评价此项成果:“该团队使用面向消费者的可穿戴设备收集生理数据和语音数据,显示出我们在日常设备中拥有这种工具即将成为现实。技术本身很快会显得更加情感智能,甚至成为“情感智能”。

背后的工作原理

许多情绪检测研究是让参与者观看“快乐”和“悲伤”的视频,或要求他们人为地表现出特定的情感状态。但该研究团队为了努力引出更多的情绪,要求受试者讲一个他们自选的或快乐、或悲伤的故事。

受试者佩戴装有本系统的三星Simband智能腕带——这是一种能捕捉高分辨率生理波形以测量运动、心率、血压、血流量和皮肤温度等体征的研究设备。系统则捕获音频数据和文本转录,从而分析说话者的语气、音调、精力和词汇。

以三星智能腕带对31组持续数分钟的不同对话收集的数据为材料,研究人员对两个算法进行了训练:一种只将会话的总体性质分辨成“快乐”或“悲伤”;第二种则是将每段会话按5秒间隔标记为“正”、“负”或“中性”。

Alhanai指出,在传统的神经网络中,数据的所有特征都被提供给基于网络的算法进行分析。与此相反,他们团队发现,对网络的不同层次组织不同的特征可以提高算法性能。

“系统在不断学习——例如,文本转录中表达的情绪远比原始加速器数据抽象得多。Al在研究人员没有进行有效输入时,机器可以模仿我们人类感知这些交流中包含的感情色彩,这绝对是意义非凡的事情。”

持续开发出能够准确把握人类情绪脉搏的技术

事实是,该算法得到的结果与我们人类可能期望观察到的结果高度匹配。例如,长时间的停顿和单调的声调与悲伤的故事有关,而精力充沛、变化的讲话方式则与快乐的故事有关。在身体语言方面,烦躁不安和心血管活动的增加,以及某些姿势,如一个人把手放在脸上,往往与悲伤的故事密切相关。

平均来说,该模型对每五秒间隔的情绪分类有18%以上的准确度,比现有的方法高出7.5%。

目前,算法虽然还不能可靠到成为一名称职的社交教练,但Alhanai表示,他们正积极地朝着这个目标努力。对于未来的工作,研究团队计划扩大数据的收集规模,考虑使用商业设备,如Apple Watch,让全世界的人们都能更容易地用上这一系统。

“我们的下一步是改进算法在辨别对话情绪方面的准确度,使其能准确辨别诸如无聊、紧张和激动等情绪,而不是仅仅将其标记为‘正’或‘负’。”Alhanai说,“开发能够准确把握人类情绪脉搏的技术,有可能大大改善我们的社交质量。”

这项研究部分由三星战略与创新中心完成。

本站声明: 本文章由作者或相关机构授权发布,目的在于传递更多信息,并不代表本站赞同其观点,本站亦不保证或承诺内容真实性等。需要转载请联系该专栏作者,如若文章内容侵犯您的权益,请及时联系本站删除。
换一批
延伸阅读

9月2日消息,不造车的华为或将催生出更大的独角兽公司,随着阿维塔和赛力斯的入局,华为引望愈发显得引人瞩目。

关键字: 阿维塔 塞力斯 华为

加利福尼亚州圣克拉拉县2024年8月30日 /美通社/ -- 数字化转型技术解决方案公司Trianz今天宣布,该公司与Amazon Web Services (AWS)签订了...

关键字: AWS AN BSP 数字化

伦敦2024年8月29日 /美通社/ -- 英国汽车技术公司SODA.Auto推出其旗舰产品SODA V,这是全球首款涵盖汽车工程师从创意到认证的所有需求的工具,可用于创建软件定义汽车。 SODA V工具的开发耗时1.5...

关键字: 汽车 人工智能 智能驱动 BSP

北京2024年8月28日 /美通社/ -- 越来越多用户希望企业业务能7×24不间断运行,同时企业却面临越来越多业务中断的风险,如企业系统复杂性的增加,频繁的功能更新和发布等。如何确保业务连续性,提升韧性,成...

关键字: 亚马逊 解密 控制平面 BSP

8月30日消息,据媒体报道,腾讯和网易近期正在缩减他们对日本游戏市场的投资。

关键字: 腾讯 编码器 CPU

8月28日消息,今天上午,2024中国国际大数据产业博览会开幕式在贵阳举行,华为董事、质量流程IT总裁陶景文发表了演讲。

关键字: 华为 12nm EDA 半导体

8月28日消息,在2024中国国际大数据产业博览会上,华为常务董事、华为云CEO张平安发表演讲称,数字世界的话语权最终是由生态的繁荣决定的。

关键字: 华为 12nm 手机 卫星通信

要点: 有效应对环境变化,经营业绩稳中有升 落实提质增效举措,毛利润率延续升势 战略布局成效显著,战新业务引领增长 以科技创新为引领,提升企业核心竞争力 坚持高质量发展策略,塑强核心竞争优势...

关键字: 通信 BSP 电信运营商 数字经济

北京2024年8月27日 /美通社/ -- 8月21日,由中央广播电视总台与中国电影电视技术学会联合牵头组建的NVI技术创新联盟在BIRTV2024超高清全产业链发展研讨会上宣布正式成立。 活动现场 NVI技术创新联...

关键字: VI 传输协议 音频 BSP

北京2024年8月27日 /美通社/ -- 在8月23日举办的2024年长三角生态绿色一体化发展示范区联合招商会上,软通动力信息技术(集团)股份有限公司(以下简称"软通动力")与长三角投资(上海)有限...

关键字: BSP 信息技术
关闭
关闭