NovelEffect用语音识别技术讲故事 让睡前故事随着情节变化精彩纷呈
扫描二维码
随时随地手机看文章
NovelEffect是一款亲子阅读App,它运用了语音识别技术,在爸妈给孩子们讲故事时,将朗读出来的文字与影视主题音乐、音效、动画等同步,让睡前故事随着情节变化精彩纷呈,如同魔幻电影一般。
有一天,我正在为女儿朗读英文绘本《好饿的毛毛虫》(TheVeryHungryCaterpillar)。当读到毛毛虫吃掉一个苹果的时候,我停了下来,因为我听到咖啡桌那边传来了明显的咀嚼声。这种声音实际上是由这款应用程序发出的,它根据使用者正在朗读的故事文本,通过语音识别技术,根据朗读者正在朗读的内容播放各种声音效果和音乐作为背景音乐,让家里及课堂的朗读体验对于孩子来说变得更有吸引力。
打开NovelEffect应用程序,并在系统设置内打开麦克风,你会看到书架上放满了有趣的故事书。使用NovelEffect,你需要在应用中打开特定能匹配现实生活的书,这能使得应用程序开始“倾听”这本书的文本,并且分析朗读者的言语来找出故事当时所处的文本,最后同步播放各种匹配的背景音乐,从肚子疼的呻吟到马儿的嘶鸣声。它不需要使用者从故事的开头一直读到结尾,甚至可以在第10页或者前后几页开始朗读。同时,不管使用者在同一页上停留多久,抑或是在朗读的过程中被打断去谈论书本以外的事物,都不会对应用产生影响。
孩子们都是好奇的小天使,会在读故事的过程中频频打断,问出各种奇妙的问题。而此时NovelEffect正在播放,手机还屏幕朝下放在桌上,这就尴尬了,家长是应该不顾孩子的疑问继续跟着配乐读故事,还是停下来回答问题,然后手忙脚乱地把故事配乐倒过来重播一遍?
孩子提出问题,这是应该被鼓励的。有故事情节,有提问,有思考,有回答,一本好的儿童故事书才能体现它在亲子教育中的作用。尽管停下来去满足孩子们的好奇心吧,NovelEffect也会紧跟着爸妈朗读的内容,停下来耐心等待。在一定时间内,应用程序识别不到书中的文字,便会停下,而一旦说完与故事无关的语句,只要再次大声朗读接下来的文字内容,NovelEffect即可精准识别段落情节,将故事继续下去。针对这一点,该应用在配乐、特效设置以及语音识别的技术调整上独具匠心,朗读者只需几个关键词,配乐便可以识别相关情节并播放。有了这样的设计,想从上次没读完的地方继续,或者是重新读一遍有趣的情节,都不需要用户在App内做任何的设置,系统会自动实现跳转。
对于“哄睡困难户”的孩子们,NovelEffect推出了“哄睡故事”系列,在经过设置后,故事配乐会逐渐变成适合睡觉的白噪音,轻柔地陪伴宝宝进入梦乡。