陈根:沉默语音实现无声交流,失语者的未来将至

文/陈根

人工智能技术的精进与开发无疑对人工智能的应用至关重要,而人工智能除了在与生活强关联方面的应用,回应少数群体的需求也将成为人工智能发展的必然方向。

近日,加州大学伯克利分校的研究人员表示,他们正在使用无声语言和收集肌肉活动的传感器来训练人工智能。其中,无声语言是用肌电图(EMG)检测的,电极则放在脸和喉咙上。研究人员表示,该模型的重点是研究被称之为“沉默语音”的模型,该模型可以检测到人们想说、但没说出声的话。

研究人员相信,他们的方法可以为那些无法发出声音的人提供大量的应用,并且可以支持人工智能助手或其他对语音命令做出响应的设备进行沉默语音检测

尽管设想美好,但想真正实现却并不容易:首先,在收集数据时,研究者会先在实验者的脸上等部位贴8个贴片,每个贴片都是一个“监视肌肉变化”的传感器。

随后,研究人员需要录制一段实验者的有声语音,并与肌电图进行对应这种方法能够将肌肉的变化情况、和语音的类型对应起来。然后使用WaveNet解码器生成音频语音预测。在记录数据的过程中,还要再录制一段“对口型”的肌电图,但不需要发声,也就是“沉默语音”。

与用发声肌电数据训练的基线相比,该方法在书中句子转录的单词错误率下降了64%到4%,错误率比基线减少了95%。此外,为了推动这一领域的进一步研究,研究人员还开发了一个由近20小时面部肌电数据组成的数据集。

这项题为“无声语音的数字发声”的研究论文,在近日举行的自然语言处理经验方法(EMNLP)活动上,获得了最佳论文奖。

研究小组的论文写道:“数字化无声语音有着广泛的潜在应用。”例如,它可以用来制造一种类似于蓝牙耳机的设备,它允许人们在不干扰周围人的情况下进行电话交谈。而显然,这种设备在环境噪音太大无法捕捉到可听语音或保持沉默的环境中将具有重要作用。

(0)

相关推荐

  • 新型传感器转换前臂信号控制假肢手!

    " 假肢的训练在新型传感器的加持下效果显著提升!" 假肢训练 加州大学伯克利分校(University of California, Berkeley)的研究人员开发了一种可穿戴传 ...

  • 新的人工智能算法改进了脑刺激设备来治疗疾病

    对于数百万患有癫痫症和帕金森病等运动障碍的人来说,脑的电刺激已经扩大了治疗的可能性.未来,电刺激可能会帮助患有精神疾病和直接脑损伤(如卒中)的人. 梅奥诊所官网9月3日消息 然而,研究大脑网络如何相互 ...

  • 脑机接口技术:通讯的最新前沿

    更多技术干货第一时间送达 介绍 脑机接口技术是一种与活动的大脑和计算机系统进行交互的系统,可以使用大脑中产生的信号来模拟计算机.实现脑机接口技术有多种方法,例如 1. 脑电图--它通过放置在头皮上的电 ...

  • 陈根:语音游戏,或成从数字屏幕中解脱的良方

    文/陈根 高度发达的互联网技术带来了越来越多的数字装置,智能手机.平板电脑.智能手表等各种数字设备,越来越多地进入人们的生活,00/10后已经逐渐进入到大众观察的视野之中,相比于前一代刚刚迈入&quo ...

  • 陈根:将增强现实融入人机交互,智能世界的未来延展

    文/陈根 尽管就目前来说,计算机鼠标.图形用户界面.桌面隐喻和触摸屏在人们与数字设备的物理交互方面都取得了巨大的飞跃,但改变世界的人机界面(HMI)技术的依然有待突破.现在,增强现实的发展则有望成为人 ...

  • 陈根:实时图像投影伤口,改变手术的未来

    文/陈根 自从X射线被发现以来,影像技术已经彻底改变了手术和医学.这些技术使诊断和治疗更加安全和有效,使今天人们能够生活在一个可以实时观看人体内部高度详细.彩色.3D移动图像的世界里. 比如,靛青绿( ...

  • 陈根:量子AI,走向数字科技系统的未来

    文/陈根 当前,人工智能和量子计算早已经是各自领域炙手可热的研究话题. 伴随人工智能技术的不断发展,人工智能技术作为引领这一轮科技革命以及这一轮产业变革的战略性技术,俨然成为推动经济社会发展的新引擎. ...

  • 陈根:改写基因逆转早衰,可以看见的未来

    文/陈根 2020年,美国再生医学联盟(Alliance for Regenerative Medicine, ARM)曾报告,再生医学领域(包括基因疗法,利用基因工程改造的细胞疗法,细胞疗法,和组织 ...

  • 陈根:3D打印突破传统速度局限,向未来进发

    陈根 知名科技作家为你解读科技与生活的方方面面.昨天 07:40 文/陈根 3D打印作为一种"增材制造",与"减材制造"相对.对于现阶段的制造业来说,目前通常所 ...

  • 陈根:乳腺癌的背后——脂肪细胞与癌细胞的交流联系

    文/陈根 肥胖(包括超重),素来是死亡和很多疾病的重要危险因素,例如心血管病.内分泌及代谢紊乱.骨关节疾病.睡眠呼吸暂停综合征等. 其中,肥胖与癌症的关联受到广泛的关注.就癌症而言,肥胖已被证实与数十 ...

  • NEJM黑科技:人工智能语音信号解码技术帮助失语瘫痪患者恢复语音交流能力

    北京时间今天凌晨,美国加州大学旧金山分校和伯克利分校医工结合团队在<新英格兰医学杂志>(NEJM)发表研究论文,介绍了他们利用脑机接口和人工智能解析卒中后失语患者大脑信号.从而恢复其语言交 ...

  • 陈根:通信监管收与放,数字经济得与失

    文/陈根 对信息通讯技术的发展.布局和应用范围具有深刻影响的政府监管,在世界各国已发生了引人瞩目的进展. 几十年来,世界各国都一直致力于建立对通信技术行业的监管体系,有效地支持通信技术领域持续的技术进 ...