让失声群体重获“新声”,脑机接口领域现重大突破

2019 年 4 月 25 日 镁客网

镁客网新增【科创板报】栏目

实时速递科创板最新消息

点击菜单栏【文章搜索】,不要错过!



研究团队研发出一款解码器,能够利用人工智能基于大脑数据合成语音。

策划&撰写:韩璐

日前,学术期刊《自然》在线发表了一篇文章,其中涉及一种解码器,能够将大脑神经信号转化为语音,帮助无法说话的患者实现发声交流。

据了解,该解码器由加州大学旧金山分校的神经外科学家Edward Chang教授与其同事一同开发。他们采用了一种叫做“高密度脑皮层电图”的技术,能够基于癫痫患者脑中被植入的电极(医疗监测需要)所传出的数据,直接记录下受试者大脑皮层的神经活动。

过程中,受试者会被要求大声读出几百条句子,研究人员则会同步记录他们大脑腹侧感觉运动皮层区的神经活动,这里是大脑的语音产生中心。

随后,研究人员将利用循环神经网络破译采集到的神经信号,其中涉及两个步骤:第一步,他们将神经信号转换为表征发音器动作的信号,包括下巴、喉、嘴唇和舌头动作相关的脑信号;第二步,他们则根据解码出来的发音器官动作,把信号转换为说出的语句。

为了验证自己的成果,研究人员已经在亚马逊的众包任务平台Mechanical Turk上招募了听众,来辨认解码器合成的语音,测试内容包括325个单词和101局整句。结果显示,听众能够成功的识别出单词,和对自然语音的感知模式一样。

对于这一测试结果,第一作者Gopala Anumanchipalli博士表示,该结果意味着这种神经合成语音对于现实世界的应用来说已经达到即刻听懂的实用程度。

此外,研究人员还进行了另一项测试,让受试者用默读的方式读出同一个句子。结果显示,无声言语的合成效果不如有声言语。但Edward Chang表示,虽然语音解码的准确性大大降低,但受试者在没有声音的情况下模仿发声仍然可以进行语音合成。至于那些已经丧失语音相关动作能力的群体,该系统的适用性还需要进一步研究。

针对这一项研究成果,生物工程学教授Chethan Pandarinath等人在文章评论中表示,这一系统要成为一个临床可行的语音合成脑机接口,还存在许多挑战。但可以肯定的是,脑机接口技术的持续进步可以让存在发声障碍问题的群体重新获得“说话”的能力。

AIoT=AI+IoT,背后究竟是谁更需要谁?

 

马斯克“够狂”!发布“全世界最好的芯片”、推出自动驾驶Taxi,特斯拉鸣锣新战场

 

是权谋还是不当竞争,自动驾驶领域为何频发“技术偷窃”事件?


星标我们,不要错过


镁客网

科技 | 人文 | 行业
微信ID:im2maker
长按识别二维码关注

硬科技产业媒体

关注技术驱动创新

登录查看更多
1

相关内容

脑机接口的英文名称是brain-computer interface,简称BCI,也称作brain-machine interface或direct neural interface。脑机接口(BCI)提供了大脑与计算机或其他外部设备之间的直接通信连接。通过加强或替代人类的工作能力,它们提供了更大的自由度,并在康复、情感计算、机器人、游戏和神经科学等各个领域有潜在的应用。脑机接口是一个多学科交叉形成的研究领域,涉及信息学、神经学、材料学、生物学、医学、心理学、工程学等,是各学科基础理论交叉的集合体。

知识荟萃

精品入门和进阶教程、论文和代码整理等

更多

查看相关VIP内容、论文、资讯等
【ICMR2020】持续健康状态接口事件检索
专知会员服务
17+阅读 · 2020年4月18日
2019->2020必看的十篇「深度学习领域综述」论文
专知会员服务
270+阅读 · 2020年1月1日
2019中国硬科技发展白皮书 193页
专知会员服务
81+阅读 · 2019年12月13日
鼠标终将消失,未来我们有哪些人机交互方式?
人工智能学家
5+阅读 · 2018年11月25日
脑机接口技术如何具体实现?
北京思腾合力科技有限公司
9+阅读 · 2017年12月8日
已删除
将门创投
6+阅读 · 2017年7月6日
Arxiv
6+阅读 · 2020年4月14日
Arxiv
4+阅读 · 2019年12月2日
Teacher-Student Training for Robust Tacotron-based TTS
Arxiv
8+阅读 · 2018年11月27日
Arxiv
11+阅读 · 2018年5月13日
VIP会员
相关资讯
鼠标终将消失,未来我们有哪些人机交互方式?
人工智能学家
5+阅读 · 2018年11月25日
脑机接口技术如何具体实现?
北京思腾合力科技有限公司
9+阅读 · 2017年12月8日
已删除
将门创投
6+阅读 · 2017年7月6日
Top
微信扫码咨询专知VIP会员