Hi!下午好!欢迎访问互联网
当前位置:主页 > 软件

利用脑波可识别出讲话内容

时间:2018-08-18 19:15:50| 来源:| 编辑:笔名| 点击:0次

利用脑波可识别出讲话内容

语言由人的大脑皮层产生,与讲话过程相关的脑波可以直接用脑电图电极记录下来。最近,德国卡尔斯鲁厄技术研究所(KIT)和美国沃德沃斯中心(Wadsworth)等多家机构研究人员第一次证明,根据这些脑波能重新构建持续讲话中的基本单位单词和完整的句子,还能生成相应的文本。他们在最近的《神经科学前沿》杂志上介绍了这种脑文本(Brain-to-text)系统。

长期以来人们一直在思考,能否只通过脑活动来与机器沟通

利用脑波可识别出讲话内容

,我们的成果是这一方向上的重要一步。指导该研究的KIT认知系统实验室的塔尼娅舒尔茨说,我们的研究表明无论是语音中的单个单位,还是连续说出的句子,都可以通过脑活动识别出来。

据每日科学站15道,这一成果由信息学、神经科学和医学方面的研究人员共同合作取得。KIT开发并使用了信号处理和自动语音识别方法。KIT认知系统实验室的克里斯汀赫夫和多米尼克海杰说:除了解码来自脑活动的讲话,我们的模型还能详细分析与讲话过程有关的脑区和它们之间的互动。他们在博士论文中开发了这一系统。

研究人员指出,这是第一次能根据脑活动模式解码持续的语音,并将其转换为文本形式。要做到这一点,必须把脑皮层信息和语言知识、机器学习算法结合在一起,以选出最可能的单词顺序。虽然目前的脑文本系统还是基于语音,但这是识别出人们思想语言重要的第一步。

研究人员记录的脑活动来自7名癫痫病患者,他们的大脑皮层表面因治疗需要放有电极阵列(ECoG)。当患者朗读例文时,研究人员以高分辨率记录下ECoG信号。随后,卡尔斯鲁厄的研究人员对数据进行分析并开发出了脑文本系统。

这一成果除对基础科学方面有所贡献,帮人们更好地理解大脑中复杂的讲话过程外,还有助于将来开发新的语言通讯工具,固定在病人身上帮助他们交流。