国际最新研发一种非侵入性语言解码器 可经脑扫描识别语言

11

北京5月2日电 (记者 孙自法)施普林格·自然旗下专业学术期刊《自然-神经科学》最新发表一篇研究论文称,研究人员研发出一种非侵入性的语言解码器,可以通过功能性磁共振(fMRI)数据,以经脑扫描方式,重建感知到或想象出的言语。

过去的语音解码器被用于侵入性神经外科手术后记录神经活动,这限制了它们的用途。其他使用非侵入性脑活动记录的解码器限制在解码单个词汇或短语,此前还不清楚此类解码器是否可用于连续的自然语言。

论文通讯作者、美国得克萨斯大学奥斯汀分校亚历山大·胡斯(Alexander Huth)和同事开发出一个语言解码器,可以通过来自fMRI数据获得的脑模式重建连续语言。在本项研究中,他们记录了3名参与者倾听16小时叙事故事的fMRI数据,以训练模型在脑活动和语义特征之间进行映射,捕捉特定词组含义和相关的大脑响应。这一解码器模型随后测试了参与者听新故事的脑响应,这些故事没有用在初始训练数据集中。使用这一脑活动,该解码器可以生成词汇序列,捕捉到新故事的含义,还生成了一些精确的故事词汇和短语。研究发现,该解码器可以从大多数已知处理语言的脑区和网络的活动中推断连续语言。

论文作者还发现,这一被训练用于感知到的言语的解码器,还可以通过fMRI数据预测某个参与者想象的故事的含义,或观看的一个无声电影的内容。当一名参与者主动听一个故事,忽略其他同时播放的故事,解码器可以识别出那个被主动听的故事的含义。

在此次研究中,论文作者还对研发的语言解码器进行隐私分析,发现当它基于一名参与者的fMRI数据进行训练时,对预测另一名参与者数据的语义内容预测表现不佳。他们总结强调,参与者的合作在训练和应用这些非侵入性解码器中非常关键,取决于未来此类技术的发展,可能需要政策保护心理隐私。(完) 【编辑:房家梁】

(新春走基层)漫步千年古城江苏盱眙:非遗“打铁花”绽放“文化年”

东西问·中法建交60周年|徐波:民间交流如何共叙中法“甲子”情谊?

2024最美基层民警楼仁斌因何闪亮?

乌鲁木齐应对降雪天气 全力保障供电可靠

引进以色列先进农业技术 “中—以绿色农业交流项目”在兰州揭牌

时政画说丨英雄气

广东两年累计完成矿山石场复绿1302公顷

第四届中国大地测量和地球物理学学术大会闭幕 聚焦“碳循环”

2024年全国聋人篮球锦标赛(男子组)在佛山举行

山西山阴县“力捧”冰雪经济:全力打造特色“冰雪小镇”

武汉大余湾迎丰收节 “晒”出乡村好“丰”景

美台签署所谓“21世纪贸易倡议”第一阶段协议 外交部:已向美方提出严正交涉

透视传染病防治法等法律法规中的“战疫大招”

香港画家麦罗武举行水墨画展览 售画所得将作慈善

中国新增一条进出南疆铁路大通道

文章版权声明:除非注明,否则均为蓝色未来原创文章,转载或复制请以超链接形式并注明出处。