【資料圖】
中國新聞網記者 孫自法
施普林格·自然旗下專業學術期刊《自然·神經科學》最新發表一篇研究論文稱,研究人員研發出一種非侵入性的語言解碼器,可以通過功能性磁共振(fMRI)數據,以經腦掃描方式,重建感知到或想象出的言語。
過去的語音解碼器被用于侵入性神經外科手術后記錄神經活動,這限制了它們的用途。其他使用非侵入性腦活動記錄的解碼器限制在解碼單個詞匯或短語,此前還不清楚此類解碼器是否可用于連續的自然語言。
論文通訊作者、美國得克薩斯大學奧斯汀分校亞歷山大·胡斯(Alexander Huth)和同事開發出一個語言解碼器,可以通過來自fMRI數據獲得的腦模式重建連續語言。在本項研究中,他們記錄了3名參與者傾聽16小時敘事故事的fMRI數據,以訓練模型在腦活動和語義特征之間進行映射,捕捉特定詞組含義和相關的大腦響應。這一解碼器模型隨后測試了參與者聽新故事的腦響應,這些故事沒有用在初始訓練數據集中。使用這一腦活動,該解碼器可以生成詞匯序列,捕捉到新故事的含義,還生成了一些精確的故事詞匯和短語。研究發現,該解碼器可以從大多數已知處理語言的腦區和網絡的活動中推斷連續語言。
論文作者還發現,這一被訓練用于感知到的言語的解碼器,還可以通過fMRI數據預測某個參與者想象的故事的含義,或觀看的一個無聲電影的內容。當一名參與者主動聽一個故事,忽略其他同時播放的故事,解碼器可以識別出那個被主動聽的故事的含義。
在此次研究中,論文作者還對研發的語言解碼器進行隱私分析,發現當它基于一名參與者的fMRI數據進行訓練時,對預測另一名參與者數據的語義內容預測表現不佳。他們總結強調,參與者的合作在訓練和應用這些非侵入性解碼器中非常關鍵,取決于未來此類技術的發展,可能需要政策保護心理隱私。
標簽:
新聞排行
圖文播報
科普信息網 - 科普類網站
聯系郵箱:85 572 98@qq.com 備案號: 粵ICP備18023326號-39
版權所有:科普信息網 www.www44bkbkcom.cn copyright © 2018 - 2020
科普信息網版權所有 本站點信息未經允許不得復制或鏡像,違者將被追究法律責任!