新利平台 > 即時新聞 > 國內

中科院團隊發布國際最大規模漢語同步多模態神經影像數據集

發布時間:2022-10-10 11:19:00來源: 中國新聞網

  中新網北京10月9日電 (記者 孫自法)中國科學院自動化研究所(中科院自動化所)9日向媒體(ti) 發布信息說,該所自然語言處理研究組曆時近兩(liang) 年,采集處理完成迄今國際上規模最大、包含信息最豐(feng) 富的漢語同步多模態神經影像數據集,並於(yu) 近日正式對外發布。

  該數據集覆蓋了近萬(wan) 個(ge) 漢語詞匯,是當前國際上最大規模的用於(yu) 腦語言處理機製研究的多模態同步神經影像數據集。其相關(guan) 研究成果論文已在《自然》(Nature)旗下專(zhuan) 業(ye) 學術期刊《科學數據》(Scientific Data)發表。

  據中科院自動化所自然語言處理研究組介紹,大腦在加工語言時,需要實時調動多個(ge) 腦區的神經元進行協同工作。構建高時空分辨率的神經影像數據可以幫助人們(men) 更好地了解各個(ge) 腦區以及腦區之間的協同合作,對於(yu) 研究大腦的語言加工機製至關(guan) 重要。

  當前已有的開源數據主要針對英文采集,隻包括單一模態的神經影像數據,如高空間分辨率的功能核磁共振(fMRI)或高時間分辨率的腦磁圖(MEG),並且大多使用1小時以內(nei) 的實驗材料,數據規模有限,無法借助數據需求量大的計算模型進行更全麵、更深入的大腦語言加工機製探索。

  為(wei) 突破上述問題,該研究組曆時近兩(liang) 年采集處理完成目前國際上規模最大、包含信息最豐(feng) 富的漢語同步多模態神經影像數據集,針對12個(ge) 被試收聽約6個(ge) 小時故事時的功能核磁共振(fMRI)、腦磁圖(MEG)、每個(ge) 被試的T1/T2加權結構像、擴散磁共振成像(diffusion MRI)和靜息態核磁共振(resting MRI)數據采集整理而成。為(wei) 了便於(yu) 利用計算模型進行腦語言處理機製的研究,所有故事材料都由人工標注了句法結構樹,計算了文本中每個(ge) 詞匯對應的音頻時間點、詞頻以及多種不同字和詞匯的向量。同時,所有測試指標均超越或可比於(yu) 已有的同類數據集,具有充分的質量保證。

  中科院自動化所自然語言處理研究組表示,目前國際最大規模漢語同步多模態神經影像數據集的公開發布,可以為(wei) 全方位研究大腦在真實場景下理解詞匯、短語和句子時如何調動不同腦區以及不同腦區之間如何協同工作等科學問題提供重要支撐。

  特別值得注意的是,該數據集覆蓋了近萬(wan) 個(ge) 漢語詞匯,這不僅(jin) 對於(yu) 研究大腦理解漢語的認知機理具有重要意義(yi) ,而且將在探索自然語言計算模型與(yu) 人腦語言處理機製之間的關(guan) 係,研究如何利用神經影像數據提升現有語言計算模型的性能,從(cong) 而構建新一代受腦啟發的神經語言模型等一係列工作中發揮顯著作用。(完)

(責編:陳濛濛)

版權聲明:凡注明“來源:新利平台”或“新利平台文”的所有作品,版權歸高原(北京)文化傳(chuan) 播有限公司。任何媒體(ti) 轉載、摘編、引用,須注明來源新利平台和署著作者名,否則將追究相關(guan) 法律責任。