中科院自動(dòng)化研究所發(fā)布國(guó)際最大規(guī)模多模態(tài)同步神經(jīng)影像集

近日，中國(guó)科學(xué)院自動(dòng)化研究所自然語(yǔ)言處理研究組正式發(fā)布了目前國(guó)際上規(guī)模最大、包含信息最豐富的多模態(tài)同步語(yǔ)言神經(jīng)影像數(shù)據(jù)集。我們的大腦究竟怎樣調(diào)動(dòng)各腦區(qū)去理解語(yǔ)言?不同腦區(qū)之間如何協(xié)同工作?對(duì)于這些問(wèn)題，該數(shù)據(jù)集都能提供研究支持。

大腦在加工語(yǔ)言時(shí)，需要實(shí)時(shí)調(diào)動(dòng)多個(gè)腦區(qū)的神經(jīng)元進(jìn)行協(xié)同工作。構(gòu)建高時(shí)空分辨率的神經(jīng)影像數(shù)據(jù)，能幫助我們更好地了解各個(gè)腦區(qū)以及腦區(qū)之間的協(xié)同合作。但當(dāng)前已有的開(kāi)源數(shù)據(jù)主要針對(duì)英文采集，只包括單一模態(tài)的神經(jīng)影像數(shù)據(jù)且規(guī)模有限，無(wú)法更全面深入地探索大腦語(yǔ)言加工機(jī)制。

為突破上述問(wèn)題，研究團(tuán)隊(duì)邀請(qǐng)了12名被試者收聽(tīng)時(shí)長(zhǎng)約6小時(shí)的故事，收集、采集、整理他們的功能核磁共振、腦磁圖、擴(kuò)散磁共振成像和靜息態(tài)核磁共振等數(shù)據(jù)，故事材料由人工標(biāo)注了句法結(jié)構(gòu)樹(shù)，計(jì)算了文本中每個(gè)詞匯對(duì)應(yīng)的音頻時(shí)間點(diǎn)、詞頻等，從而形成了當(dāng)前國(guó)際上最大規(guī)模用于腦語(yǔ)言處理機(jī)制研究的多模態(tài)同步神經(jīng)影像數(shù)據(jù)集，已覆蓋近萬(wàn)個(gè)漢語(yǔ)詞匯，將為全方位研究大腦在真實(shí)場(chǎng)景下理解詞匯、短語(yǔ)和句子時(shí)如何調(diào)動(dòng)不同腦區(qū)，以及不同腦區(qū)之間如何協(xié)同工作等科學(xué)問(wèn)題提供重要支撐。(劉蘇雅)

關(guān)鍵詞： 中科院自動(dòng)化研究所 國(guó)際最大規(guī)模多模態(tài)同步神經(jīng)影像集 不同腦區(qū)之間如何協(xié)同工作 構(gòu)建高時(shí)空分辨率的神經(jīng)影像數(shù)據(jù)