2019年10月10日,中國科學院腦科學與智能技術卓越創(chuàng)新中心、中科院靈長類神經(jīng)生物學重點實驗室、上海腦科學與類腦研究中心空間感知研究組顧勇研究員團隊與瑞士日內瓦大學認知計算神經(jīng)科學Alexandre Pouget研究組合作在Neuron雜志上發(fā)表了題為“Neural Correlates of Optimal Multisensory Decision Makingunder Time-Varying Reliabilities with an Invariant Linear Probabilistic Population Code”的文章,利用靈長類動物獼猴,揭示了復雜環(huán)境下多模態(tài)感覺信息最優(yōu)整合及決策的神經(jīng)機制。
研究人員以自身運動感知為模式系統(tǒng),建立了一套基于前庭和視覺的虛擬現(xiàn)實實驗平臺。在該平臺上,研究人員訓練獼猴通過前庭與視覺兩種不同模態(tài)的感覺信息來分辨其自身的運動方向。重要的是,系統(tǒng)提供的運動刺激具有先加速后減速的過程;由于內耳前庭器官對加速度敏感,而視覺通道通常對速度敏感,因此大腦所接收到的這兩種感覺信息具有不同的時間動力學,從而模擬了自然環(huán)境中證據(jù)可靠性實時變化的復雜多模態(tài)輸入。經(jīng)過訓練,獼猴在多模態(tài)刺激(前庭+視覺)的實驗條件下,可以分辨更加精細的自身運動角度變化,并且相對于單模態(tài)刺激的實驗條件,其行為表現(xiàn)的提高符合貝葉斯最優(yōu)整合理論的預期。這些結果表明獼猴的確可以通過整合來自不同感覺渠道的信息來提高認知的精度,并且該過程中幾乎不會發(fā)生信息的丟失(即“最優(yōu)”)。
在獼猴分辨自身運動方向的同時,研究者通過金屬微電極記錄位于獼猴后頂葉皮層一個決策相關區(qū)域——頂內溝外側區(qū)(LIP)神經(jīng)元的電生理活動。研究者發(fā)現(xiàn),在兩種不同的單模態(tài)刺激條件下,LIP神經(jīng)元分別跨時間累積了來自不同物理量的證據(jù)——前庭來自加速度,而視覺來自速度。因此,神經(jīng)元所接收的前庭和視覺證據(jù)的確具有實時變化的可靠性。那么,在多模態(tài)的實驗條件下,神經(jīng)元將如何實現(xiàn)貝葉斯最優(yōu)整合的兩個關鍵步驟,即“估計可靠性”和“實現(xiàn)加權操作”呢?一種被稱為“線性不變概率性群體編碼(ilPPC)”的假說則認為,群體神經(jīng)元的實時放電活動可以直接表征信息輸入的可靠性:在這種情況下,只需要神經(jīng)元群體對感覺輸入進行一種突觸權重不變的簡單線性疊加,就可以實現(xiàn)信息的貝葉斯最優(yōu)整合。因此,ilPPC假說提出的這種計算方式對于生物大腦來說會更加簡易、快速和可行。
為了檢驗實驗數(shù)據(jù)是否與ilPPC假說相符,研究人員構建和完善了一個基于ilPPC理論框架的神經(jīng)網(wǎng)絡模型。理論估計和數(shù)值模擬的結果證實,網(wǎng)絡中的神經(jīng)元集群對前庭與視覺信息進行跨模態(tài)和跨時間的簡單線性疊加的確可以自動實現(xiàn)證據(jù)可靠性依賴的加權操作,從而最優(yōu)地完成多感覺決策的任務。重要的是,神經(jīng)網(wǎng)絡模型中的神經(jīng)元活動與真實的獼猴LIP數(shù)據(jù)具有一致的特性,提示大腦在復雜環(huán)境中面臨實時多變的感覺輸入時,的確可以采取線性不變概率性群體編碼的方式實現(xiàn)貝葉斯最優(yōu)決策。
因此,該項工作首次為最優(yōu)多感覺決策的ilPPC理論框架提供了實驗和計算的支持,指出了決策神經(jīng)元累積復雜多模態(tài)感覺證據(jù)的計算法則,從而填補了多感覺整合與感知決策這兩個領域之間長期以來存在的空白。



