類腦研究

打開文本圖片集

神經(jīng)計算與腦機交互團隊的多模態(tài)神經(jīng)信息編解碼研究

中國科學院自動化研究所神經(jīng)計算與腦機交互團隊何暉光等人將大腦、視覺和語言知識相結合，通過多模態(tài)學習實現(xiàn)了從人類腦活動中零樣本地解碼視覺新類別。相關成果發(fā)表于《IEEE模式分析與機器智能匯刊》（IEEE TPAMI）。文章提出“腦-圖-文”三模態(tài)聯(lián)合學習框架，在使用實際呈現(xiàn)的視覺語義特征的同時，加入與視覺目標對象相關的更豐富的語言語義特征，以更好地解碼腦信號。（剩余998字）