登录
洞察 - 多模態情感識別
SpikEmo：利用對話中的尖峰時間動態增強情感識別
SpikEmo 框架透過結合尖峰神經網路和語義與動態兩階段建模方法，有效捕捉對話中多模態情感數據的複雜時間特徵，從而提升對話情感識別的準確性。
Emotion-LLaMA：透過指令微調實現多模態情感識別與推理
Emotion-LLaMA 模型透過整合音訊、視覺和文字輸入，並利用特定情緒編碼器和指令微調，顯著提升了情感識別和推理能力，為多模態情感分析設定了新的基準。
聯合微調「類 BERT」自監督模型以改進多模態語音情感識別
透過聯合微調語音和文字模態的「類 BERT」自監督學習（SSL）模型，可以顯著提高多模態語音情感識別的效能。
提早融合情感信息使多模態模型更好地理解你
提早融合語音和文本模態的情感信息可以增強多模態情感識別模型的性能。
多模態融合透過超圖自編碼器和對比學習用於對話情感識別
提出一個基於超圖自編碼器和對比學習的多模態融合框架,能夠自適應調整超圖連接,並利用對比學習減輕隨機因素的影響,在IEMOCAP和MELD數據集上取得了優秀的性能。
多模態情感識別的階層式超複雜網路
本文提出了一種階層式超複雜模型,能夠有效地從腦電圖(EEG)和周邊生理信號中識別情感。該模型由編碼器和超複雜融合模塊組成,分別學習單一模態內部的相關性和不同模態之間的相關性,從而獲得更豐富的特徵表示。
基於視覺語言提示和模態丟棄的多模態情感識別
本文提出了一種基於視覺語言提示學習和模態丟棄的多模態情感識別方法,以提高情感識別的準確性和泛化性能。
利用聲學適應和視覺對齊提高多模態情感識別
本文提出一種利用聲學特徵適應和視覺特徵對齊的多模態情感識別方法,以提高情感識別的準確性。
利用對比學習和自我訓練實現有限標記樣本的多模態情感識別
本文提出了一種利用對比學習和自我訓練的多模態情感識別方法,以解決有限標記樣本的問題。
