基于視覺語義與提示學習的多模態情感分析模型

摘要： 隨著深度學習技術的發展，多模態情感分析已成為研究熱點之一。然而，大多數多模態情感分析模型或從不同模態中提取特征向量并簡單地進行加權求和，導致數據無法準確地映射到統一的多模態向量空間中，或依賴圖像描述模型將圖像轉化為文本，導致提取到過多不包含情感信息的視覺語義，造成信息冗余，最終影響模型的性能。為了解決這些問題，提出了一種基于視覺語義與提示學習的多模態情感分析模型VSPL。該模型...