基于跨模態聯合編碼的多模態情感分析

摘要： 如何提高多模態融合特征的有效性是多模態情感分析領域的熱點問題之一。以往的研究大多通過設計復雜的融合策略獲取融合特征表示，這些方法往往忽略了模態間復雜的關聯關系，同時存在著由于模態信息不一致所導致的融合特征有效性降低問題，進而影響模型的性能。針對上述問題，提出一種基于跨模態聯合編碼的多模態情感分析模型。在特征提取方面，利用預訓練模型BERT和Facet模型分別提取文本和視覺特征，...