基于視覺語義與提示學(xué)習(xí)的多模態(tài)情感分析模型

摘要： 隨著深度學(xué)習(xí)技術(shù)的發(fā)展，多模態(tài)情感分析已成為研究熱點之一。然而，大多數(shù)多模態(tài)情感分析模型或從不同模態(tài)中提取特征向量并簡單地進行加權(quán)求和，導(dǎo)致數(shù)據(jù)無法準(zhǔn)確地映射到統(tǒng)一的多模態(tài)向量空間中，或依賴圖像描述模型將圖像轉(zhuǎn)化為文本，導(dǎo)致提取到過多不包含情感信息的視覺語義，造成信息冗余，最終影響模型的性能。為了解決這些問題，提出了一種基于視覺語義與提示學(xué)習(xí)的多模態(tài)情感分析模型VSPL。該模型...