基于跨模態(tài)聯(lián)合編碼的多模態(tài)情感分析
計(jì)算機(jī)工程與應(yīng)用
頁數(shù): 9 2023-10-26
摘要: 如何提高多模態(tài)融合特征的有效性是多模態(tài)情感分析領(lǐng)域的熱點(diǎn)問題之一。以往的研究大多通過設(shè)計(jì)復(fù)雜的融合策略獲取融合特征表示,這些方法往往忽略了模態(tài)間復(fù)雜的關(guān)聯(lián)關(guān)系,同時存在著由于模態(tài)信息不一致所導(dǎo)致的融合特征有效性降低問題,進(jìn)而影響模型的性能。針對上述問題,提出一種基于跨模態(tài)聯(lián)合編碼的多模態(tài)情感分析模型。在特征提取方面,利用預(yù)訓(xùn)練模型BERT和Facet模型分別提取文本和視覺特征,...