基于圖文關聯(lián)與上下文引導的軍事新聞圖集描述生成方法

摘要： 傳統(tǒng)的圖像描述生成方法由于缺少現(xiàn)實世界的先驗知識，生成的描述文本不具有解釋性，同時在某些專業(yè)領域生成的描述文本準確性不高。針對上述問題，提出了軍事新聞圖集描述生成任務，還構建了軍事新聞圖集數(shù)據(jù)集。該任務存在2個關鍵挑戰(zhàn)：描述信息來源于整個圖集和對應的新聞文本中，模型學習到的語義不夠充分。進一步提出了一種基于圖文關聯(lián)與上下文引導的軍事新聞圖集描述生成方法ITRCG?；贗TRCG...