基于圖文關聯與上下文引導的軍事新聞圖集描述生成方法

摘要： 傳統的圖像描述生成方法由于缺少現實世界的先驗知識，生成的描述文本不具有解釋性，同時在某些專業領域生成的描述文本準確性不高。針對上述問題，提出了軍事新聞圖集描述生成任務，還構建了軍事新聞圖集數據集。該任務存在2個關鍵挑戰：描述信息來源于整個圖集和對應的新聞文本中，模型學習到的語義不夠充分。進一步提出了一種基于圖文關聯與上下文引導的軍事新聞圖集描述生成方法ITRCG?；贗TRCG...