209.
社交媒体场景下面向目标的情感分析任务是多模态情感分析研究中的一个新型子任务,旨在识别一对句子和图像中所提到的每个目标的情感极性。当前该任务的研究虽然已取得积极进展,但现存方法仍有以下难点尚未有效解决: ①忽略了视觉内容目标和文本目标的相关性匹配问题,以及所匹配后的图像目标的特征增强问题。②以往的方法主要依赖于特征级或者决策级等粗粒度的融合机制,这种方法会忽视特定相关的视觉特征和多模态间的语义鸿沟。③当视觉内容和文本描述存在包含相互冲突的不同信息时忽略了文本模态在情感分析任务中的重要性。为有效解决以上难点,该文提出了一种用于面向目标的多模态情感分析任务的文本与图像中目标细粒度增强交互融合模型。在两个公开基准数据集Twitter-2015和Twitter-2017上的实验证明,该文提出的方法在F
1值上比基准模型分别提升了1.1%和0.8%。… …
相似文献