基于动态图卷积的图像情感分布预测

苏育挺; 王骥; 赵玮; 井佩光

doi:10.13229/j.cnki.jdxbgxb.20211169

吉林大学学报(工学版) ›› 2023, Vol. 53 ›› Issue (09) : 2601 -2610. DOI: 10.13229/j.cnki.jdxbgxb.20211169

计算机科学与技术

基于动态图卷积的图像情感分布预测

苏育挺 ¹^,² ,
王骥 ² ,
赵玮 ¹ ,
井佩光 ¹^,²

作者信息 +

Dynamic graph convolutional neural network for image sentiment distribution prediction

Yu-ting SU ¹^,² ,
Ji WANG ² ,
Wei ZHAO ¹ ,
Pei-guang JING ¹^,²

Author information +

文章历史 +

PDF (1158K)

摘要

针对图像情感分布学习中，视觉特征与高阶情感语义之间存在语义鸿沟以及情感标签具有主观性和模糊性的问题，提出了一种情感语义动态图卷积网络模型。该模型通过情感激活模块自动定位情感语义区域，从而有效挖掘契合情感语义的内容表征；通过动态图卷积模块自适应地捕获图像情感标签之间的语义关联性；最终构建并行结构输出联合局部语义和标签相关性的情感预测分布。在3个公开情感数据集上的实验结果证明了本文算法在图像情感分布预测任务中的有效性。