结合注意力机制和Gabor滤波器的人脸伪造检测

摘要

针对假人脸和真实人脸纹理的显著差异，提出了一种基于纹理特征的人脸伪造检测模型.首先，以ResNet18为主干网络，结合通道注意力机制和残差网络解决网络退化的问题，并建立通道之间的联系以提取深层特征；其次，运用自相关矩阵来量化图像块之间的相关性，捕捉图像中不同尺度的特征以获取全局统计特征；最后，通过在自相关模块的每个池化层后引入Gabor滤波器，提取图像的局部纹理特征，全面描述图像内容，并采用Softmax函数对输入图像进行层次化分类.实验结果表明，对于不同的图像增强方法编辑的假图像，该方法有效提升了检测准确率.

关键词

人脸伪造检测 / 残差网络 / 注意力机制 / 自相关矩阵 / Gabor滤波器