级联式生成对抗网络的全景图像修复

摘要

为了解决全景图像视场宽、畸变显著等问题，提出了一种级联式生成对抗网络的全景图像修复算法。第一阶段提出了一种双判别器生成对抗网络，通过对等矩形格式的全景图像进行立方体投影转换，对立方体六面图像进行修复，引入PatchGAN作为全局判别器捕获细节信息，局部判别器网络可以保证局部修复结果与周围区域的一致性。第二阶段提出了一种失真感知生成对抗网络，通过矩形混合卷积缓解全景图像失真，判别器引入谱归一化，与第一阶段进行级联以缓解立方体图像边界不连续问题，设计联合损失函数以优化网络修复效果。实验结果表明，所提算法无论从主观视觉评价或是从客观评价指标上均取得了优秀的效果，实现全景图像的有效修复。

关键词

全景图像 / 图像修复 / 生成对抗网络 / 双判别器 / 投影转换 / 混合卷积