基于层次测试对抗网络的图像文本合成

Zizhao Zhang、Yuanpu Xie、Lin Yang; IEEE计算机视觉与模式识别会议论文集，2018，第6199-6208页

摘要

本文提出了一种新的方法来处理基于语义图像描述生成照片图像的挑战性任务。我们的方法在网络层次结构中引入了伴随的层次结构相关的对抗目标，从而规范了中间层表示并帮助生成器训练以捕获复杂的图像统计信息。我们提出了一种可扩展的单流生成器体系结构，以更好地适应联合鉴别器并将生成的图像推送到高分辨率。我们采用多用途对抗损失来鼓励更有效地使用图像和文本信息，以同时提高语义一致性和图像保真度。此外，我们引入了一种新的视觉语义相似性度量方法来评估生成图像的语义一致性。通过在三个公共数据集上进行广泛的实验验证，我们的方法在不同的评估指标上显著提高了所有数据集上以前的技术水平。

相关材料

[pdf格式][arXiv公司][视频]
[围巾]
@会议记录{张_2018_CVPR，
author={张，子钊，谢，袁璞，杨，林}，
title={具有层次化嵌套对抗网络的照片文本到图像合成}，
booktitle={IEEE计算机视觉和模式识别会议论文集}，
月={6月}，
年份={2018年}
}