×

iSeeBetter(更好看)

swMATH ID: 42557
软件作者: Aman Chadha、John Britto、M.Mani Roja
描述: iSeeBetter:使用循环生成反向投影网络的时空视频超分辨率。最近,基于学习的模型提高了单图像超分辨率(SISR)的性能。然而,将SISR连续应用于每个视频帧会导致缺乏时间一致性。卷积神经网络(CNN)在峰值信噪比(PSNR)和结构相似性(SSIM)等图像质量指标方面优于传统方法。然而,生成性对抗网络(GAN)通过能够缓解缺乏精细纹理细节的问题,提供了竞争优势,这通常是CNN在超大规模超分辨率条件下的表现。我们提出了iSeeBetter,一种新的基于GAN的时空视频超分辨率(VSR)方法,用于渲染时间一致的超分辨率视频。iSeeBetter使用递归反向投影网络的概念作为其生成器,从当前帧和相邻帧中提取时空信息。此外,为了提高超分辨率图像的“自然性”,同时消除传统算法中的伪影,我们使用了超分辨率生成对抗网络(SRGAN)中的鉴别器。虽然作为主要损失最小化目标的均方误差(MSE)提高了PSNR/SSIM,但这些度量可能无法捕获图像中的精细细节,从而导致感知质量失真。为了解决这个问题,我们使用了四重(MSE、感知、对抗和全变差(TV))损失函数。我们的研究结果表明,iSeeBetter提供了卓越的VSR保真度,并超越了最先进的性能。
主页: https://arxiv.org/abs/2006.11161
源代码:  https://github.com/amanchadha/iSeeBetter网站
依赖项: C++;蟒蛇
相关软件: AlexNet公司;MetaIQA公司;RankSRGAN公司;TempoGAN公司;Uformer公司;ESRGAN公司;TDAN系统;PieAPP公司;SR流量;Swin变压器;RankIQA公司;摇摆器;动态VSR;3DSRNet公司;SR流量-DA;基本VSR;ViT公司;混淆;辉光;掌中宽带
引用于: 1文件

1位作者引用

1 A.穆拉特·特卡普

按年份列出的引文