基于扩散的图像超分辨率(SR)方法主要受到数百甚至数千个采样步骤要求导致推理速度低的限制。现有的加速度采样技术不可避免地在一定程度上牺牲了性能,导致SR结果过于模糊。为了解决这个问题,我们提出了一种新颖而高效的SR扩散模型,该模型显着减少了扩散步骤的数量,从而消除了推理过程中对后加速的需要及其相关的性能下降。该方法通过移动高分辨率图像和低分辨率图像之间的残差来构建一个马尔可夫链,大大提高了转换效率。此外,还制定了详细的噪声计划,以灵活控制扩散过程中的变速和噪声强度。大量实验表明,即使只有 15 个采样步骤,所提出的方法在合成和真实世界数据集上都获得了优于或至少与当前最先进的方法相当的性能。
论文地址:https://arxiv.org/abs/2307.12348
项目地址:https://github.com/zsyOAOA/ResShift
主机和显卡:【Intel® Xeon(R) CPU E5-2623 v3 @ 3.00GHz × 16】【NVIDIA Corporation GP102 [TITAN Xp] 】
项目效果图:


本文介绍了一种新型高效图像超分辨率SR模型,通过移动残差和细致的噪声控制,显著降低采样步骤,保持或提高性能。实验显示即使在少量采样下,新方法也表现出色。遇到CUDA内存不足时,提供了调整batchsize和使用更大显卡的解决方案。
&spm=1001.2101.3001.5002&articleId=134759139&d=1&t=3&u=1e501469e20244c0b69cb4af94c796a5)
2680

被折叠的 条评论
为什么被折叠?



