1. Bidirectional Recurrent Convolutional Networks for Multi-Frame Super-Resolution
以往的subpixel motions estimation只适用于小的运动,同时这种做法计算量大。
作者设计的网络包括三个要点:前馈卷积模拟低分辨率帧与其高分辨率结果之间的视觉空间依赖性。循环卷积连接连续帧的隐藏层以了解时间依赖性。条件卷积连接之前时间戳的输入和和现在的隐藏层。

使用MSE训练网络。
数据集 25YUV
2. SUPER-RESOLUTION OF COMPRESSED VIDEOS USING CONVOLUTIONAL NEURAL NETWORKS(ICIP 2016)
使用一个在压缩视频的时间和空间维度上训练的CNN来增加空间分辨率。连续帧输入作为运动补偿输入网络。网络先在图片上做预训练。

Adaptive Motion Compensation
y t − T a m c ( i , j ) = ( 1 − r ( i , j ) ) y t ( i , j ) + r ( i , j ) y t − T m c ( i , j ) y_{t-T}^{amc}(i, j) = (1 - r(i,j))y_t(i,j) + r(i,j)y_{t-T}^{mc}(i, j) yt−Tamc(i,j)=(1−r(i,j))yt(i,j)+r(i,j)yt−Tmc(i,j)
r ( i , j ) r(i,j) r(i,j)控制凸组合, y t y_t yt是中间帧, y t − T m c y_{t-T}^{mc}

本文综述了几种视频超分辨率技术,包括双向循环卷积网络、基于CNN的压缩视频超分辨率、端到端空间时间卷积网络等。探讨了不同方法在运动补偿、残差学习及融合策略上的应用。

1408

被折叠的 条评论
为什么被折叠?



