videoSR视频超分论文笔记一

本文综述了几种视频超分辨率技术,包括双向循环卷积网络、基于CNN的压缩视频超分辨率、端到端空间时间卷积网络等。探讨了不同方法在运动补偿、残差学习及融合策略上的应用。

开发板推荐:天空星STM32F407VET6开发板

超高性价比 STM32主控 | 超高主频 | 一板兼容百芯 | 比赛神器 | 沉金彩色丝印

1. Bidirectional Recurrent Convolutional Networks for Multi-Frame Super-Resolution

以往的subpixel motions estimation只适用于小的运动,同时这种做法计算量大。
作者设计的网络包括三个要点:前馈卷积模拟低分辨率帧与其高分辨率结果之间的视觉空间依赖性。循环卷积连接连续帧的隐藏层以了解时间依赖性。条件卷积连接之前时间戳的输入和和现在的隐藏层。
在这里插入图片描述
使用MSE训练网络。
数据集 25YUV

2. SUPER-RESOLUTION OF COMPRESSED VIDEOS USING CONVOLUTIONAL NEURAL NETWORKS(ICIP 2016)

使用一个在压缩视频的时间和空间维度上训练的CNN来增加空间分辨率。连续帧输入作为运动补偿输入网络。网络先在图片上做预训练。
在这里插入图片描述

Adaptive Motion Compensation

y t − T a m c ( i , j ) = ( 1 − r ( i , j ) ) y t ( i , j ) + r ( i , j ) y t − T m c ( i , j ) y_{t-T}^{amc}(i, j) = (1 - r(i,j))y_t(i,j) + r(i,j)y_{t-T}^{mc}(i, j) ytTamc(i,j)=(1r(i,j))yt(i,j)+r(i,j)ytTmc(i,j)
r ( i , j ) r(i,j) r(i,j)控制凸组合, y t y_t yt是中间帧, y t − T m c y_{t-T}^{mc}

开发板推荐:天空星STM32F407VET6开发板

超高性价比 STM32主控 | 超高主频 | 一板兼容百芯 | 比赛神器 | 沉金彩色丝印

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值