基于特征级别光流的轻量级视频插值方法

摘要

本发明公开了一种基于特征级别光流的轻量级视频插值方法，用于解决现有轻量级视频插值方法实用性差的技术问题。技术方案是首先对给定视频中连续的两帧图像作多尺度变换，采用特征级别的光流估计模块计算出本尺度下两帧之间正向光流和反向光流；根据正向光流和反向光流分别对两幅图像进行时序上的warp变换，得到两幅插值图像；对插值图像进行合并得到四维张量，利用三维卷积处理张量得到这个尺度下的插值图像；对不同尺度的图像进行加权平均得到最终的插值图像。本发明利用特征级别的光流和多尺度融合技术进行视频插值，提高了视频插值的精度与速度。用1.03MB的网络模型取得平均32.439的峰值信噪比和0.886的结构相似度。