首页 期刊 光电子激光 采用精简卷积神经网络的快速视频超分辨率重建 【正文】

采用精简卷积神经网络的快速视频超分辨率重建

作者:潘志勇; 郁梅; 谢登梅; 宋洋; 蒋刚毅 宁波大学信息科学与工程学院; 浙江宁波315211; 南京大学计算机软件新技术国家重点实验室; 江苏南京210093
精简卷积神经网络   视频超分辨率   快速重建   参数线性纠正单元  

摘要:超分辨率重建在视频的传输和显示中起着重要的作用。为了既保证重建视频的清晰度,又面向用户实时显示,提出了一种采用精简卷积神经网络的快速视频超分辨率重建方法。所提的精简卷积神经网络体现在以下三点:首先,考虑到输入的尺寸大小会直接影响网络的运算速度,所提网络省去传统方法的预插值过程,直接对多个低分辨率输入视频帧提取特征,并进行多维特征通道融合。接着,为了避免网络中产生零梯度而丢失视频的重要信息,采用参数线性纠正单元(Parametric Rectified Linear Unit,PReLU)作为激活函数,并采用尺寸更小的滤波器调整网络结构以进行多层映射。最后,在网络末端添加反卷积层上采样得到重建视频。实验结果显示,所提方法相比有代表性的方法在PSNR和SSIM指标上分别平均提升了0.32dB和0.016,同时在GPU下达到平均41帧/秒的重建速度。结果表明所提方法可快速重建质量更优的视频。

注:因版权方要求,不能公开全文,如需全文,请咨询杂志社

学术咨询 免费咨询 杂志订阅