基于双目融合网络与两步训练框架立体视频质量评价方法

摘要

本发明属于视频和图像处理领域，为提出立体视频质量评价方法，更加准确高效，且贴合人眼对立体视觉的感知，本发明：基于双目融合网络与两步训练框架立体视频质量评价方法，首先通过计算立体视频的时间显著性与空间显著性，对立体视频的每一帧生成显著性图片，得到的顺序排列的显著性图片称为左视频的时空显著性特征流与右视频的时空显著性特征流，并将其作为双目融合网络的两个输入；其次，分两步训练双目融合网络，即局部回归和全局回归，在第一步中，通过添加全连接层，用小块标签预训练所提网络的左通道CNN以及右通道CNN；在第二步中，基于第一步的权重模型，使用MOS值对整个网络进行训练。本发明主要应用于视频和图像处理场合。