多视点静止自由立体图像处理的理论分析及实验研究

摘要

本文基于与立体图像密切相关的原理、显示、合成、压缩四个关键要素，分别对静止自由立体图像视觉原理特性、与多视点静止自由立体图像合成显示相关的图像处理、多视点静止自由立体图像合成、以及多视点静止自由立体图像压缩进行了深入的理论分析和实验研究。 首先，结合人眼视觉系统特性，研究了亮度、对比度、分辨率和色度对双视点立体成像系统立体显示效果的影响，首次得出了视点图像的色度差异对立体信息的显示几乎无影响、采用色度替换方法可以有效减小立体图像的数据量的重要结果；利用该结果进一步深入研究了视点图像的色度差异对于多视点立体成像系统显示效果的影响，实验结果表明压缩效率获得了进一步提高。 其次，针对多视点自由立体图像合成过程中存在的频域混叠现象，深入研究了基于二维采样理论的消除频域混叠的滤波处理；建立了相应的理论子采样模型；完成了二维抗混叠数字滤波器设计；并且将所设计的二维抗混叠数字滤波器应用到多视点自由立体图像处理中，有效地移除了由于频率混叠所造成的失真。实验结果与理论分析结果保持一致。 然后，为了解决了现有的高质量立体图像合成算法复杂度高、合成效率低的问题，提出了包括AIV合成算法、梯度合成算法和SSPL合成算法在内的三种高效率立体图像合成算法，其具有处理过程简便快捷、可应用于实时处理的特点，是多视点自由立体图像产业化的关键环节之一。 最后，突破了以往平面图像压缩方案的局限，提出了基于H.264的多视点静止自由立体图像压缩方案，其立体图像质量和压缩效率显著高于传统的JPEG静止图像压缩方案；首次提出了可以适应传输网络带宽变化需求的可伸缩多视点静止自由立体图像压缩方案，并且根据应用领域的不同，设计了图像质量优先和立体效果优先两种编码方案；首次提出了色度替换的可伸缩多视点静止自由立体图像压缩方案，该方案可以进一步提高压缩效率。

目录

文摘

英文文摘

声明

第一章绪论

1.1立体视觉原理

1.2立体图像的获取

1.2.1用立体摄像机对拍摄立体图像

1.2.2用深度摄像机拍摄立体图像

1.2.3通过平面图像生成立体图像

1.3立体图像压缩技术

1.3.1基于视差和深度的立体编码

1.3.2混合分辨率编码

1.4立体显示技术

1.4.1戴眼镜立体显示方式

1.4.2不戴眼镜立体显示方式

1.5本文的主要工作和内容

第二章基于人眼立体视觉特性的立体成像效果研究

2.1人眼视觉系统(HVS:Human Visual System)

2.1.1生理立体视觉

2.1.2心理立体视觉

2.2颜色空间变换

2.2.1 RGB颜色空间

2.2.2 HSB颜色空间

2.2.3 YUV颜色空间

2.2.4 RGB颜色空间和HSB颜色空间的转换

2.2.5 RGB颜色空间和YUV颜色空间的转换

2.3立体图像质量评价方法

2.3.1平面图像质量评价方法

2.3.2立体图像质量评价方法

2.4基于HVS的立体成像系统成像效果研究

2.4.1实验方法

2.4.2双视点立体成像系统成像效果研究

2.4.3多视点立体成像系统成像效果研究

2.5本章小结

第三章基于多维采样理论的多视点自由立体图像处理研究

3.1基于棱柱镜的LCD自由立体显示器原理及特点

3.1.1基于棱柱镜的LCD自由立体显示器原理

3.1.2基于棱柱镜的LCD自由立体显示器特点

3.2多视点自由立体图像合成流程

3.3基于二维采样理论消除频域混叠的滤波处理

3.3.1多维采样理论基本概念

3.3.2多维采样

3.3.3重建

3.3.4采样结构变换

3.4子采样模型构建

3.5二维抗混叠数字滤波器设计

3.5.1多维数字滤波器设计

3.5.2符合子采样模型的二维抗混叠数字滤波器设计

3.6本章小结

第四章多视点自由立体图像合成算法研究

4.1立体图像的几何模型

4.1.1单视图几何

4.1.2两视图几何

4.2多视点立体图像合成算法

4.2.1现有高质量的多视点立体图像合成算法

4.2.2所提出的高效率多视点立体图像合成算法

4.3本章小结

第五章多视点静止自由立体图像的压缩方案研究

5.1基于H.264的多视点静止自由立体图像压缩方案

5.1.1 H.264的技术特点

5.1.2基于H.264的静止自由立体图像压缩方案

5.1.3实验结果分析

5.2多视点静止自由立体图像统计特性分析

5.3精细可伸缩视频编码技术概述

5.3.1精细可伸缩视频编码背景

5.3.2精细可伸缩视频编码基本原理

5.3.3精细可伸缩视频编码的编、解码器结构

5.3.4位平面编码技术

5.4可伸缩的多视点静止自由立体图像压缩方案

5.4.1可伸缩多视点静止自由立体图像压缩基本原理

5.4.2编、解码器结构

5.4.3增强层位平面编码重组方案

5.4.4色度可替换的可伸缩多视点静止自由立体图像压缩方案

5.5本章小结

第六章 结束语

参考文献

发表论文和参加科研情况说明

致谢