三维视频编码技术研究

论文摘要

三维视频使用户能够自由选择观看的视点与视角,并体验三维视觉感知,可广泛应用于三维电视、娱乐、视频通话、视频监控、艺术展览、教育、医疗和军事等各个领域。典型的三维视频数据包括多视点视频与相应的深度图像序列。三维视频信息量巨大,是制约其应用的瓶颈,因此三维视频压缩技术成为近几年的研究热点,尤其是基于H.264/AVC标准的三维视频编码标准化工作成为运动图像专家组（Moving Picture Experts Group,MPEG）近年来的主要活动内容之一。本论文深入研究了基于H.264/AVC的三维视频压缩编码方法及相关技术,主要研究内容与成果如下:1.提出一种基于深度特征的多视点视频图像区域分割算法,并可同时估计得到每一个图像区域的视差。已有基于深度特征的区域分割算法的一个共同特点是需要先估计得到基于像素或图像块的视差场,再分割得到不同深度层区域。提出的算法能够避免计算和分割图像视差场,直接提取图像中各对象的深度特征计算得到区域视差,并基于这些区域视差进行图像分割得到不同深度层次区域。2.总结与分析了已有的普通视频与可伸缩视频的运动信息预测编码方法,提出一种多视点视频视点间运动预测编码方法——基于精细粒度运动匹配的视点间运动跳过模式。运动跳过模式是一种已有的视点间预测编码技术,它能够节省编码宏块运动信息所需的比特开销,提高多视点视频编码总体效率。提出的精细粒度运动匹配方法在邻近视点图像中搜索得到当前编码宏块的最优运动信息,再将该运动信息用于视点间运动跳过模式,从而显著改进已有运动跳过模式的编码效率。该项技术已被联合视频小组（Joint Video Team,JVT）纳入多视点视频编码参考软件。3.视频图像与对应深度图像间具有极强的相关性,表现为对象边界的相似性和对象运动的相似性。因此本论文提出一种视频-深度联合预测编码方法,包括视频-深度运动信息复制与视频-深度运动信息预测两种机制,可在编码深度图像过程中重用视频图像编码产生的运动信息,从而提高深度图像压缩效率。此外,对多视点视频-深度联合预测编码结构进行了初步研究,设计出一种预测结构能够将已有各种预测编码工具纳入其中,灵活使用这些工具可以有效去除各种冗余信息。4.视频编码预处理能够消除或降低视频图像采集过程中引入的各种噪声和畸变失真,改善视频图像质量,并能提高后续的视频压缩编码效率。本论文对其中的自动曝光功能进行了深入研究,提出一种基于图像亮度直方图的自动曝光控制方法。算法从亮度直方图分布中推导得到不感兴趣区域,为这些不感兴趣区域分配相对较小的权值来降低它在计算加权均值时所占的比重,从而将曝光重点放在用户感兴趣区域达到优化图像亮度效果的目的。

论文目录

• 摘要
• Abstract
• 第一章 绪论
• 1.1 引言
• 1.2 三维视觉原理
• 1.3 三维视频系统概述
• 1.3.1 三维视频系统结构与各功能模块
• 1.3.2 三维视频系统研究进展
• 1.4 三维视频编码概述
• 1.4.1 多视点视频编码
• 1.4.2 深度图像编码
• 1.4.3 视频编码预处理
• 1.5 论文研究内容及贡献
• 第二章 多视点视频区域分割与区域视差估计
• 2.1 引言
• 2.2 基于全图像匹配的快速区域分割与区域视差估计
• 2.2.1 基本原理
• 2.2.2 图像二值化
• 2.2.3 区域视差估计
• 2.2.4 深度对象分割
• 2.3 实验结果与分析
• 2.4 小结
• 第三章 多视点视频编码中的视点间运动信息预测编码
• 3.1 引言
• 3.2 已有运动信息预测编码技术
• 3.2.1 空间域运动预测编码
• 3.2.2 时间域运动预测编码
• 3.2.3 空间可伸缩视频层间运动预测编码
• 3.2.4 多视点视频视点间运动预测编码
• 3.3 基于精细粒度运动匹配的运动跳过模式
• 3.3.1 基本原理
• 3.3.2 全局视差推导
• 3.3.3 率失真优化运动信息匹配
• 3.3.4 语法修改
• 3.4 实验结果与性能分析
• 3.5 小结
• 第四章 视频-深度联合预测编码研究
• 4.1 引言
• 4.2 单视点视频-深度联合预测编码
• 4.2.1 基于传统视频编码标准的深度图像压缩编码
• 4.2.2 视频图像与深度图像运动相似性分析
• 4.2.3 视频-深度联合预测编码
• 4.2.4 实验结果与分析
• 4.3 多视点视频-深度联合预测编码
• 4.3.1 联合预测编码结构
• 4.3.2 联合预测编码工具
• 4.4 小结
• 第五章 视频编码预处理
• 5.1 引言
• 5.2 预处理功能模块概述
• 5.3 自动曝光算法研究
• 5.3.1 已有方法概述
• 5.3.2 一种基于亮度直方图的自动曝光算法
• 5.3.3 实验结果与性能分析
• 5.4 小结
• 第六章 总结与展望
• 致谢
• 参考文献
• 攻读博士学位期间的研究成果