图像多尺度不变特征研究及其应用

图像多尺度不变特征研究及其应用

论文摘要

特征提取是模式识别和计算机视觉研究的核心技术,数十年来受到学者们的广泛关注。现实环境中图像存在平移、旋转、尺度、光照及视点等多种变换,增强图像特征对这些变换的不变性,提高图像分类和识别的性能是一个日益重要的课题。本文对图像的不变特征提取进行了深入、系统的研究,在总结传统的不变特征提取方法的基础上,重点探讨了一种新的图像不变特征表达——散射变换,并将其应用到人脸识别和关键点检测中。针对遮挡人脸识别,本文将散射变换引入图像梯度域,提出了一种新的基于图像散射表达的抗遮挡人脸识别方案;利用二阶散射系数的特性,本文提出基于二阶散射能量的图像关键点检测方案,实验验证了方案的有效性;针对人脸识别中的变光照问题,结合小波多尺度特性,本文提出了一种新的多尺度光照不变量。本文的主要工作和创新点包括:1.提出了一种新的基于图像散射表达的抗遮挡人脸识别方案——梯度散射脸。本文以“Recognition by the Rest”为思想,将散射变换引入图像梯度域,一方面极大地抑制了遮挡块对原图像频率结构的破坏,另一方面,得益于散射表达的局部平移不变性和弹性形变稳定性,实现了对脸部未遮挡信息的充分提取。传统的抗遮挡人脸识别方法总是试图“重建”被遮挡脸部,这些方法以“局部特征识别”和“稀疏表达分类”为代表:“局部特征识别”用脸部显著性特征的加权来表征人脸,这种方法不仅需要更多的训练样本,而且基图像中不属于显著性的人脸部分也会产生不为零的权值;“稀疏表达分类”将遮挡人脸看作无遮挡部分和遮挡块的和,引入遮挡字典表示遮挡块,而无遮挡部分应仅由训练图像稀疏表示,重构时抛弃在遮挡字典上的投影系数,仅由对应于训练图像的稀疏系数得到重构图像。“稀疏表达分类”存在两个问题:首先,实际图像中的遮挡往往是非线性的,抛掉遮挡字典系数并不能完全消除遮挡的影响;其次,实际中训练图像是有限的,这些有限的训练图像的稀疏表达不足以囊括人脸图像中出现的其它形变。实验结果显示,提出的梯度散射脸优于上述两种主流方法,对遮挡人脸取得了相当高的正确识别率,且梯度散射脸不需要进行训练,这对许多实际应用具有重要意义。2.提出基于二阶散射能量的图像关键点检测新方案——SCD。现在流行的关键点不变特征一般都是在多尺度情况下检测得到,如Harris-Laplace算子和SIFT,而所有在多尺度下检测局部不变特征点的方法都面临一个共同的问题:图像中的局部结构往往存在于一个尺度范围之内,而不是某个固定的尺度,在多尺度下检测特征点会得到许多位置和尺度非常接近的点,它们都代表同一个局部结构,冗余特征点会造成后续错误匹配的大量增加。二阶散射能量是尺度间结构相似程度的一种反映,由二阶散射能量图局部极值点对应的关键点是一种尺度间局部特征,其稳定性和关键程度相比单一尺度上的关键点都更高。实验结果显示,本文提出的SCD方法得到的关键点数量相对更少,具有较强的结构性,对图像视点变化、尺度变换和景深变化及一定程度的非刚性变换具有良好的鲁棒性,取得了较高的可重复率。3.提出了一种新的多尺度光照不变量——MGF。光照问题是人脸识别领域面临的难题之一,由于光照变化使得面部特征不再明显具有分辨能力,这样造成了人脸的类内散度增大,甚至大于人脸样本的类间散度。研究表明,同一个人在不同光照条件下得到的图像之间的差异,可能比不同人在同一光照条件下得到的图像之间的差异还要大。MGF方法对图像的一阶高斯差分进行小波变换,提取其方向特征作为光照不变量,理论分析证实了MGF是一个光照不变量,且保留了更多的图像结构信息。另外,MGF提供了一种用不同特性小波构造光照不变量的途径,可以构造更为丰富的光照不变量。实验结果表明,MGF能有效地提高人脸识别对光照的鲁棒性。

论文目录

  • 摘要
  • ABSTRACT
  • 1 绪论
  • 1.1 论文的研究背景
  • 1.2 图像变换的多样性
  • 1.3 不变特征提取的研究现状
  • 1.3.1 全局不变特征
  • 1.3.2 局部不变特征
  • 1.3.3 全局和局部相结合的不变特征
  • 1.4 当前图像不变特征提取所存在的主要问题
  • 1.5 本文的主要工作
  • 1.6 本文的组织
  • 2 图像的散射表达
  • 2.1 引言
  • 2.2 傅氏变换模、自相关函数和 SIFT
  • 2.3 散射变换框架和算法
  • 2.3.1 散射变换框架
  • 2.3.2 散射变换算法
  • 2.4 散射变换的特性
  • 2.4.1 散射表达的收敛性
  • 2.4.2 局部平移不变性和弹性形变稳定性
  • 2.4.3 各阶散射系数的判别性能分析
  • 2.5 散射变换在模式分类和识别中的应用
  • 2.6 小结
  • 3 基于散射变换的抗遮挡人脸识别
  • 3.1 引言
  • 3.2 相关工作
  • 3.3 问题分析
  • 3.4 解决方案和算法设计
  • 3.5 实验结果与分析
  • 3.5.1 连续遮挡
  • 3.5.2 随机块遮挡
  • 3.5.3 光照和表情变化鲁棒性
  • 3.6 小结
  • 4 基于散射变换的关键点检测
  • 4.1 引言
  • 4.2 相关工作
  • 4.3 问题分析
  • 4.4 解决方案和算法设计
  • 4.4.1 尺度间散射能量图
  • 4.4.2 在能量图中定位关键点
  • 4.4.3 算法设计
  • 4.5 实验结果与分析
  • 4.5.1 实验一
  • 4.5.2 实验二
  • 4.5.3 实验三
  • 4.6 小结
  • 5 多尺度光照不变量提取
  • 5.1 引言
  • 5.2 相关工作
  • 5.3 多尺度光照不变量 MGF 的提取
  • 5.3.1 梯度变换与梯度域的优势
  • 5.3.2 Multi-scale Gradientface(MGF)
  • 5.3.3 算法实现
  • 5.4 实验结果与分析
  • 5.4.1 识别协议
  • 5.4.2 Yale B 数据库上实验结果
  • 5.4.3 CMU PIE 数据库上实验结果
  • 5.4.4 噪声影响下实验结果
  • 5.5 小结
  • 6 总结与展望
  • 6.1 工作总结
  • 6.2 后续工作展望
  • 致谢
  • 参考文献
  • 附录
  • A. 作者在攻读学位期间发表的论文目录
  • B. 作者在攻读学位期间取得的科研成果目录
  • 相关论文文献

    标签:;  ;  ;  ;  ;  

    图像多尺度不变特征研究及其应用
    下载Doc文档

    猜你喜欢