基于视频的人体运动跟踪技术研究

论文题目: 基于视频的人体运动跟踪技术研究

论文类型: 博士论文

论文专业: 计算机应用技术

作者: 刘国翌

导师: 李华

关键词: 运动捕捉,多摄像机人体运动跟踪,人体模型,多摄像机定标,非线性优化,上半身运动跟踪,肤色模型,概率跟踪,形状匹配,举重运动

文献来源: 中国科学院研究生院（计算技术研究所）

发表年度: 2005

论文摘要: 基于视频的人体运动跟踪是一种使用普通摄像机跟踪无标记人体运动的技术。它在自动监控、人机交互、体育运动分析等许多领域有重要的应用价值。在该方面的研究是近年计算机视觉领域的一个热点研究方向。由于问题的复杂性和缺乏对人类视觉本质的理解,基于视频的跟踪始终是计算机视觉中的难题。本文的研究内容以奥运科技项目为背景,针对以举重运动为代表的体育运动分析所提出的非接触、无妨碍的测量与仿真的要求,利用计算机图形图像和计算机视觉等技术,探讨了基于多摄像机视频的三维人体运动跟踪和仿真技术。本文的主要工作和贡献如下:(1)提出了一个基于优化算法的跟踪框架。该框架直接融合来自多个摄像机的数据,使用灰度、边界和轮廓三种图像特征来建立人体运动跟踪的目标函数。目标函数采用残差平方和形式,通过比较人体模型投影与提取的图像特征来建立,并使用高斯-牛顿优化算法求解。(2)设计了一个多摄像机人体运动跟踪环境,包括一个参数化的人体骨架模型和人体外观模型,以及一种实用的外参定标算法。在此基础上我们实现了多摄像机三维人体运动跟踪的算法实验平台。(3)提出了一种基于轮廓匹配来预测二维关节点的算法,有效地解决了遮挡和跟踪错误积累这一关键问题。另外我们提出使用“人体自相交限制”、“肤色区域约束”、“对称性约束”等先验知识来提高跟踪算法对遮挡、环境变化以及噪声的适应性。(4)实现了面向举重运动的三维人体运动跟踪原型系统。该系统能够自动跟踪举重运动的三维人体运动参数以及杠铃的运动参数。(5)设计并实现了一个可以实时捕捉人体上半身运动的系统,实现了跟踪的自动初始化以及自动从跟踪错误中恢复,并且在一定程度上处理光照变化、身体自遮挡等问题。该系统通过结合使用人脸检测、肤色检测和概率跟踪等技术,可以使用单个普通摄像头在一般的室内环境下跟踪人体的脸部和手臂关节位置。

论文目录:

第1章 绪论

1.1 研究背景、目的和意义

1.1.1 人体运动捕捉

1.1.2 基于视频的人体运动捕捉

1.1.3 人体运动分析与奥运科技

1.2 本文的组织结构

第2章 基于视频的人体运动跟踪研究概述

2.1 基本方法和研究内容

2.1.1 分类

2.1.2 基于视频的人体运动跟踪难点

2.1.3 问题描述及其跟踪框架

2.2 基于模型的人体运动跟踪

2.3 非模型匹配方法

2.4 活跃的研究方向

第3章 相关的基础算法

3.1 多关节骨架模型及运动控制

3.1.1 人体骨架模型

3.1.2 旋转的参数化

3.1.3 反向运动学

3.2 摄像机模型与摄像机标定

3.2.1 摄像机模型

3.2.2 立体视觉原理与极线几何

3.2.3 摄像机定标

3.3 图像处理与底层特征提取

3.3.1 减背景

3.3.2 图像梯度、边界和距离图

3.3.3 光流计算

3.4 参数估计与优化方法

3.4.1 最大似然估计

3.4.2 局部优化算法

3.4.3 鲁棒参数估计

3.4.4 Kalman 滤波

3.5 基于概率的跟踪算法

第4章 基于人体模型的运动跟踪

4.1 实验环境的搭建

4.1.1 实验数据获取及摄像机摆放

4.1.2 摄像机外参定标

4.2 人体模型及投影

4.2.1 人体骨架模型和体模型

4.2.2 人体形状模型的投影

4.3 用局部优化算法进行三维跟踪

4.3.1 目标函数定义

4.3.2 使用灰度特征

4.3.3 组合多种图像特征

4.3.4 对优化算法一些问题的处理

4.4 基于粒子滤波算法的人体运动跟踪

4.5 实验与比较

4.6 本章小结

第5章 利用先验知识对跟踪进行约束

5.1 概述

5.2 身体自相交约束

5.3 肤色区域约束

5.4 特定运动的跟踪及举重运动跟踪系统原型

5.4.1 预测关节位置

5.4.2 提取轮廓与库中轮廓的时间对齐

5.4.3 在目标函数中引入预测关节点约束

5.4.4 对称性约束

5.4.5 举重运动三维跟踪系统原型和实验结果

5.5 小结

第6章 实时的上半身运动跟踪

6.1 基于人体姿态的人机交互

6.2 系统设计

6.3 关键功能模块分析

6.3.1 自适应的肤色区域检测算法

6.3.2 脸部检测与跟踪

6.3.3 区域分析及关节位置推断

6.3.4 基于粒子滤波的blob跟踪算法

6.3.5 三维姿态恢复

6.4 实验结果和讨论

第7章 结束语

7.1 本文主要贡献与创新

7.2 下一步研究方向

参考文献

致谢

作者简历

发布时间: 2006-12-27

参考文献

• [1].人体运动跟踪的方法与实验研究[D]. 孙怡.大连理工大学2002
• [2].单目视频人体运动跟踪和获取技术研究[D]. 陈坚.中国科学院研究生院（软件研究所）2005
• [3].基于概率模型的三维人体运动跟踪研究[D]. 陈睿.中国科学院研究生院（计算技术研究所）2005
• [4].人体关节运动跟踪技术的研究[D]. 于虹.哈尔滨工程大学2008
• [5].基于视频的人体运动跟踪与重构方法研究[D]. 陈姝.中南大学2008
• [6].基于可移动拍摄大场景下的人体运动跟踪关键技术的研究与应用[D]. 刘国军.哈尔滨工业大学2009
• [7].基于多摄像机的人体运动跟踪与分析[D]. 孙洛.清华大学2010
• [8].基于深度图像序列的三维人手运动跟踪技术研究[D]. 李东年.山东大学2015
• [9].一种基于磁场检测的手部运动跟踪系统[D]. 马英红.西安电子科技大学2011
• [10].基于稀疏模型的运动跟踪识别算法[D]. 陈鹏光.华南理工大学2016

标签：运动捕捉论文;  多摄像机人体运动跟踪论文;  人体模型论文;  多摄像机定标论文;  非线性优化论文;  上半身运动跟踪论文;  肤色模型论文;  概率跟踪论文;  形状匹配论文;  举重运动论文;