收藏本站
《大连理工大学》 2010年
收藏 | 手机打开
二维码
手机客户端打开本文

人脸运动捕捉数据处理及表情动画重构研究

方小勇  
【摘要】: 人脸运动捕捉是运动捕捉(Motion capture, MoCap)领域的一个新兴分支,是基于运动捕捉的数据采集方式捕捉人脸表情运动、处理和分析运动捕捉数据以及对人脸表情进行动画仿真的一门学科。该学科是人体工程学、计算机图形学、图像处理、数据处理等多个学科相互交叉与渗透而产生的新兴研究领域,是当前计算机科学的研究热点。人脸表情运动捕捉的研究不仅具有一定的理论研究意义,还具有广泛的实际应用价值。到目前为止,人脸表情运动捕捉已经广泛应用于现代影视动画、游戏制作、医学分析、虚拟现实等多个领域。本文针对人脸运动捕捉领域的若干关键问题进行了深入的研究,取得了一定的理论成果,开发了一个原型系统。论文工作主要包括以下几部分内容: 1.基于空间几何柔性的人脸模板自动匹配方法:针对由三维坐标点集构成的具有相同排布方式、局部非刚性变形以及分布误差的不同人脸表情模板,运用启发式方法将模板空间进行归一化,构建了人脸拓扑结构,在模板匹配过程中,计算局部标记点(Marker)的运动对匹配进行矫正,使用临时反馈方法(Temporary feedback method, TFM)提高标记点的匹配可靠性,实现了由局部到整体的人脸模板自动匹配。实验证明该方法具有一定的鲁棒性,能对具备较大表情差异的模板进行快速准确的自动匹配,解决了在序列首帧模板生成过程中需要手动干预的实际问题。 2.基于人脸运动捕捉数据的在线(Online)数据处理与轨迹光顺方法:针对运动捕捉数据中存在的数据缺失和噪声,提出了动态时空耦合的在线处理方法。分析了噪声繁殖问题,使用基于自适应Kalman滤波的噪声繁殖处理模块(Noise propagation solution module, NPS)对其进行抑制。提出了基于3D人脸拓扑结构的精练非刚性运动解析机制(Sophisticated non-rigid motion interpreter, SNRMI),结合动态追踪方法,能有效地追踪非缺失数据以及修复长时间缺失的标记点数据。最后,使用语义检测算法对开放结构(嘴、眼等)的错误追踪进行检测和修正。另外,针对轨迹光顺问题,提出了一种在线曲线的构造算法。实验证明,该方法能够自动处理具有噪声和长时间相邻多点缺失的运动捕捉数据,以及对运动轨迹进行在线光顺。 3.基于运动捕捉数据的人脸动画仿真方法:基于对人脸不同功能分区进行模型驱动的思想,构建了基于径向基函数方法(Radial Basis Functions, RBF)的交叉映射,实现了不同人脸模型的运动数据生成。在模型驱动研究中,添加虚拟标记点并求解其运动,作为模型驱动数据,采用RBF方法实现了基于不同个性人脸模型的真实感动画生成。设计了预计算算法提高了实时仿真的效率,减少了计算消耗。实验证明,该方法能够将同一演员的运动捕捉数据应用于不同的个性人脸模型,生成逼真的人脸表情动画。 4.基于人脸运动捕捉的数据处理及动画重构原型系统开发:系统定位为拥有自主知识产权的交互性软件系统,整合了论文的理论研究成果,构建了统一的底层数据结构,提供了强大的交互接口,设计了友好的操作界面。为使运动捕捉数据处理及表情动画仿真能够直观高效,系统将模板构建、数据处理及光顺和模型驱动三个主要过程模块无缝整合在一起。实验证明,该系统能够有效验证本文方法,并且全程交互处理运动捕捉数据及重构人脸表情动画,处理效率高,动画仿真效果真实感强。 综上所述,本文针对人脸运动捕捉的数据处理及动画重构过程中所面临的几个主要问题做出了深入的理论研究,结合提出的算法理论,设计和开发了人脸表情运动捕捉数据处理及表情动画重构原型系统,在大量实验测试的基础上,验证了各个算法的有效性、鲁棒性、仿真程度及执行效率。
【学位授予单位】:大连理工大学
【学位级别】:博士
【学位授予年份】:2010
【分类号】:TP391.41

手机知网App
【参考文献】
中国期刊全文数据库 前4条
1 黄波士,陈福民,张金剑;一种改进算法的光学运动捕捉系统[J];同济大学学报(自然科学版);2005年10期
2 高申玉,刘金刚;人体运动实时捕捉仪器设计与应用[J];现代仪器;2005年02期
3 金刚,李德华,周学泳;表演动画中的运动捕捉技术[J];中国图象图形学报;2000年03期
4 姚健;王阳生;丁宾;李基拓;;基于球面参数化的人脸动画重映射[J];中国图象图形学报;2009年07期
中国博士学位论文全文数据库 前1条
1 肖伯祥;运动捕捉数据处理、检索与重构方法研究[D];大连理工大学;2009年
【共引文献】
中国期刊全文数据库 前10条
1 王松;刘明光;石双双;杨罡;;基于卡尔曼滤波和神经网络的PMSM参数辨识[J];北京交通大学学报;2010年02期
2 陶成,谈振辉,李承恕;线性无偏最小方差多用户信号检测器[J];北方交通大学学报;1995年03期
3 李茂;岳曾敬;;自适应交互式多模型目标跟踪算法[J];兵工自动化;2009年05期
4 翟翌立,戴逸松,唐瑞春;基于多传感器数据融合无参考信号的自适应数字滤波算法[J];兵工学报;1998年01期
5 胡健;马大为;程向红;周百令;;基于Elman网络的传递对准容错联合滤波器设计与仿真[J];兵工学报;2010年11期
6 裴福俊;孙新蕊;刘红云;崔平远;;均匀重采样粒子滤波器在SINS初始对准中的应用[J];北京工业大学学报;2008年06期
7 裴福俊;居鹤华;崔平远;;基于自适应组合滤波的惯性导航系统初始对准方法[J];北京工业大学学报;2009年11期
8 王睿;阎鹏;刘红英;张广军;;基于扩展卡尔曼滤波的舰机相对位姿估测[J];北京航空航天大学学报;2006年11期
9 陈殿生;邵志浩;雷旭升;王田苗;;MEMS陀螺仪随机误差滤波[J];北京航空航天大学学报;2009年02期
10 钱华明;夏全喜;阙兴涛;张强;;MEMS陀螺仪随机漂移仿真和试验[J];北京航空航天大学学报;2010年06期
中国重要会议论文全文数据库 前10条
1 隋树林;孙立宏;姚文龙;袁健;;融合改进UKF/SIFT信息的自主光学导航方法[A];第二十六届中国控制会议论文集[C];2007年
2 刘俊宏;谷德峰;赖育网;易东云;;单通道测量条件下的DORIS实时定轨方法研究[A];第二届中国卫星导航学术年会电子文集[C];2011年
3 杨霖;张永学;;增广无迹卡尔曼滤波在定位解算中的应用[A];第三届中国卫星导航学术年会电子文集——S07北斗/GNSS用户终端技术[C];2012年
4 许竞;姜波;;摄像机运动下特征点追踪方法研究[A];2011下一代自动测试系统学术研讨会论文集[C];2011年
5 马海波;黄跃峰;滕寿威;;车载导航系统的高精度定位算法[A];2009`中国地理信息产业论坛暨第二届教育论坛就业洽谈会论文集[C];2009年
6 王鹏;张迎春;;基于SINS/星敏感器的组合导航模式[A];2005年全国自动化新技术学术交流会论文集[C];2005年
7 曾翠娟;杜传利;;动态GPS自适应卡尔曼滤波算法的FPGA实现[A];第13届全国计算机、网络在现代科学技术领域的应用学术会议论文集[C];2007年
8 裴海龙;张谦;罗沛;;一种小型捷联惯导系统设计[A];第二十四届中国控制会议论文集(下册)[C];2005年
9 耿建中;姚海林;;基于UKF的飞机飞行状态估计[A];'2008系统仿真技术及其应用学术会议论文集[C];2008年
10 刘宇飞;崔平远;崔祜涛;尚海滨;;深度撞击任务中的接近段导航算法研究[A];中国宇航学会深空探测技术专业委员会第四届学术年会论文集[C];2007年
中国博士学位论文全文数据库 前10条
1 王婷;EMD算法研究及其在信号去噪中的应用[D];哈尔滨工程大学;2010年
2 夏全喜;车载组合导航系统关键技术研究[D];哈尔滨工程大学;2010年
3 丁国强;惯性导航系统传递对准技术关键问题研究[D];哈尔滨工程大学;2010年
4 王小旭;非线性SPKF滤波算法研究及其在组合导航中的应用[D];哈尔滨工程大学;2010年
5 张涛;GPS/SINS超紧密组合导航系统的关键技术研究[D];哈尔滨工程大学;2010年
6 张勤拓;机载导弹SINS动基座传递对准技术研究[D];哈尔滨工程大学;2010年
7 田峰敏;水下地形导航模型求解与导航区初选策略研究[D];哈尔滨工程大学;2009年
8 李姗姗;水下重力辅助惯性导航的理论与方法研究[D];解放军信息工程大学;2010年
9 吴富梅;GNSS/INS组合导航误差补偿与自适应滤波理论的拓展[D];解放军信息工程大学;2010年
10 郭秀丽;采伐联合机机械手运动分析与控制系统研究[D];东北林业大学;2011年
中国硕士学位论文全文数据库 前10条
1 张斌;基于MIMU的捷联惯性导航系统数据采集与处理技术研究[D];哈尔滨工程大学;2010年
2 任蕾;捷联惯性导航系统初始对准方法研究[D];哈尔滨工程大学;2010年
3 栾厚斌;综合舰桥系统信息集成处理技术研究[D];哈尔滨工程大学;2010年
4 马妍;基于多波束测量数据的海底地形可导航性分析[D];哈尔滨工程大学;2010年
5 马士国;水下回收AUV的短基线导引与定位数据融合技术研究[D];哈尔滨工程大学;2010年
6 阙兴涛;基于SOPC的小型组合导航系统的设计与实现[D];哈尔滨工程大学;2010年
7 周海旭;两轮自平衡机器人系统设计[D];哈尔滨工程大学;2010年
8 王磊;硅微航姿系统技术研究[D];哈尔滨工程大学;2010年
9 王涵毅;无陀螺惯性组合导航系统滤波方法研究[D];哈尔滨工程大学;2010年
10 郑婕;GPS/INS组合导航及非线性滤波方法在导航系统中的应用研究[D];大连理工大学;2010年
【二级参考文献】
中国期刊全文数据库 前10条
1 邹北骥,彭永进,伍立华,彭群生;基于面分块的人脸造型技术研究[J];电子学报;2001年11期
2 王守觉;仿生模式识别(拓扑模式识别)——一种模式识别新模型的理论与应用[J];电子学报;2002年10期
3 张菁;沈兰荪;David Dagan Feng;;基于视觉感知的图像检索的研究[J];电子学报;2008年03期
4 向坚;俞坚;;基于集成多示例学习决策树分析的三维运动检索[J];计算机研究与发展;2008年S1期
5 伍立华,邹北骥,彭永进;一种基于块体变形的人脸合成算法[J];计算机工程与应用;2001年15期
6 蓝娟,陈益强,徐燕;基于MPEG-4和PCA的人脸动画合成方法[J];计算机工程与应用;2004年10期
7 朱凌;一种光学运动捕捉系统的设计与实现[J];计算机工程与应用;2004年12期
8 黄波士,陈福民,张金剑;基于序列帧的光学运动捕捉系统及实现[J];计算机工程与应用;2004年17期
9 李艳;王兆其;毛天露;;基于广义交叉截面的实时虚拟人皮肤变形方法[J];计算机科学;2005年01期
10 吴琼;黄海明;刘金刚;;适用于光学运动捕捉数据校正的拟合算法[J];计算机工程;2007年19期
中国博士学位论文全文数据库 前2条
1 刘国翌;基于视频的人体运动跟踪技术研究[D];中国科学院研究生院(计算技术研究所);2005年
2 高岩;基于内容的运动检索与运动合成[D];上海交通大学;2006年
【相似文献】
中国期刊全文数据库 前10条
1 王涛;孙长库;杨国威;;三维人脸表情动态采集系统的设计[J];光学精密工程;2011年04期
2 张家树,陈辉,李德芳,罗小宾,夏小东;人脸表情自动识别技术研究进展[J];西南交通大学学报;2005年03期
3 陈辉,张家树;人脸表情的混沌仿生识别[J];仪器仪表学报;2004年S1期
4 王宇博,艾海舟,武勃,黄畅;人脸表情的实时分类[J];计算机辅助设计与图形学学报;2005年06期
5 朱小艳,汪晓华;人脸识别的分析与实现[J];商丘职业技术学院学报;2005年05期
6 张申;贾珈;王晓慧;蔡莲红;;基于语义维度的人脸表情生成[J];清华大学学报(自然科学版);2011年01期
7 刘振安;刘瑄;;基于SVG的卡通人脸图形自动生成法[J];测控技术;2006年05期
8 左坤隆,刘文耀;基于活动外观模型的人脸表情分析与识别[J];光电子.激光;2004年07期
9 陈静,董平,杨国为;人脸表情动画[J];微计算机信息;2004年12期
10 段鸿;;一种虚拟人物的情感计算方法[J];计算机工程与应用;2007年11期
中国重要会议论文全文数据库 前10条
1 陶建华;谭铁牛;;语音和人脸表情同步的双模态情感表达研究[A];第一届中国情感计算及智能交互学术会议论文集[C];2003年
2 林其伟;张伟龙;;基于Gabor小波的表情识别算法[A];第八届全国信息获取与处理学术会议论文集[C];2010年
3 陈辉;张家树;;人脸表情的混沌仿生识别[A];第二届全国信息获取与处理学术会议论文集[C];2004年
4 张军;徐光佑;陶霖密;;支持多动因动作及其融合的生动人脸动画技术[A];第一届建立和谐人机环境联合学术会议(HHME2005)论文集[C];2005年
5 张申;吴志勇;蔡莲红;;基于局部表情参数化的三维表情脸像合成[A];第二届和谐人机环境联合学术会议(HHME2006)——第2届中国人机交互学术会议(CHCI'06)论文集[C];2006年
6 唐京海;应自炉;张有为;;人机自然交互过程中情态的识别与融合[A];第十二届全国信号处理学术年会(CCSP-2005)论文集[C];2005年
7 王吉林;;基于神经网络的人脸表情识别研究[A];2006’和谐开发中国西部声学学术交流会论文集[C];2006年
8 苏建霞;李凯;林文茹;;人脸表情识别软件的设计[A];第七届全国信息获取与处理学术会议论文集[C];2009年
9 朱娅妮;王喆;;基于遗传算法进化的SVM人脸表情识别[A];2009年中国智能自动化会议论文集(第三分册)[C];2009年
10 刘帅师;田彦涛;郭冬梅;史于心;;基于混合特征和SVM的人脸表情识别算法[A];2009年中国智能自动化会议论文集(第三分册)[C];2009年
中国重要报纸全文数据库 前6条
1 中科院自动化所 何鹏 陶建华 谭铁牛;看懂人的“脸色”[N];计算机世界;2005年
2 中科院计算机所 朱登明;一切都是为了更“传神”[N];计算机世界;2004年
3 中科院自动化所 尹潘嵘 陶建华;情感与认知 相互触发[N];计算机世界;2005年
4 傅小兰;人机交互中的情感计算[N];计算机世界;2004年
5 本报记者 邱江勇;IDF:嵌入智能 互联世界[N];中国电子报;2011年
6 记者 刘春辉;2011英特尔信息技术峰会开幕[N];人民邮电;2011年
中国博士学位论文全文数据库 前10条
1 林裕旭;基于扫描数据的三维人脸表情合成[D];浙江大学;2010年
2 宋明黎;人脸表情的识别、重建与合成[D];浙江大学;2005年
3 迟静;基于动态点云的三维人脸表情跟踪问题研究[D];山东大学;2012年
4 周吉帆;社会线索在物理事件因果知觉中的作用[D];浙江大学;2012年
5 万贤美;真实感人脸表情合成的关键技术研究[D];浙江大学;2012年
6 Ebenezer Owusu;[D];江苏大学;2014年
7 王涛;基于光栅投影模式的三维形貌快速测量系统的研究[D];天津大学;2010年
8 刘帅师;非均匀光照和局部遮挡情况下的鲁棒表情识别理论与方法研究[D];吉林大学;2012年
9 王进;基于视频的人脸表情建模研究[D];浙江大学;2003年
10 苏从勇;人脸感知:基于学习的人脸跟踪与合成[D];浙江大学;2005年
中国硕士学位论文全文数据库 前10条
1 吴旭风;人脸表情分析与识别系统[D];华侨大学;2012年
2 王永辉;基于3DMM的人脸表情移植研究[D];北京理工大学;2011年
3 柳华;静态图像中人脸表情和性别识别的研究[D];济南大学;2010年
4 江杰青;基于小波变换的人脸表情识别算法的分析与研究[D];长春工业大学;2011年
5 吕长勇;基于语音与人脸表情信息的情感识别算法研究[D];华东理工大学;2014年
6 张庆;人脸表情识别算法的研究[D];安徽大学;2012年
7 徐红;多表情的人脸识别关键技术研究[D];江南大学;2013年
8 周慧;人脸表情特征表达与识别算法研究[D];哈尔滨工业大学;2010年
9 夏春芬;基于GPU高性能计算的人脸表情识别算法的研究[D];武汉理工大学;2011年
10 高立;基于图像变形的人脸表情拟合研究[D];云南大学;2012年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026