收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

人脸感知:基于学习的人脸跟踪与合成

苏从勇  
【摘要】:人脸感知可由分析与合成人脸两部分构成。人自身对人脸非常熟悉和敏感。人可以轻而易举地识别出不同的人脸、不同的人脸表情,并可在脑海中浮现出不同人脸的形状,艺术家可以描绘出神态各异的人脸。然而这种对于人来说与生俱来的分析与合成能力对计算机而言却非常地困难。机器学习提供了一种可能的解决途径。 本文围绕人脸这个对象,以基于学习的方法为主线,研究了基于视频流的人脸运动数据获取的分析算法和基于图像的人脸建模、超分辨率、表情幻想等合成算法。 文中首先讨论了基于图像的个性化人脸建模。提出一种基于合成分析的个性化人脸三维模型建模方法,通过分析合成的人脸图像纹理与输入图像纹理的差异,使用纹理差异来指导对人脸网格进行局部自适应细分,进而对合成的人脸三维模型不断地调整,从而使得最终生成的人脸三维模型具有更高的真实感。 为了从视频流中提取基于人脸面部特征的运动数据,本文研究了人脸多特征跟踪算法。先后提出了基于贝叶斯网络增强预测模型的跟踪方法和基于时空概率图模型的跟踪方法。后者将传统的单特征跟踪器——粒子滤波与信任度传播算法成功地结合在一起。首先在时间域上,使用几个相互独立的Condensation类型的粒子滤波器分别跟踪人脸的每个特征。粒子滤波对独立的视觉跟踪问题非常有效,但是多个独立的跟踪器忽视了人脸的空间约束和人脸特征间的自然相互联系。然后在空间域上,事先从人脸表情库中学习人脸特征轮廓的相互关系,使用贝叶斯推理—信任度传播算法来对人脸特征的轮廓位置进行求精。 有些已经存在的视频流中人脸区域太小,以至于无法对人脸特征进行有效的跟踪,为此本文对图像中的人脸进行了超分辨率(Super-resolution)研究。提出基于steerable金字塔和贝叶斯估计的人脸超分辨算法。采用steerable金字塔学习人脸图像中的低层次局部特征的空间分布,并结合塔状的父结构和局部最优匹配算法来预测最佳先验模型;然后将先验模型结合到贝叶斯最大后验概率框架中;最后使用最速下降法(Steepest Descent)求出最优的高分辨率人脸图像。 基于人脸照片总是具有最高的真实感这一出发点,为了合成具有真实感的未知人脸表情,本文提出人脸表情幻想(Hallucination)的新方法。给定某个人中立的人脸图像,可以使用流形学习等方法预测出他的其它表情人脸图像。与现有的表情克隆或者图像类比方法不同,本文在一个人脸表情库的帮助下来幻想出合理的人脸表情。在第一步中,使用非线性流形学习来获取对未知人脸表情 的一个平滑估计。在第二步中,使用马尔可夫网络来学习训练库中中立与具有 表情的残差人脸图像中低层次人脸特征的相互关系,然后使用信任度传播算法 来推理出该人的具有表情的残差人脸图像。通过把这两步结合在一起,获得最 终的结果。 在每一章的实验部分,给出了对如上人脸感知—人脸跟踪与合成算法的 分析和原型实现。另外一些相关算法也逐步集成到正在构建的基于视频流的真 实感人脸动画系统中。 关键词:模式识别,计算机视觉,机器学习,图像/视频理解,人脸分析与识 别,人脸跟踪,人脸合成,贝叶斯理论,概率图模型,流形学习 第2页


知网文化
【相似文献】
中国期刊全文数据库 前20条
1 刘明宝,姚鸿勋,高文;彩色图像的实时人脸跟踪方法[J];计算机学报;1998年06期
2 刘文萍,付晓玲,伊大成,李晓丽;人脸跟踪技术在智能家庭服务系统中的应用[J];计算机应用研究;2004年10期
3 徐力群;吴晓娟;葛庆国;;实时人脸跟踪算法[J];电子测量技术;2005年01期
4 杨强;;利用Gabor小波特征实现人脸跟踪[J];绵阳师范学院学报;2007年02期
5 孙维广;;一种多人脸跟踪方法的研究[J];科技资讯;2009年04期
6 杜宇;;基于Boosted Cascade算法的人脸检测和跟踪系统[J];电子科技;2006年07期
7 杨秋芬;桂卫华;周书仁;;基于特征三角形的多姿态视频图像人脸跟踪[J];计算机工程;2006年15期
8 杨向波;朱虹;邓颖娜;刘薇;张曈;;基于粒子滤波的人脸跟踪算法[J];计算机工程与应用;2008年23期
9 梁路宏,艾海舟;基于人脸检测的人脸跟踪算法[J];计算机工程与应用;2001年17期
10 陈俊;;人脸跟踪方法综述[J];全国商情(经济理论研究);2009年15期
11 曾宪贵;刘磊安;左文明;;基于肤色相似度和AdaBoost算法的人脸跟踪[J];仲恺农业工程学院学报;2011年01期
12 冯春来,朱虹,李钦,钱学明;一种基于多信息综合的人脸跟踪算法[J];计算机工程与应用;2004年23期
13 许廷发;姚剑敏;韦岗;;约束的B-Snake模型的非线性粒子滤波算法研究[J];计算机仿真;2007年03期
14 张涛;蔡灿辉;;一种快速多人脸跟踪算法[J];电视技术;2009年02期
15 张成功;;自动人脸识别在网上考试系统中的应用[J];山西大同大学学报(自然科学版);2009年03期
16 徐一华,贾云得,刘万春,杨聪;视频序列中的人脸实时跟踪与识别方法(英文)[J];Journal of Beijing Institute of Technology;2002年02期
17 王雪立;关永;韩相军;;基于DM642的嵌入式人脸检测与追踪系统研究[J];微计算机信息;2006年02期
18 刘强;蔡灿辉;黄金凤;邹溢;;银行营业场所智能视觉监控系统[J];电视技术;2006年04期
19 邓亚峰;苏光大;傅博;;一种基于AdaBoost的快速动态人脸检测算法[J];计算机工程;2006年11期
20 安国成;高建坡;陈向东;吴镇扬;;一种抑制背景干扰的粒子滤波人脸跟踪算法[J];东南大学学报(自然科学版);2007年05期
中国重要会议论文全文数据库 前10条
1 邢文浩;阮秋琦;;基于边缘方向直方图的mean-shift人脸跟踪[A];图像图形技术研究与应用2009——第四届图像图形技术与应用学术会议论文集[C];2009年
2 陈阳;徐一华;李京峰;贾云得;;一种基于多区域模型的实时人脸跟踪方法[A];第十二届全国图象图形学学术会议论文集[C];2005年
3 段其昌;周奇;段盼;;基于改进粒子滤波的实时鲁棒人脸跟踪算法[A];2009中国控制与决策会议论文集(2)[C];2009年
4 胡韦伟;汪荣贵;胡琼;李守毅;;基于Adaboost定位的实时人脸跟踪方法[A];中国仪器仪表学会第九届青年学术会议论文集[C];2007年
5 杜云明;刘启生;邵东伟;姜冬华;;基于肤色特征的粒子滤波人脸跟踪算法[A];第十二届中国体视学与图像分析学术会议论文集[C];2008年
6 孙朋;刘党辉;肖艳青;;基于嵌入式系统的人脸识别技术研究进展[A];第七届全国信息获取与处理学术会议论文集[C];2009年
7 夏思宇;潘泓;金立左;夏良正;;基于肤色与运动特征的人脸跟踪方法[A];2009年中国智能自动化会议论文集(第七分册)[南京理工大学学报(增刊)][C];2009年
8 李建华;付月生;高庆华;;基于改进Camshift算法的人脸跟踪方法[A];第六届全国信息获取与处理学术会议论文集(1)[C];2008年
9 王小权;赵杰煜;;复杂背景下人脸自动检测与实时跟踪系统[A];中国图象图形学会第十届全国图像图形学术会议(CIG’2001)和第一届全国虚拟现实技术研讨会(CVR’2001)论文集[C];2001年
10 胡韦伟;汪荣贵;胡琼;李守毅;;基于肤色特征和卡尔曼预测的人脸跟踪方法[A];计算机技术与应用进展·2007——全国第18届计算机技术与应用(CACIS)学术会议论文集[C];2007年
中国博士学位论文全文数据库 前10条
1 苏从勇;人脸感知:基于学习的人脸跟踪与合成[D];浙江大学;2005年
2 高广宇;影视视频结构解析及自动编目技术研究[D];北京邮电大学;2013年
3 夏思宇;彩色图像序列的人脸检测、跟踪与识别研究[D];东南大学;2006年
4 江艳霞;视频人脸跟踪识别算法研究[D];上海交通大学;2007年
5 吴翔;基于立体显示的嵌入式身份识别系统研究与设计[D];华东师范大学;2009年
6 吴暾华;面向中医面诊诊断信息提取的若干关键技术研究[D];厦门大学;2008年
7 金乃高;音视频联合说话人定位与跟踪方法研究[D];大连理工大学;2008年
8 黎云汉;人脸特征提取与跟踪[D];浙江大学;2008年
9 刘青山;人脸跟踪与识别的研究[D];中国科学院研究生院(自动化研究所);2003年
10 万川;基于动态序列图像的人脸表情识别系统理论与方法研究[D];吉林大学;2013年
中国硕士学位论文全文数据库 前10条
1 宋广阔;人脸跟踪检测技术的应用研究[D];东北大学;2011年
2 林苏映;基于计算机视觉的人脸跟踪[D];浙江工业大学;2010年
3 韩旭;基于运动趋势估计的人脸跟踪技术研究[D];东北大学;2009年
4 赵季方;面向嵌入式手机平台人脸跟踪技术研究与实现[D];长春理工大学;2012年
5 余珍珠;基于视频监控网络的人脸跟踪算法研究[D];武汉理工大学;2013年
6 曾旭华;基于人脸跟踪的视频共享网站的设计与实现[D];中山大学;2012年
7 宋茹;基于复杂场景的人脸检测与人脸跟踪的研究与实现[D];安徽大学;2014年
8 张焕朗;基于监控系统的人脸跟踪与人脸识别[D];上海交通大学;2013年
9 雷静;基于OpenCV的人脸跟踪识别系统研究[D];西安电子科技大学;2010年
10 高海鹏;基于Mean Shift的视频图像序列人脸跟踪方法[D];西安电子科技大学;2011年
中国重要报纸全文数据库 前1条
1 实习生 程凤;东芝公司推出裸眼3D电视[N];科技日报;2011年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978