收藏本站
《浙江大学》 2010年
收藏 | 手机打开
二维码
手机客户端打开本文

基于扫描数据的三维人脸表情合成

林裕旭  
【摘要】:表情是除语言外传递信息的最佳途径,是体现情绪状态的直接通道。虽然表情仅产生于面积有限的脸部,但通过协调控制43块表情肌,可以组合出上万种表情。俗话说“出门看天色,进门看脸色”,透过表情可以观察人物内心情感世界,因此表情成为心理学科中重要的研究内容;与此对应,自发明计算机以来,人们就期望有一天它能像人类一样自如地通过表情表达情感,虽然至今为止,该目标并未完全实现,但人脸表情合成与识别的阶段性研究成果已经在数字娱乐、人机交互及计算机安全领域获得应用。如今,随着三维扫描设备及计算机设备不断改进,基于扫描数据的真实三维人脸表情合成及识别已经成为计算机图形学与视觉领域的热点。 本文以建立基于真实三维人脸数据的表情合成系统为主线,详细研究三维人脸数据处理和表情合成中的理论及关键算法。论文的主要贡献如下: 第一,受三维扫描设备能力所限及高光影响,三维人脸表情数据通常带有缺失区域,并且在某些应用中分辨率不足。为了解决这个问题,提出一种名为“双边径向基函数曲面”的重建技术。首先,通过与经典物理学中的平板电容模型类比,将三维曲面表达为平板电容的零等势面;接着由三维人脸点云数据,产生对应的正负电荷对,并初始化电荷能量配置;然后通过一种非线性优化算法不断调整电荷对的空间位置及能量配置,达到精确拟合曲面的目的;最后使用GPU加速技术可视化零等势面,得到人脸高分辨率点云模型。 第二,为了合成具有真实感的三维人脸表情,提出一种基于稀疏编码的表情合成方法。该方法源于人类神经系统使用稀疏形式表达物体的特点。首先通过稀疏编码提取同一人脸不同表情的共同特征;接着由任意输入的自然表情自动恢复出基本表情;然后通过给定插值系数或表情样例的方式合成新表情;同时,通过引入部分投影法,还能有效修复带噪声和不完整的三维人脸表情数据。 第三,为了适应人脸表情非线性分布的特点,提出一种基于非线性子空间的表情合成框架。首先分析人脸表情合成中的三个基本问题,将其归纳为“联合学习”过程;为了实现联合学习,在非线性子空间方法中引入投影约束,使得具有共同属性(如带有相同表情或属于同一人脸)的人脸表情在对应子空间中具有相同的坐标;接着通过投影与坐标传递,人脸基本表情可以由给定的自然表情得以合成;同时还能解决表情克隆和人脸表情数据修复问题。 第四,为了将本文提出的三维人脸表情合成中的关键技术转化为实际应用,开发了基于扫描数据的三维人脸表情合成原型系统。
【学位授予单位】:浙江大学
【学位级别】:博士
【学位授予年份】:2010
【分类号】:TP391.41

【参考文献】
中国期刊全文数据库 前10条
1 冯忠伟;徐春广;冷惠文;肖定国;;圆结构光传感器标定方法[J];北京理工大学学报;2009年09期
2 周杰,卢春雨,张长水,李衍达;人脸自动识别方法综述[J];电子学报;2000年04期
3 尹宝才;孙艳丰;王成章;盖赟;;BJUT-3D三维人脸数据库及其处理技术[J];计算机研究与发展;2009年06期
4 王跃明;潘纲;吴朝晖;;三维人脸识别研究综述[J];计算机辅助设计与图形学学报;2008年07期
5 王玉顺;肖俊;庄越挺;王宇杰;;基于运动传播和Isomap分析的三维人脸动画编辑与合成[J];计算机辅助设计与图形学学报;2008年12期
6 梁路宏 ,艾海舟 ,徐光祐 ,张钹;人脸检测研究综述[J];计算机学报;2002年05期
7 严严;章毓晋;;基于视频的人脸识别研究进展[J];计算机学报;2009年05期
8 龙玺,钟约先,李仁举,由志福;结构光三维扫描测量的三维拼接技术[J];清华大学学报(自然科学版);2002年04期
9 邹华;高新波;吕新荣;;一种八叉树编码加速的3D纹理体绘制算法[J];西安交通大学学报;2008年12期
10 ;Data-driven facial animation based on manifold Bayesian regression[J];Journal of Zhejiang University Science A(Science in Engineering);2006年04期
中国博士学位论文全文数据库 前2条
1 常江龙;三维人脸表情合成研究[D];中国科学技术大学;2009年
2 刘苏醒;基于多视点三维视频系统的若干关键技术研究[D];上海大学;2009年
中国硕士学位论文全文数据库 前1条
1 陈江;二目立体测量系统关键技术研究[D];南京航空航天大学;2006年
【共引文献】
中国期刊全文数据库 前10条
1 韩强;;基于广义Hough变换的手写文档整词定位[J];安徽电子信息职业技术学院学报;2011年05期
2 程刚;郑小华;阳锋;徐祖舰;;三维全景视觉技术在农业机器人中的应用[J];安徽农业科学;2010年34期
3 冯卓;任然;;信息安全的现阶段问题分析与发展动向[J];安全与环境学报;2007年02期
4 何海燕;施培蓓;;基于改进AdaBoost算法的行人检测方法[J];安庆师范学院学报(自然科学版);2009年03期
5 吴慧兰;刘国栋;刘炳国;胡涛;浦昭邦;;ICF实验靶定位技术研究[J];半导体光电;2008年05期
6 陈京;袁保宗;刘渭滨;;多视点标定图像的交替迭代度量重建方法[J];北京交通大学学报;2012年02期
7 周峰;刘辉;李超峰;;SIFT算法在图像配准中的应用[J];办公自动化;2009年22期
8 刘彬;叶丽娜;;一种基于SIFT特征的序列图像拼接算法[J];兵工自动化;2009年06期
9 刘焕敏;王华;段慧芬;;一种改进的SIFT双向匹配算法[J];兵工自动化;2009年06期
10 宋红;石峰;;面向视频监控的快速多人脸检测与分割[J];兵工学报;2006年02期
中国重要会议论文全文数据库 前10条
1 刘善磊;张亮;;基于相位相关和SURF算法的关键帧实时匹配研究[A];江苏省测绘学会2011年学术年会论文集[C];2011年
2 隋树林;孙立宏;姚文龙;袁健;;融合改进UKF/SIFT信息的自主光学导航方法[A];第二十六届中国控制会议论文集[C];2007年
3 汪力;叶桦;夏良正;;利用特征点定位嘴巴[A];第二十六届中国控制会议论文集[C];2007年
4 ;Loop-closing By Using SIFT Features for Mobile Robots[A];第二十六届中国控制会议论文集[C];2007年
5 ;Robust Face Recognition by Fusion Local Singular Value Feature and Deformable Model[A];第二十九届中国控制会议论文集[C];2010年
6 周凯;范瑞霞;李位星;;一种基于SIFT的MeanShift-粒子滤波融合跟踪算法[A];第二十九届中国控制会议论文集[C];2010年
7 ;Rapid Target Recognition and Tracking under Large Scale Variation Using Semi-Naive Bayesian[A];第二十九届中国控制会议论文集[C];2010年
8 ;A High-level Image Sequence Fusion Algorithm for Human Detection[A];第二十九届中国控制会议论文集[C];2010年
9 邹丽晖;陈杰;张娟;窦丽华;;一种基于时空域流形的视频序列图像拼接算法[A];第二十九届中国控制会议论文集[C];2010年
10 ;Machine Vision Based Flotation Froth Mobility Analysis[A];第二十九届中国控制会议论文集[C];2010年
中国博士学位论文全文数据库 前10条
1 王玉全;基于全景视觉的移动机器人同时定位与地图创建方法研究[D];哈尔滨工程大学;2010年
2 梁洪;基于内容的医学图像检索及语义建模关键技术研究[D];哈尔滨工程大学;2010年
3 任桢;图像分类任务的关键技术研究[D];哈尔滨工程大学;2010年
4 孔凡芝;引线键合视觉检测关键技术研究[D];哈尔滨工程大学;2009年
5 王作为;具有认知能力的智能机器人行为学习方法研究[D];哈尔滨工程大学;2010年
6 肖洁;视觉注意模型及其在目标感知中的应用研究[D];华中科技大学;2010年
7 朱清波;序列图像三维重建方法研究[D];华中科技大学;2010年
8 田文;多视图图像的快速三维场景重建[D];华中科技大学;2010年
9 涂虬;智能视觉监视中目标检测与跟踪算法研究[D];华中科技大学;2010年
10 章鹏;多尺度特征检测:方法和应用研究[D];中国科学技术大学;2010年
中国硕士学位论文全文数据库 前10条
1 宋抗;压缩机活塞圆度误差数字检测系统研究[D];河南理工大学;2010年
2 陈忠翔;基于立体视觉的三维重建方法研究[D];南昌航空大学;2010年
3 刘桂珍;颅骨三维重建与信息提取[D];山东科技大学;2010年
4 王亚东;基于二代身份证图象的人脸检测与识别研究与设计[D];山东科技大学;2010年
5 雒燕飞;地质灾害应急地理信息数据库设计及其应用[D];山东科技大学;2010年
6 唐红梅;基于辐射与空间信息的遥感图像检索[D];山东科技大学;2010年
7 倪希亮;基于尺度不变特征的多源遥感影像配准[D];山东科技大学;2010年
8 贾伟洁;SAR影像与光学影像配准研究[D];山东科技大学;2010年
9 任天宇;自稳定航拍系统算法与设计[D];长春理工大学;2010年
10 韩宁;鲁棒性图像水印算法研究[D];辽宁师范大学;2010年
【二级参考文献】
中国期刊全文数据库 前10条
1 吕广宪;潘懋;吴焕萍;丛威青;吴自兴;;面向真三维地学建模的海量虚拟八叉树模型研究[J];北京大学学报(自然科学版);2007年04期
2 尹宝才,胡永利,程世铨,谷春亮;基于形变模型的人脸建模及其应用综述[J];北京工业大学学报;2003年03期
3 周杰,卢春雨,张长水,李衍达;人脸自动识别方法综述[J];电子学报;2000年04期
4 邢昕,汪孔桥,沈兰荪;基于器官跟踪的人脸实时跟踪方法[J];电子学报;2000年06期
5 梁路宏,艾海舟,徐光佑,张钹;基于模板匹配与人工神经网确认的人脸检测[J];电子学报;2001年06期
6 颜树华,叶湘滨,王跃科;CCD光靶交汇测量精度的理论研究[J];光电子·激光;1999年04期
7 王奎武,王洵,董兰芳,陈意云;一个MPEG-4兼容的人脸动画系统[J];计算机研究与发展;2001年05期
8 胡永利,尹宝才,程世铨,谷春亮,刘文韬;创建中国人三维人脸库关键技术研究[J];计算机研究与发展;2005年04期
9 尹宝才,高文,晏洁,宋益波;基于模型的头部运动估计和面部图像合成[J];计算机研究与发展;1999年01期
10 张翔宇,华蓓,陈意云;人脸建模和动画的基本技术[J];计算机辅助设计与图形学学报;2001年04期
中国博士学位论文全文数据库 前3条
1 邹北骥;人脸造型与面部表情动画技术研究[D];湖南大学;2001年
2 姜大龙;真实感三维人脸合成方法研究[D];中国科学院研究生院(计算技术研究所);2005年
3 刘伟锋;人脸表情识别研究[D];中国科学技术大学;2007年
中国硕士学位论文全文数据库 前1条
1 刘丰;基于运动捕获数据的若干动画技术研究[D];浙江大学;2004年
【相似文献】
中国期刊全文数据库 前10条
1 肖庆云;李晓雯;欧阳江帆;;融合几何特征向量的三维人脸识别[J];福建电脑;2009年12期
2 胡静俊;陈国斌;刘济林;沈晔湖;;基于曲率和积分投影的人脸特征检测[J];江南大学学报(自然科学版);2006年06期
3 薛峰;丁晓青;;形状约束的三维人脸组件形变模型[J];计算机应用;2007年03期
4 欧阳江帆;宋晓冰;袁美玲;柳秀霞;;基于均方根曲率和绝对曲率的三维人脸特征定位[J];福建电脑;2009年03期
5 顾亦然;闵瑞;王保云;;三维人脸姿态校正算法研究[J];仪器仪表学报;2010年10期
6 胡向阳;侯文广;丁明跃;;基于真实三维信息的人脸自动识别[J];中国人民公安大学学报(自然科学版);2008年03期
7 李茜;龚勋;王国胤;;基于曲率和纹理信息的三维人脸特征提取[J];重庆邮电大学学报(自然科学版);2008年06期
8 周佳立;张树有;杨国平;;基于双目被动立体视觉的三维人脸重构与识别[J];自动化学报;2009年02期
9 张小凤;杨卫英;蔡方方;田超;;汉语复韵母的三维动态视位模型[J];电声技术;2009年12期
10 邢书宝;薛惠锋;延秀娟;;面状条纹结构光在三维人脸数据获取应用研究[J];计算机技术与发展;2009年01期
中国重要会议论文全文数据库 前1条
1 董建民;周明全;耿国华;李磊;;空间三维面貌的二维参数平面转化算法[A];图像图形技术与应用进展——第三届图像图形技术与应用学术会议论文集[C];2008年
中国硕士学位论文全文数据库 前1条
1 兰佩;几何特征融合的三维人脸识别研究[D];厦门大学;2014年
中国知网广告投放
相关机构
>厦门大学
相关作者
>兰佩
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026