收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

序列图像中手势跟踪与识别技术的研究

齐苏敏  
【摘要】: 基于动态序列图像的生物特征识别已成为近年来计算机视觉领域中备受关注的研究内容,它主要从图像序列中检测、识别、跟踪人及对其生物特征理解和描述加以研究。人的生物特征识别在虚拟现实、人机交互、视觉监控等领域均有着广阔的应用,基于视觉的手势跟踪与识别研究就是其重要内容。由于手势具有多样性、多义性、手的复杂变形性、视觉本身的不适定性以及手势在时间和空间上的差异性等特点,因此基于视觉的的手势跟踪与识别是一个多学科交叉的富有挑战性的研究课题。 一个完整的基于视觉的图像序列中手势跟踪与识别系统,通常包含下面三个部分:手的检测、分割,手势跟踪与手势识别。 手势分割就是将有意义的区域(手)从手势图像中划分出来,是基于视觉的手势识别过程中的最为关键的一步,手势分割的好坏直接影响后续的手势跟踪、手势特征提取及手势识别结果。对图像序列中包含的手势进行跟踪(二维跟踪),即对投影到图像平面的手进行定位和跟踪,是手势识别的关键。手势识别则是把模型参数空间中的轨迹(或点)分类到该空间中某个子集的过程。 本文主要研究了用于人机交互的手势跟踪与识别,分别对目标分割算法,手势跟踪算法与识别算法进行深入研究。主要工作总结如下: 1.首先提出了一种基于肤色信息的自适应轮廓模型和一种自适应形状模型,实现了具有凸形与凹形两种边界轮廓的准确提取。 这种自适应活动轮廓模型是一种改进的Snake模型,它使轮廓线能够自适应地收缩或膨胀,降低了对初始轮廓的敏感性,在视觉跟踪中不需在当前帧中重新初始化,只需进行目标定位,较好地解决了Snake模型及Snake跳跃模型的不足,保证了对目标轮廓的准确提取。鉴于这种自适应轮廓模型对于具有凹形边界的轮廓不能实现准确提取,本文又提出一种自适应形状模型,并运用拆分和聚合技术对该形状模型表示的‘中间轮廓’进行修正,实现具有凸形与凹形两类边界轮廓的准确提取。 2.提出了一种基于各向异性核函数的均值漂移跟踪算法,实现图像序列中区域跟踪的稳健性、有效性和实时性。并且,融合均值漂移算法与自适应轮廓模型实现了图像序列中的手部轮廓跟踪。 该算法提出了一种形状、大小、方向能自适应于目标局部结构的变化的各向异性核函数,将其应用于均值漂移算法实现目标跟踪,保证了跟踪效果的稳定性和鲁棒性。而均值漂移与自适应轮廓模型的融合算法,能够根据跟踪区域模板与目标模板的相似性度量Bhattacaryya系数给出在跟踪目标被遮挡时的处理方法,有效地解决了目标跟踪的这一难题。 3.基于上述区域跟踪结果,利用手轮廓的方向直方图实现用于人机交互的静态手势识别;基于上述轮廓跟踪结果,利用隐马尔可夫模型实现用于人机交互的动态手势识别。 方向直方图满足手势识别中对光照变化的不敏感性和手势平移、旋转不变性等要求,并且可有效的表示手势特征。基于区域跟踪结果,利用手轮廓的方向直方图本文实现了用于人机交互的静态手势识别;基于轮廓跟踪结果,同时应用手形及手部运动两大特征作为隐马尔可夫模型的输入实现了动态手势识别,提高了手势识别率,也达到了实时性的效果,且不必依赖数据手套等设备。 4.提出一种新的基于范例集的跟踪器(CEE(CAMSHIFT Embedded Exemplar))跟踪器,在图像序列中同时实现手势跟踪与识别。 为克服基于范例集的手势跟踪不能实现复杂场景下手部轮廓特征的精确提取及手部动作的不准确预测,本文提出一种新的基于范例集的跟踪器(CEE跟踪器),充分利用跟踪目标的运动信息与颜色信息实现复杂场景下手势的准确跟踪,而且能够同时实现手势识别。


知网文化
【相似文献】
中国期刊全文数据库 前20条
1 柴秀娟;汪孔桥;;基于分块局部纹理描述的手势识别[J];高技术通讯;2010年05期
2 姚明海;瞿心昱;;基于自适应子空间在线PCA的手势识别[J];模式识别与人工智能;2011年02期
3 徐成;马翌伦;刘彦;;一种基于嵌入式系统实时交互的手势识别方法[J];计算机应用研究;2011年07期
4 张生军;何小海;李刚;周宜波;侯胜伟;;基于视频的手势识别中左右手判别研究[J];四川大学学报(工程科学版);2011年S1期
5 万华根;肖海英;邹松;;面向新一代大众游戏的手势交互技术[J];计算机辅助设计与图形学学报;2011年07期
6 赵秋均;王毅刚;黄岸仲;吴钰辉;;基于FTIR的多点触摸实时互动桌面系统[J];计算机工程;2011年14期
7 刘磊;李琳;谭剑波;;多用户协同手势下触摸点用户归属问题研究[J];系统仿真学报;2011年S1期
8 何鹏;王连鹏;楚艳红;;基于OpenCV的机器视觉在智能手机中的应用[J];计算机工程与设计;2011年08期
9 ;业界动态[J];电子世界;2010年12期
10 刘辉;;在手机上应用3D显示和微投影技术[J];集成电路应用;2011年08期
11 李贵现;樊银亭;;一种笔式表格组件的设计方法[J];小型微型计算机系统;2011年09期
12 谭啸峰;沈海斌;;基于主元分析的空间手写平面化预处理技术[J];机电工程;2011年08期
13 ;[J];;年期
14 ;[J];;年期
15 ;[J];;年期
16 ;[J];;年期
17 ;[J];;年期
18 ;[J];;年期
19 ;[J];;年期
20 ;[J];;年期
中国重要会议论文全文数据库 前10条
1 吴昀蓁;王祎;樊新;王立功;;基于单目视觉的手势识别跟踪算法研究与实现[A];第七届和谐人机环境联合学术会议(HHME2011)论文集【oral】[C];2011年
2 孙超;冯志全;李扬;张明敏;张文杰;潘志庚;;基于手势识别的人机交互综述[A];第六届和谐人机环境联合学术会议(HHME2010)、第19届全国多媒体学术会议(NCMT2010)、第6届全国人机交互学术会议(CHCI2010)、第5届全国普适计算学术会议(PCC2010)论文集[C];2010年
3 杨青;陈喆;;一种用于手势识别系统的指尖检侧方法[A];2010年通信理论与信号处理学术年会论文集[C];2010年
4 陈文;夏晓;王晓东;;基于优化DTW算法的智能终端手势识别[A];第七届和谐人机环境联合学术会议(HHME2011)论文集【poster】[C];2011年
5 杨筱林;姚鸿勋;;一种新的手势建模方法及其在手势识别中的应用[A];第一届中国情感计算及智能交互学术会议论文集[C];2003年
6 张凯;余新国;;基于Kinect开发用于幼儿教育的手势识别[A];第七届和谐人机环境联合学术会议(HHME2011)论文集【poster】[C];2011年
7 祝远新;徐光佑;黄浴;林学;俞志和;;一个基于表观的孤立手势识别系统[A];中国图象图形科学技术新进展——第九届全国图象图形科技大会论文集[C];1998年
8 施教芳;赵鹤鸣;;基于节点对BP网络的数据手套手势识别[A];苏州市自然科学优秀学术论文汇编(2008-2009)[C];2010年
9 王新宇;孙冠;韩冬;张婷;;基于一种改进神经网络的数据手套手势识别[A];第二十九届中国控制会议论文集[C];2010年
10 耿磊;吴晓娟;彭彰;;基于方向直方图和神经网络的手势识别[A];第十二届全国信号处理学术年会(CCSP-2005)论文集[C];2005年
中国博士学位论文全文数据库 前10条
1 齐苏敏;序列图像中手势跟踪与识别技术的研究[D];苏州大学;2008年
2 赵章琰;表面肌电信号检测和处理中若干关键技术研究[D];中国科学技术大学;2010年
3 周航;基于计算机视觉的手势识别系统研究[D];北京交通大学;2008年
4 方贵盛;面向概念表达的计算机辅助草绘设计关键技术研究[D];浙江大学;2007年
5 杨端端;手写虚拟汉字识别研究及其在多通道短信交互系统中的应用[D];华南理工大学;2007年
6 冯志全;运动人手的三维跟踪方法研究[D];山东大学;2006年
7 顾立忠;基于表观的手势识别及人机交互研究[D];上海交通大学;2008年
8 丁展;基于手绘的交互方式与三维建模研究[D];浙江大学;2008年
9 覃文军;基于视觉信息的手势识别算法与模型研究[D];东北大学;2010年
10 黄争舸;虚拟自然场景建模和可视化的若干问题研究[D];浙江大学;2008年
中国硕士学位论文全文数据库 前10条
1 王晓琳;基于计算机视觉的手势识别人机交互技术[D];浙江工业大学;2010年
2 程文山;基于肤色分割和Camshift的手势识别研究[D];华中师范大学;2009年
3 孙荣斌;基于粒子滤波的手势识别技术研究[D];南京理工大学;2009年
4 唐文平;基于Camshift的手势识别跟踪系统[D];西安电子科技大学;2012年
5 杨青;手势识别技术的研究[D];大连理工大学;2010年
6 王兴华;智能教室手势识别算法研究及交互原型系统设计[D];西安电子科技大学;2009年
7 邬大鹏;基于视觉的手势识别及人机交互研究[D];南京航空航天大学;2010年
8 姜丽;复杂背景下基于表观模型的手势识别研究[D];东北大学;2009年
9 陈帮民;手势追踪研究与手势识别应用平台实现[D];中山大学;2011年
10 杨明华;手势识别技术的应用研究[D];东华大学;2012年
中国重要报纸全文数据库 前10条
1 肖思思;TCL新型数字家电可进行手势识别[N];中国税务报;2007年
2 马田;明天移动生活——手机万能化[N];市场报;2006年
3 实习生 刘刚;机器人何时走入寻常百姓家?[N];科技日报;2009年
4 清水;用户界面走向下一代[N];计算机世界;2004年
5 马田;未来手机的能耐越来越大[N];大众科技报;2007年
6 电脑商报记者 张林才;JDSU推动人机交互革命[N];电脑商报;2010年
7 温雪晨 编译;别让科技俘虏你[N];计算机世界;2010年
8 李金良;打手势实现遥控 遥控器时代即将终结[N];民营经济报;2008年
9 本报记者 孟祥初;让移动应用更“有趣”[N];通信产业报;2010年
10 本报记者 陈丹;把每个工人都变成工程师[N];科技日报;2007年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978