收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

基于深度学习的手势识别研究

吴杰  
【摘要】:随着科学技术的飞跃发展,人机交互越来越频繁的发生在更多人的身边,为许多人的生活带来了方便,其中人机手势交互是最为活跃的一个领域。然而手属于非刚性物体,变化丰富,使得手势识别的难度加大了不少。自2006年来深度学习(Deep Learning,DL)有了长足的发展,它给人工智能带来新的希望,它优异的表现给了我们足够的信心来完成手势识别这项任务。手势识别是一个复杂的系统,通常基于计算机视觉的识别系统包括手势定义、图像的获取、处理、分析、理解。一个好的识别系统往往离不开一个好的前期处理,但是这并不代表图像的前期处理是最重要的,在本课题中我们把重点放在了手势识别的算法研究上。在手势识别的实现过程中我们分别从深度学习两个主要方面入手,一是采用基于限制玻尔兹曼机(Restricted Boltzmann Machine,RBM)的DL网络,二是采用以基于Le Net-5卷积神经网络(Convolutional neural network,CNN)的DL网络。本文还提出了一种CNN和RBM联合网络:利用多个RBM形成堆积式网络进行无监督特征提取,再结合CNN的有监督特征提取,最后融合这两类特征进行分类。仿真结果表明我们提出的联合网络在识别背景简单的手势样本中有更好的表现,而对于复杂背景的手势样本的识别能力则还有待提高。另外,DL相对于传统三层神经网络有明显的优势,同时DL极大改善了多层网络的训练问题,从我们的仿真过程中可以看出多层DL的性能要好于传统浅层网络。针对无人机的手势控制,本文首先定义了十类基本手势,同时又分为简单背景下的手势样本和复杂背景下的手势样本,并对这些样本做了简单的前期处理。在静态图像识别中使用了五种网络,分别是深度信念网络(Deep Belief Networks,DBNs)、深度神经网络(Deep Neural Network,DNN)、CNN、CNN和RBM的联合网络以及传统三层神经网络。针对视频流中的手势识别,本文划分了三个环节分别是检测、跟踪、识别,并做了详尽的介绍。其结果表明CNN能很好的适应复杂环境下手势的检测、跟踪、识别。


知网文化
【相似文献】
中国期刊全文数据库 前20条
1 江冬梅;吴晓娟;;基于肤色和特征相似度映射手势识别算法[J];电子测量技术;2004年02期
2 胡友树;手势识别技术综述[J];中国科技信息;2005年02期
3 路凯;李小坚;;手势识别研究概述[J];西安文理学院学报(自然科学版);2006年02期
4 张洪;;佩戴式手势识别系统的开发[J];仪器仪表学报;2006年S1期
5 凌云翔;张国华;李锐;叶挺;;基于多点触摸的自然手势识别方法研究[J];国防科技大学学报;2010年01期
6 杨波;宋晓娜;冯志全;郝晓艳;;复杂背景下基于空间分布特征的手势识别算法[J];计算机辅助设计与图形学学报;2010年10期
7 丁跃;刘军发;陈益强;周经野;;基于手机手势识别的媒体控制界面[J];计算机工程;2010年23期
8 李小杰;李响;;手势识别技术在虚拟地理环境中的应用初探[J];测绘与空间地理信息;2010年05期
9 华晶;贾晶;王映龙;;便携式手势识别系统设计[J];微计算机信息;2011年04期
10 张长青;宋旭;;一种实时手势识别应用开发框架[J];微型机与应用;2011年09期
11 徐成;马翌伦;刘彦;;一种基于嵌入式系统实时交互的手势识别方法[J];计算机应用研究;2011年07期
12 李文生;解梅;邓春健;;基于多点手势识别的人机交互技术框架[J];计算机工程与设计;2011年06期
13 陈娟;文振宇;李志强;李天鹏;;一种快速手势识别算法的实现与验证[J];实验科学与技术;2011年06期
14 朱利安·蒂贝尔;;手势识别接口[J];科技创业;2011年06期
15 翁汉良;战荫伟;;基于视觉的多特征手势识别[J];计算机工程与科学;2012年02期
16 杨扬;程楠楠;张萌萌;;基于平均邻域最大化的手势识别方法研究[J];计算机工程;2012年09期
17 ;基于声波的手势识别技术[J];互联网周刊;2012年10期
18 葛继东;贾绍文;蔡慧敏;;手势识别综述[J];科技视界;2012年19期
19 ;产品推介[J];电子产品世界;2012年07期
20 淦创;;基于3D体感技术的动态手势识别[J];光电技术应用;2012年04期
中国重要会议论文全文数据库 前10条
1 杨青;陈喆;;一种用于手势识别系统的指尖检侧方法[A];2010年通信理论与信号处理学术年会论文集[C];2010年
2 祝远新;徐光佑;黄浴;林学;俞志和;;一个基于表观的孤立手势识别系统[A];中国图象图形科学技术新进展——第九届全国图象图形科技大会论文集[C];1998年
3 孙超;冯志全;李扬;张明敏;张文杰;潘志庚;;基于手势识别的人机交互综述[A];第六届和谐人机环境联合学术会议(HHME2010)、第19届全国多媒体学术会议(NCMT2010)、第6届全国人机交互学术会议(CHCI2010)、第5届全国普适计算学术会议(PCC2010)论文集[C];2010年
4 杨筱林;姚鸿勋;;一种新的手势建模方法及其在手势识别中的应用[A];第一届中国情感计算及智能交互学术会议论文集[C];2003年
5 吴昀蓁;王祎;樊新;王立功;;基于单目视觉的手势识别跟踪算法研究与实现[A];第七届和谐人机环境联合学术会议(HHME2011)论文集【oral】[C];2011年
6 张凯;葛文兵;汪国平;董士海;;基于立体视觉的自然手势识别[A];第一届建立和谐人机环境联合学术会议(HHME2005)论文集[C];2005年
7 耿磊;吴晓娟;彭彰;;基于方向直方图和神经网络的手势识别[A];第十二届全国信号处理学术年会(CCSP-2005)论文集[C];2005年
8 易晓;秦圣峰;康金胜;;基于手势识别技术的快速三维建模(英文)[A];第十届中国科协年会论文集(三)[C];2008年
9 沈世宏;李蔚清;;基于Kinect的体感手势识别系统的研究[A];第八届和谐人机环境联合学术会议(HHME2012)论文集CHCI[C];2012年
10 张凯;余新国;;基于Kinect开发用于幼儿教育的手势识别[A];第七届和谐人机环境联合学术会议(HHME2011)论文集【poster】[C];2011年
中国博士学位论文全文数据库 前7条
1 张凯;融合深度数据的人机交互手势识别研究[D];华中师范大学;2013年
2 周航;基于计算机视觉的手势识别系统研究[D];北京交通大学;2008年
3 顾立忠;基于表观的手势识别及人机交互研究[D];上海交通大学;2008年
4 万军;动态手势识别中的时空特征表示和字典优化研究[D];北京交通大学;2014年
5 覃文军;基于视觉信息的手势识别算法与模型研究[D];东北大学;2010年
6 赵章琰;表面肌电信号检测和处理中若干关键技术研究[D];中国科学技术大学;2010年
7 李云;基于肌电模式的中国手语识别研究及康复应用探索[D];中国科学技术大学;2013年
中国硕士学位论文全文数据库 前10条
1 金欢;基于视觉的手势识别技术的研究[D];西安理工大学;2009年
2 贾建军;基于视觉的手势识别技术的研究[D];哈尔滨工业大学;2008年
3 刘昌盛;基于视觉的静态手势识别技术研究[D];西北师范大学;2008年
4 杨青;手势识别技术的研究[D];大连理工大学;2010年
5 杨玥;基于手势识别的交互型虚拟摄影棚系统的研究与开发[D];华中师范大学;2011年
6 黄璐;面向交互的手势识别研究[D];华中师范大学;2011年
7 翁汉良;基于单目视觉的手势识别算法的研究与实现[D];广东工业大学;2011年
8 王茂吉;基于视觉的静态手势识别系统[D];哈尔滨工业大学;2006年
9 刘志明;基于动态手势识别的人机交互技术研究[D];浙江大学;2007年
10 贺顾一;复杂背景下基于视觉的动态手势识别研究[D];华东师范大学;2008年
中国重要报纸全文数据库 前10条
1 华凌;首个无电池手势识别系统有望替代触摸屏[N];科技日报;2014年
2 本报记者 孟祥初;让移动应用更“有趣”[N];通信产业报;2010年
3 肖思思;TCL新型数字家电可进行手势识别[N];中国税务报;2007年
4 实习生 刘刚;机器人何时走入寻常百姓家?[N];科技日报;2009年
5 李金良;打手势实现遥控 遥控器时代即将终结[N];民营经济报;2008年
6 电脑商报记者 张林才;JDSU推动人机交互革命[N];电脑商报;2010年
7 胡永生;迎接中国的交互白板年[N];科技日报;2006年
8 LULUSIR;iPhone的控制之眼[N];电脑报;2014年
9 本报记者 姜姝;可穿戴创新 成2014CES最大亮点[N];中国信息化周报;2014年
10 宁夏 边书丽 编译;深入了解体感技术[N];电子报;2013年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978