收藏本站
《东北师范大学》 2018年
收藏 | 手机打开
二维码
手机客户端打开本文

基于眼动与运动想象的人机交互方法研究

姜羽  
【摘要】:人机交互是指人与计算机之间为完成确定任务,以一定的方式进行的信息交换过程。近几年,人机交互技术的应用潜力已经开始显现,比如可穿戴式计算机、浸入式游戏设备、虚拟现实、遥控机器人以及远程医疗等领域。传统人机交互系统多为单通道交互方式,如采用语音或手势等,交互方式简单、应用领域单一。为改善人机交互系统性能,本文主要研究基于Emotiv EPOC+信号采集设备的眼电信号与运动想象脑电信号相结合的多通道人机交互方法,并实现对机器人动作的实时控制。对眼电与脑电的准确识别是多通道人机交互系统实现的基础,本文提出一种自适应阈值归一化方法,进行眼电信号识别。使用特征匹配法对6名实验人员的6个眼球动作(上、下、左、右扫视与眨眼2次和眨眼3次)进行识别。经测试,在垂直方向的离线眼动信号识别率达到97.3%,水平方向的离线眼动信号识别率达到99.9%,平均识别率达到98.6%。根据想象左手和右手运动时,大脑两侧运动区出现的事件相关去同步(Event Related Desynchronization,ERD)和事件相关同步(Event Related Synchronization,ERS)现象,本文对运动想象脑电信号提取了功率谱、短时能量和累积能量特征,并选择BP神经网络作为分类器,对脑电信号进行识别分类,离线脑电信号最高识别率达到92.86%,由于特征提取算法简单,在与机器人实时交互过程中,有效地减小了因算法对机器人动作控制造成的延迟。为实现与机器人的交互,选取实验者佩戴Emotiv EPOC+头戴设备,采集眼电信号与运动想象脑电信号,通过MATLAB进行实时处理与识别,然后通过Python编写通信程序,将识别结果发送给NAO机器人,实现了对机器人眨眼与举手动作的实时控制。实验结果证明了所设计的多通道人机交互方法的有效性,为后续应用奠定了基础。
【学位授予单位】:东北师范大学
【学位级别】:硕士
【学位授予年份】:2018
【分类号】:TP11

【参考文献】
中国期刊全文数据库 前10条
1 张焕;乔晓艳;;多任务运动想象脑电特征的融合分类研究[J];传感技术学报;2016年06期
2 郜东瑞;甘玉龙;李鹏霄;谢佳欣;尧德中;刘铁军;;基于眼电的智能输入系统研究[J];中国生物医学工程学报;2015年06期
3 王俊;廖麟荣;杨振辉;刘海兵;唐丹;;运动想象结合下肢康复机器人训练对脑卒中患者步行障碍的影响[J];中国康复医学杂志;2015年06期
4 周婷婷;罗志增;;基于小波包变换的眼电信号特征提取及分类[J];杭州电子科技大学学报(自然科学版);2014年06期
5 陈世瑜;倪莉;吕钊;吴小培;;结合眼电和脑电的人-机交互系统设计与实现[J];计算机应用;2014年05期
6 王行愚;金晶;张宇;王蓓;;脑控:基于脑-机接口的人机融合控制[J];自动化学报;2013年03期
7 李鹏海;丁皓;万柏坤;明东;;脑-机接口在移动外设控制中的应用研究进展[J];生物医学工程学杂志;2011年03期
8 胡侠;吴耿锋;;基于运动想象脑电信号的导联排序研究[J];计算机工程与设计;2010年19期
9 王君;吴小培;吕钊;;基于EOG的眼动信息提取与分类研究[J];电子测量技术;2010年05期
10 吴边;苏煜;张剑慧;李昕;张吉财;陈卫东;郑筱祥;;基于P300电位的新型BCI中文输入虚拟键盘系统[J];电子学报;2009年08期
中国博士学位论文全文数据库 前1条
1 韩志艳;语音信号鲁棒特征提取及可视化技术研究[D];东北大学;2009年
中国硕士学位论文全文数据库 前8条
1 马潇;基于小波包的LMD在EEG信号分析中的研究[D];太原理工大学;2016年
2 秦斌;面向人类眼球运动机理的仿生眼运动控制算法研究[D];山东大学;2016年
3 吴昊;基于眼电与运动想象多模态人机交互系统研究[D];重庆大学;2016年
4 余腾;基于神经网络的地铁结构变形分析模型研究[D];东南大学;2016年
5 胡叨福;表面肌电信号采集系统设计与动作模式识别方法研究[D];天津工程师范学院;2010年
6 郑赞;基于图像分块检测的方向提升小波变换算法[D];重庆大学;2008年
7 魏文庆;基于EEG的BCI的研究与设计[D];浙江大学;2007年
8 王文涛;基于虚拟手的人机交互技术研究[D];华中科技大学;2005年
【共引文献】
中国期刊全文数据库 前10条
1 王广赞;易显飞;;人工智能研究的三大流派:比较与启示[J];长沙理工大学学报(社会科学版);2018年04期
2 王会奇;方伯言;刘翠;公维军;刘爱贤;;帕金森病康复治疗研究进展[J];中国康复理论与实践;2018年07期
3 赵明剑;陈梓庆;詹艺宇;周哲;;基于FPGA与千兆网的多通道高精度脑电采集与传输系统设计[J];医疗卫生装备;2018年07期
4 荀佳慧;董静;许石双;;弹力带结合运动想象对脑卒中偏瘫患者下肢功能的影响[J];吉林医药学院学报;2018年04期
5 蔡军;胡洋揆;张毅;尹春林;;多频带频域深度置信网络脑电特征识别算法[J];机器人;2018年04期
6 王少为;;针刺联合牵伸康复训练治疗脑梗死后肌痉挛患者的疗效[J];医疗装备;2018年12期
7 都明宇;鲍官军;杨庆华;王志恒;张立彬;;基于改进支持向量机的人手动作模式识别方法[J];浙江大学学报(工学版);2018年07期
8 周福超;徐进;廖文;;脑-机接口系统关键技术研究[J];国外电子测量技术;2018年05期
9 郝矿荣;原博炜;陈磊;丁永生;;基于免疫堆叠降噪自编码机网络的运动想象脑电信号识别[J];控制与决策;2018年04期
10 陈小刚;徐圣普;;基于稳态视觉诱发电位的脑控轮椅的控制方式[J];北京生物医学工程;2018年02期
中国硕士学位论文全文数据库 前10条
1 姜羽;基于眼动与运动想象的人机交互方法研究[D];东北师范大学;2018年
2 欧阳蕊;基于EOG和面部视频相结合的眼动检测方法研究[D];安徽大学;2018年
3 笪铖璐;基于稳态视觉诱发电位的脑机接口性能与应用研究[D];南京邮电大学;2017年
4 李鹏霄;64导联脑电采集系统电路设计[D];电子科技大学;2017年
5 谢敬伟;分布式虚拟现实交互仿真系统研究[D];浙江大学;2017年
6 李辰龙;虚拟现实系统中人机交互技术研究[D];浙江大学;2017年
7 许兵;基于虚拟现实设备的典型飞机机翼装配仿真[D];沈阳航空航天大学;2017年
8 王宣方;基于运动想象实时脑机接口关键技术研究[D];天津职业技术师范大学;2016年
9 朱效杰;数控车床主轴箱虚拟装配系统的设计与开发[D];陕西科技大学;2016年
10 吴昊;基于眼电与运动想象多模态人机交互系统研究[D];重庆大学;2016年
【二级参考文献】
中国期刊全文数据库 前10条
1 武小年;彭小金;杨宇洋;方堃;;入侵检测中基于SVM的两级特征选择方法[J];通信学报;2015年04期
2 罗志增;周镇定;周瑛;何海洋;;双树复小波特征在运动想象脑电识别中的应用[J];传感技术学报;2014年05期
3 孟明;满海涛;佘青山;;基于CI-HMM的运动想象脑电信号分类[J];传感技术学报;2013年12期
4 刘华卫;王惠芳;朱锦杰;姚加佳;孙奕;沈浩峰;张晓佳;;步行机器人训练中所体现的现代脑卒中康复理念及存在的问题[J];中国康复理论与实践;2013年05期
5 王刚;;一种基于眼动轨迹的语义提取方法研究[J];重庆师范大学学报(自然科学版);2013年01期
6 王登;苗夺谦;王睿智;;一种新的基于小波包分解的EEG特征抽取与识别方法研究[J];电子学报;2013年01期
7 郑敏敏;高小榕;;基于眼电的字符输入系统研究[J];中国生物医学工程学报;2012年06期
8 吴永红;江鹏程;武东建;马琛;孟翔宇;;采用线性光电隔离放大技术实现模拟信号调理的过程[J];宇航计测技术;2012年06期
9 赵雅宁;郝正玮;李建民;马素慧;沈海涛;陈长香;;下肢康复训练机器人对缺血性脑卒中偏瘫患者平衡及步行功能的影响[J];中国康复医学杂志;2012年11期
10 杨振辉;;下肢康复机器人的应用[J];现代职业安全;2012年11期
中国硕士学位论文全文数据库 前10条
1 韩俊;基于脑电与眼电的电动轮椅控制方法研究[D];杭州电子科技大学;2015年
2 樊刘娟;WPD-EEMD方法在脑电信号处理中的应用研究[D];太原理工大学;2013年
3 郑敏敏;基于眼电信号检测的人机接口研究[D];清华大学;2013年
4 牛洁;注意力相关脑电的特征提取及分类方法研究[D];西安电子科技大学;2013年
5 侯秉文;运动想象脑机接口的特征提取与模式分类研究[D];西安电子科技大学;2012年
6 戴冷湜;脑电信号的特征提取与分析方法研究[D];浙江大学;2011年
7 龙正吉;小波变换提取ECG信号情感特征的研究[D];西南大学;2010年
8 王沛;基于小波变换和EMD去噪的含噪混叠语音盲分离[D];昆明理工大学;2009年
9 修永富;基于小波变换的脑电去噪方法研究与实现[D];天津师范大学;2009年
10 于婷婷;基于BP神经网络的滚动轴承故障诊断方法[D];大连理工大学;2008年
【相似文献】
中国期刊全文数据库 前10条
1 李范强;吴巧云;黄日荷;;针刺、推拿联合运动想象疗法对脑卒中偏瘫患者肢体功能的影响[J];生物医学工程学进展;2016年04期
2 武峙璇;赵丽波;刘玮;于杰;;运动想象疗法对早期脑梗死患者康复治疗有效性的研究[J];中国卫生标准管理;2017年04期
3 任静;郭佳琪;;探讨运动想象疗法对脑卒中偏瘫患者平衡功能恢复的影响[J];中国卫生标准管理;2017年09期
4 朱海平;冯玲;;运动想象疗法对脑卒中偏瘫患者上肢运动功能恢复的影响[J];中国高等医学教育;2017年08期
5 陈丽娜;;针灸联合运动想象疗法对脑卒中偏瘫患者康复进程的作用分析[J];中医临床研究;2016年03期
6 曾令雄;;运动想象疗法在脑卒中偏瘫患者下肢功能康复治疗中的效果观察[J];健康之路;2017年10期
7 董一璇;;运动想象疗法在疗养院脑卒中偏瘫康复训练中的应用[J];中国民间疗法;2013年01期
8 葛晴霞;郭根平;章慧霞;;运动想象疗法在脑卒中偏侧忽略训练中的应用[J];中国康复理论与实践;2013年02期
9 严树婵;曾少良;金勤剑;;运动想象疗法在冠心病介入治疗患者心脏康复中的应用[J];中国当代医药;2013年14期
10 叶依露;赖垚霖;黄总军;肖慧玲;杨金玉;陈慧瑶;赵杰;;运动想象疗法的应用研究进展[J];按摩与康复医学;2015年15期
中国重要会议论文全文数据库 前10条
1 李丽君;黄思娟;吴效明;熊冬生;;基于运动想象的脑电信号特征提取与分类[A];中国仪器仪表学会医疗仪器分会2010两岸四地生物医学工程学术年会论文集[C];2010年
2 费琳;谢文龙;何凤祥;唐娟芬;徐艳;周洁;沈慕云;;运动想象疗法在偏瘫患者上肢功能康复治疗中的效果观察[A];2013浙江省物理医学与康复学学术年会暨第八届浙江省康复医学发展论坛论文集[C];2013年
3 徐海鹰;;运动想象疗法结合运动再学习方案在脑卒中早期患者上肢功能的应用[A];中国康复医学会运动疗法分会第十一届全国康复学术大会学术会议论文摘要汇编[C];2011年
4 李泽云;王昭君;林金生;卢攀;;运动想象联合强制性运动疗法治疗脑卒中偏瘫60例临床观察[A];中国康复医学会脑血管病专业委员会换届暨第十五次全国脑血管病康复学术年会、湖南省康复医学会神经康复专业委员会2012学术年会论文集[C];2012年
5 贾子善;;运动想像的理论与应用[A];2008年浙江省物理医学与康复学术年会暨中枢神经功能损伤康复新进展学习班论文汇编[C];2008年
6 李岩;;运动想象疗法对脑卒中患者运动功能及步态的影响[A];2015浙江省物理医学与康复学学术年会论文汇编[C];2015年
7 刘佳;邓景贵;陶希;宋红;;运动想象疗法对老年卒中偏瘫患者肢体功能恢复的影响研究[A];中国康复医学会脑血管病专业委员会换届暨第十五次全国脑血管病康复学术年会、湖南省康复医学会神经康复专业委员会2012学术年会论文集[C];2012年
8 朱美红;顾旭东;时美芳;金妹;姚云海;傅建明;邹卫英;;运动想象疗法对脑卒中偏瘫患者日常生活活动能力的影响[A];中国康复医学会第十四次脑血管病康复学术会议暨中华中医药学会第九次养生康复学术会议论文汇编[C];2011年
9 王艳;唐强;白震民;李娟;;头穴丛刺与被动运动和运动想象结合对早期脑卒中患者运动功能的影响[A];中国康复医学会第五届全国康复治疗学术会议论文集[C];2006年
10 陈爱连;;运动想象及强制性运动疗法促进卒中偏瘫上肢功能恢复1例报告[A];中国康复医学会脑血管病专业委员会换届暨第十五次全国脑血管病康复学术年会、湖南省康复医学会神经康复专业委员会2012学术年会论文集[C];2012年
中国博士学位论文全文数据库 前10条
1 李端;面向智慧医疗的生物电信号分类识别算法研究[D];北京邮电大学;2018年
2 岳敬伟;脑机协调控制理论与关键技术研究[D];国防科学技术大学;2015年
3 魏庆国;基于运动想象的脑—机接口分类算法的研究[D];清华大学;2006年
4 朱峰;电针结合具身运动想象疗法对脑梗死后偏瘫的临床研究[D];南京中医药大学;2017年
5 方永慧;基于运动想象脑电信号非线性特性分析的脑—机接口研究[D];重庆大学;2014年
6 刘美春;基于运动想象的脑—机接口系统模式识别算法研究[D];华南理工大学;2009年
7 孙莉敏;运动想象训练促进脑卒中患者功能恢复的功能磁共振(fMRI)研究[D];复旦大学;2013年
8 闫静;基于脑电的脑卒中患者运动想象认知过程的研究[D];上海交通大学;2012年
9 张锐;运动想象脑—机接口的神经机制与识别算法研究[D];电子科技大学;2015年
10 吴祖河;经颅交流电刺激对运动想象任务能力影响及作用机制探索[D];清华大学;2016年
中国硕士学位论文全文数据库 前10条
1 袁盛;基于运动想象的人脑意念操控大鼠研究[D];浙江大学;2018年
2 李梦晨;基于fMRI的运动想象大尺度脑网络研究[D];电子科技大学;2018年
3 刘锦;混合脑—机接口系统的研究与实现[D];安徽大学;2018年
4 郭晓梅;基于左右手运动想象脑电特征提取与识别研究[D];太原理工大学;2018年
5 晁金龙;基于近红外光谱技术的运动想象脑机交互模式识别方法研究[D];兰州大学;2018年
6 姜羽;基于眼动与运动想象的人机交互方法研究[D];东北师范大学;2018年
7 崔丽霞;基于概率协作表示的运动想象脑电信号识别分类研究[D];山东师范大学;2018年
8 付丹丹;运动想象配合针刺对中风恢复期患者运动功能障碍的影响[D];广州中医药大学;2017年
9 崔薇;运动想象脑电分析方法研究[D];燕山大学;2013年
10 吴亚岑;运动想象疗法在脑卒中偏瘫患者下肢功能康复治疗中的效果观察[D];中南大学;2013年
中国知网广告投放
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026