收藏本站
《国防科学技术大学》 2010年
收藏 | 手机打开
二维码
手机客户端打开本文

四路摄像头协同多重触控技术研究与实现

王德鑫  
【摘要】:理想的人机交互模式是利用人类自然形成的与自然界沟通的认知习惯和形式进行的自由交互。多重触控技术就是一种以用户为中心的自然人机交互方式,通过构建一种能同时检测到多个触点的多重触控平台,允许用户双手自由交互甚至多人协同交互,并以用户本能的交互手势进行交互,降低了用户的认知负担,充分释放了用户交互潜力,成为人机交互技术的研究热点之一。它在军事\民用指挥决策、商业零售、公共信息查询、信息家电、大众传媒以及教育等许多领域有着广泛的应用前景。 多重触控技术的研究包括多重触控平台的构建及其多触点检测、定位和跟踪方法,以及多重触控手势描述与识别方法。目前多重触控平台构建方法是其中研究最深入的部分,也涌现出了大量的成果并得到成功应用,促使了多重触控技术的兴起,但是现有的多重触控平台大多具有成本高昂,尤其是构建大范围交互平台成本高昂,另外对交互环境和用户的交互行为有特殊要求,而且安装不方便,需要对现有显示平台进行改装和占用较大的空间,不具有移植性,此外大部分多重触控平台的多触点检测、定位和跟踪方法无法解决多触点之间的遮挡问题,定位精度较低,这些因素一定程度上限制了多重触控技术的发展。多重触控手势是多重触控平台与用户之间的桥梁,目前的多重触控应用局限于设定的几种手势,不能根据应用约束以及用户的交互习惯定制用户手势,需要用户去学习,记忆和适应指定的手势,限制了用户的自由和潜力,脱离了以人为中心的自然交互理念,且手势识别方法大都需要复杂的训练,手势定义的变动容易颠覆现有的识别结果,而且对用户操作的差异不够灵活,成为限制多重触控技术广泛应用的主要瓶颈。 本文分别对其展开研究,具体内容如下: 多重触控平台构建方法。提出一种四路摄像头协同的多重触控平台构建方法,该方法只需要简单的红外光源和四路广角红外摄像头,适用于构建各种尺寸的多重触控平台,且不需要对现有显示器进行改装,能直接安装于显示器前方,具有构建简单,安装方便,便于移植,成本低廉等特点。 多触点检测定位跟踪方法。首先基于灰度梯度的单幅图像目标检测实现多触点的亚像素级检测,然后利用查找表法/消失点法/立体标定法构建触点在每个摄像头中的方向线,并利用四路摄像头空间约束关系去除触点间遮挡的影响,实现多个触点的精确定位,最后采用改进最近邻数据关联法,利用触点目标的位置、速度和方向特征对落在卡尔曼滤波预测范围内的目标构建加权二部图的权,并用KM算法求解加权二部图的最优匹配来实现多触点目标的稳定跟踪。 多重触控手势描述。提出一种应用导向的多重触控语义交互手势描述方法,且基于OWL的多重触控手势本体描述结果能利用推理工具进行检验,发现并指导解决冲突,从而使得用户可以根据应用和自己的喜好自定义手势,能够方便地增加,删除,修改手势定义,或从现有手势继承派生出新的手势,且该方法适用于任意多重触控平台,具有较好的扩展性、重用性和语义性。 多重触控手势识别。提出一种基于轨迹形状特征及约束关系的多重触控手势识别方法,使得手势模板建立简单,且用户修改手势定义或从现有手势继承派生出的新手势能直接存储为模板,不需要进行复杂的重新训练,而且能适应不同用户操作速度,幅度上的差异,具有较好的鲁棒性。此外,该方法适用于任意多重触控平台的任意条轨迹组成的复杂手势。 多重触控系统实现。设计开发了四路摄像头协同多重触控系统,构建了2.4 m*1.35 m尺寸的四路摄像头协同多重触控平台,开发了应用导向的多重触控手势描述工具,并针对3维对象操控任务设计调查问卷采集面向三维物体操控的多重触控手势,并组织大量用户进行测试,对本文方法进行了验证,达到了较好的效果。
【学位授予单位】:国防科学技术大学
【学位级别】:博士
【学位授予年份】:2010
【分类号】:TP391.41

手机知网App
【引证文献】
中国硕士学位论文全文数据库 前5条
1 蒋朴春;基于LLP的多点触控系统的研究与实现[D];电子科技大学;2012年
2 陈拴拴;光学多点触摸交互式桌面系统的设计与实现[D];重庆大学;2012年
3 王晓庆;多点触控系统触摸指令智能解析算法的研究与实现[D];中国海洋大学;2012年
4 周祖微;基于机器视觉的大屏幕交互式设备触控技术研究与实现[D];电子科技大学;2013年
5 崔浩然;触点坐标图像配准校正算法与指令通信的研究与实现[D];中国海洋大学;2013年
【参考文献】
中国期刊全文数据库 前10条
1 李辉;张安;赵敏;沈莹;;两点式数据关联算法在多目标跟踪中的应用[J];兵工学报;2007年05期
2 邓志鸿,唐世渭,张铭,杨冬青,陈捷;Ontology研究综述[J];北京大学学报(自然科学版);2002年05期
3 张翔,刘媚洁,陈立伟;基于数学形态学的边缘提取方法[J];电子科技大学学报;2002年05期
4 彭嘉雄,周文琳;红外背景抑制与小目标分割检测[J];电子学报;1999年12期
5 胡明星,袁保宗,唐晓芳;基于混合遗传算法的对极几何估计[J];电子学报;2003年10期
6 袁保宗,阮秋琦,王延江,刘汝杰,唐晓芳;新一代(第四代)人机交互的概念框架特征及关键技术[J];电子学报;2003年S1期
7 彭宇新,Ngo Chong-Wah,肖建国;一种基于二分图最优匹配的镜头检索方法[J];电子学报;2004年07期
8 李辉;张安;赵敏;庞勤;沈莹;;基于两点式数据关联算法的多机动目标跟踪[J];电子学报;2005年12期
9 徐一华;李善青;贾云得;;一种基于视觉的手指屏幕交互方法[J];电子学报;2007年11期
10 张丽飞,王东峰,时永刚,邹谋炎;基于形变模型的图像分割技术综述[J];电子与信息学报;2003年03期
中国博士学位论文全文数据库 前8条
1 王滔;基于多Agent理论和虚拟现实技术的工控人机系统研究及应用[D];上海大学;2005年
2 周航;基于计算机视觉的手势识别系统研究[D];北京交通大学;2008年
3 顾立忠;基于表观的手势识别及人机交互研究[D];上海交通大学;2008年
4 武斌;红外弱小目标检测技术研究[D];西安电子科技大学;2009年
5 白亮;本体支持的视频情报分析方法与技术研究[D];国防科学技术大学;2008年
6 谭立球;基于本体的图像检索相关技术研究[D];中南大学;2009年
7 袁燕妮;基于本体的电信产品信息融合服务框架研究与实践[D];北京邮电大学;2008年
8 刘少华;非重叠监控摄像机网络中运动目标检测与跟踪[D];国防科学技术大学;2009年
【共引文献】
中国期刊全文数据库 前10条
1 梁峰;金莹;;基于Agent技术的语义网服务模型[J];安徽广播电视大学学报;2008年01期
2 刘放;杨杨;明军;;一种时空采样矩阵的确定方法[J];安徽大学学报(自然科学版);2006年04期
3 陶皖,李平,廖述梅;当前基于本体的语义标注工具的分析[J];安徽工程科技学院学报(自然科学版);2005年02期
4 赵秀芳;;基于本体的农业信息检索[J];安徽农业科学;2006年10期
5 蔡曈;徐惠;吴群;;土壤质量聚类分析——以封丘县为例[J];安徽农业科学;2008年25期
6 杨菁媛;方朝阳;陈晓玲;;基于多时相ENVISAT ASAR的鄱阳湖水面覆盖信息提取及其应用研究[J];安徽农业科学;2011年11期
7 杨荣春;余波;;马钢厂区安防系统方案探讨[J];安徽冶金;2005年03期
8 薛荟;谭三清;;林业应用系统本体知识模型的构建方法研究[J];现代农业科技;2011年07期
9 孙立辉;周兵;应家驹;陈娅冰;王永仲;;基于边缘检测的超大空域红外背景抑制算法[J];半导体光电;2008年03期
10 代少升;王锋;;一种有效的红外图像目标背景分割增强算法研究[J];半导体光电;2011年04期
中国重要会议论文全文数据库 前10条
1 陈逊;窦丽华;张娟;孙健;;一种使用图像信息熵的粒子群快速图像搜索算法[A];中国自动化学会控制理论专业委员会A卷[C];2011年
2 ;Improved JPDA For Fast Fault Detection[A];中国自动化学会控制理论专业委员会C卷[C];2011年
3 李贵;张兆鑫;李征宇;韩子洋;;WEB环境下基于领域本体的语义匹配技术研究[A];科学发展与社会责任(A卷)——第五届沈阳科学学术年会文集[C];2008年
4 胡帆;廖斌;薛巧平;;基于轮廓的形状特征提取方法[A];2011年通信与信息技术新进展——第八届中国通信学会学术年会论文集[C];2011年
5 殷子强;张广军;袁新;赵慧慧;吴林;;人机交互式机器人弧焊再制造系统设计[A];第十六次全国焊接学术会议论文摘要集[C];2011年
6 李伟刚;张克亮;王慧兰;;基于航空领域本体知识库的语义检索研究[A];中国计算语言学研究前沿进展(2009-2011)[C];2011年
7 郭倩蕊;翁冬冬;刘越;王涌天;;轻便型新式交互投影墙[A];图像图形技术研究与应用2009——第四届图像图形技术与应用学术会议论文集[C];2009年
8 王建州;李廉;汪映海;;面向Ontology的电力信息系统的研究[A];2005年信息与通信领域博士后学术会议论文集[C];2005年
9 尉宇;岑翼刚;孙德宝;梁瑞麟;;缓变的长线性调频信号的低信噪比检测[A];第十一届全国信号处理学术年会(CCSP-2003)论文集[C];2003年
10 韩建涛;王书宏;陈曾平;;基于灰度形态学的可见光弱小目标检测[A];第十二届全国信号处理学术年会(CCSP-2005)论文集[C];2005年
中国博士学位论文全文数据库 前10条
1 孟凡彬;基于随机集理论的多目标跟踪技术研究[D];哈尔滨工程大学;2010年
2 唐国维;嵌入式小波图像编码算法及应用研究[D];哈尔滨工程大学;2010年
3 卜志国;海洋生态环境监测系统数据集成与应用研究[D];中国海洋大学;2010年
4 熊晶;海洋生态本体的建模方法研究及应用[D];中国海洋大学;2010年
5 张俐;面向概念设计方案选择的协同决策方法研究[D];华中科技大学;2010年
6 杨喜敏;面向多视点设计的EIS访问控制技术研究[D];华中科技大学;2010年
7 韩赟;高技术虚拟企业(HTVE)知识管理模式研究[D];哈尔滨理工大学;2009年
8 王亚萍;需求驱动的个性化产品配置设计方法研究[D];哈尔滨理工大学;2010年
9 潘放;通航桥梁船撞风险分析与规避措施研究与应用[D];华南理工大学;2010年
10 李鹤喜;基于视觉反馈的焊接机器人自主示教关键技术研究[D];华南理工大学;2010年
中国硕士学位论文全文数据库 前10条
1 贺静;基于DSP的鸡蛋蛋壳破损实时检测系统的研究[D];华中农业大学;2010年
2 年军艳;普适计算下的上下文感知计算若干关键技术研究[D];安徽工程大学;2010年
3 杨毅;FMCW雷达高度表数字信号处理技术研究[D];中国工程物理研究院;2009年
4 田冰;基于SOM网的多目标图像轮廓提取技术的研究[D];南昌航空大学;2010年
5 刘棉;人机划拳系统的实现[D];山东科技大学;2010年
6 厉颖;基于本体的服装领域知识表示的建模研究[D];山东科技大学;2010年
7 吕媛媛;基于本体的物流信息集成系统的研究[D];山东科技大学;2010年
8 许坤;基于本体的应急信息管理系统的研究与设计[D];郑州大学;2010年
9 田守东;基于雷达图像的目标检测技术研究[D];哈尔滨工程大学;2010年
10 王洋;基于潜在语义分析的智能搜索技术研究[D];哈尔滨工程大学;2010年
【同被引文献】
中国期刊全文数据库 前10条
1 熊平;CCD与CMOS图像传感器特点比较[J];半导体光电;2004年01期
2 薄雪峰;全海英;刘志成;谭国庆;何玉;;被动式立体视觉研究进展[J];北京生物医学工程;2008年05期
3 邱德润;朱明旱;伍宗富;;一种基于帧间差分与背景差分的运动目标检测新方法[J];湖南文理学院学报(自然科学版);2007年01期
4 孙一帆;;交互新方式——多点触摸技术初探[J];电脑知识与技术;2009年34期
5 杨自锋;赵建业;;汉王手写芯片的触摸屏控制器应用设计[J];单片机与嵌入式系统应用;2007年06期
6 郑赞;;触摸屏多点触摸技术揭秘[J];电子产品世界;2008年11期
7 鲁冰;;电容式触摸屏系统解决方案[J];电子产品世界;2008年12期
8 陈大炜;;基于光学感应的大尺寸多点触摸控制技术[J];电子产品世界;2009年09期
9 张泽旭,李金宗,李宁宁;基于光流场分割和Canny边缘提取融合算法的运动目标检测[J];电子学报;2003年09期
10 袁保宗,阮秋琦,王延江,刘汝杰,唐晓芳;新一代(第四代)人机交互的概念框架特征及关键技术[J];电子学报;2003年S1期
中国博士学位论文全文数据库 前1条
1 王滔;基于多Agent理论和虚拟现实技术的工控人机系统研究及应用[D];上海大学;2005年
中国硕士学位论文全文数据库 前10条
1 季红艳;基于多点触摸技术的人机交互研究[D];华东师范大学;2011年
2 王文涛;基于ArcGIS Engine的南海海洋动力环境应用服务系统的设计与初步实现[D];中国海洋大学;2011年
3 柴硕;基于计算机视觉追踪的多点触控系统研制[D];中国海洋大学;2011年
4 梁艳;基于GIS的矿区沉陷三维虚拟现实实现技术[D];安徽理工大学;2011年
5 孟祥亮;显示表面上多触点手势研究[D];清华大学;2010年
6 宾志燕;视频监控系统中的运动目标检测算法研究[D];广西大学;2011年
7 李祥兵;基于GNU Binutils的嵌入式系统交叉汇编器和交叉连接器的移植[D];浙江大学;2004年
8 伍星;设计模式在HTML解析器中的应用[D];重庆大学;2004年
9 周小斌;基于分布式多媒体数据库的数字校园查询系统[D];华中科技大学;2004年
10 吴剑;GIS空间数据查询技术研究及应用[D];南京航空航天大学;2006年
【二级参考文献】
中国期刊全文数据库 前10条
1 江立;阮秋琦;;基于神经网络的手势识别技术研究[J];北京交通大学学报;2006年05期
2 邓志鸿,唐世渭,张铭,杨冬青,陈捷;Ontology研究综述[J];北京大学学报(自然科学版);2002年05期
3 王浒,李琦,承继成;数字城市元数据服务体系的研究和实践[J];北京大学学报(自然科学版);2004年01期
4 方丽英;王普;闫健卓;;面向语义异构的信息集成系统查询处理方案[J];北京工业大学学报;2007年08期
5 郑轶;宁汝新;唐承统;上官景昌;;虚拟装配环境中的人机交互技术研究[J];北京理工大学学报;2006年01期
6 罗翔;汪纪锋;;电信行业的元数据集成研究[J];重庆邮电学院学报(自然科学版);2005年06期
7 桑会勇,郭华东,韩春明,王长林;一种基于梯度信息的小波SAR图像滤波方法[J];测绘通报;2005年02期
8 李卓;郭立红;;强起伏云背景下的小目标图像预处理算法[J];电光与控制;2007年01期
9 蔡梅艳;吴庆宪;姜长生;;改进Otsu法的目标图像分割[J];电光与控制;2007年06期
10 罗炳伟,余沪涛,江晓;细胞图像分割的新方法[J];电子科技大学学报;1990年01期
中国博士学位论文全文数据库 前7条
1 王慧燕;图像边缘检测和图像匹配研究及应用[D];浙江大学;2003年
2 郭丽;基于内容的商标图像检索研究[D];南京理工大学;2003年
3 谢毓湘;辅助情报分析的新闻视频挖掘技术研究[D];国防科学技术大学;2004年
4 陈剑赟;体育视频语义内容分析技术研究[D];国防科学技术大学;2005年
5 王进;基于本体的语义信息检索研究[D];中国科学技术大学;2006年
6 贺一;禁忌搜索及其并行化研究[D];西南大学;2006年
7 梁华;多摄像机视频监控中运动目标检测与跟踪[D];国防科学技术大学;2009年
中国硕士学位论文全文数据库 前3条
1 史军强;WEB信息集成技术研究[D];电子科技大学;2005年
2 李永波;基于数据挖掘的军事情报分析系统研究[D];重庆大学;2005年
3 李亚红;基于语义的信息集成方法研究[D];西北大学;2006年
【相似文献】
中国期刊全文数据库 前10条
1 李林芯;;触控 无线 打印 惠普推出基于触控技术的照片一体机新品[J];微电脑世界;2009年11期
2 王岫晨;;多点触控技术引领人机互动新时代[J];集成电路应用;2011年09期
3 ;多点触控技术和主动式电子笔[J];办公自动化;2014年04期
4 陈化南;;手机的触控应用[J];电信快报;2008年05期
5 叶以雯;钱金维;;压电式多点触控技术的原理与优势分析[J];现代显示;2009年08期
6 陆楠;;触控技术新选择:压电式触控[J];电子设计技术;2009年08期
7 于寅虎;;众多器件供应商加速触控技术普及进程[J];电子产品世界;2009年12期
8 Geoff Walker;黄维;;2009显示周回顾:触控技术[J];现代显示;2010年04期
9 ;触控技术应用日益广泛[J];硅谷;2011年14期
10 孔文;;触控技术从高性能向多样化应用发展[J];集成电路应用;2011年09期
中国重要会议论文全文数据库 前1条
1 王宇;谢栋;;基于多点触控技术的科普展品的设计和研究——以南京古生物馆“发现澄江动物群”多点触控装置为例[A];安徽首届科普产业博士科技论坛——暨社区科技传播体系与平台建构学术交流会论文集[C];2012年
中国重要报纸全文数据库 前10条
1 ;多指触控技术迎合多媒体融合需求[N];中国电子报;2009年
2 本报记者 陈翔;“映像”触控技术实现多屏互动[N];中国计算机报;2012年
3 NPD DisplaySearch分析师 于宁宁;触控技术架构多元化演绎[N];中国电子报;2013年
4 邹大斌;多点触控:进入人机交互新时代[N];计算机世界;2010年
5 万林;多点触控机会挑战并存[N];中国电子报;2013年
6 证券时报记者 周少杰 黄丽;莱宝高科23亿打造重庆基地 加码新触控技术[N];证券时报;2013年
7 方光辉;触控技术:应用由小尺寸走向中大尺寸[N];中国电子报;2008年
8 良宇;2016年全球触控面板产值将达140亿美元[N];中国电子报;2010年
9 张效;微软发布适用于下一代OS的触控技术[N];电子资讯时报;2008年
10 岐;方正颐和A300采用双模式智能触控技术[N];电脑商报;2009年
中国博士学位论文全文数据库 前1条
1 王德鑫;四路摄像头协同多重触控技术研究与实现[D];国防科学技术大学;2010年
中国硕士学位论文全文数据库 前5条
1 房琦;触控技术中的自然人机界面范式研究[D];昆明理工大学;2012年
2 李晓飞;触控技术下滑动光标技术研究与实现[D];昆明理工大学;2013年
3 游鹏飞;多点触控触点个数对交互性能影响的研究[D];昆明理工大学;2011年
4 常荣;基于Wii Remote多点触控系统关键技术的研究与实现[D];昆明理工大学;2011年
5 齐婷;基于视觉的多点触控系统关键技术研究[D];昆明理工大学;2009年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026