收藏本站
《河北工业大学》 2006年
收藏 | 手机打开
二维码
手机客户端打开本文

基于视觉听觉交叉模式的机器人感知技术的研究

付洪保  
【摘要】: 机器人感知技术是机器人智能化发展的重要手段之一。机器人视觉技术极大地拓宽了机器人的应用范围,提高了机器人的工作效率。但在很多情况下机器人视觉并非总尽如人意。在一些复杂动态的环境下,机器人既要能迅速地感知并适应环境,而且还要能根据环境信息变化、任务要求做出决策。单一的视觉感知方式显然不能满足这种实时性要求。人类最终希望机器人不仅能拓展人所不及,更希望机器人能具备人(或类人)的思维、情感、模式识别能力。最近,伴随着神经科学、认知科学和解剖学的发展,人类对自身大脑有了更深刻的了解。人类的交叉模式感知、注意机制得到了深入的研究,并取得了很多成果。传统人工智能经过初期的飞速发展后似乎陷入了瓶颈,人们自然地将注意力转向脑与认知科学,希望认知科学的研究发现能给机器人研究带来突破。人类应用注意机制对感知的信息进行选择和过滤,从而提高了信息处理效率。人类的交叉模式感知能力提高了人类对环境的探测能力和模式识别能力。机器人所面对的信息远远超过它的处理能力。把机器人有限的信息计算资源配置给当前机器人最关心、最紧迫的任务,注意机制和交叉模式感知无疑具有重要的理论意义和应用价值。本文以脑与认知科学关于交叉模式认知和注意的研究发现为基础,建立机一种器人交叉模式感知和朝向机制注意机制,使机器人能够快速准确地感知到环境目标,从而为进一步认知奠定基础。 本文的主要研究内容与成果如下: 1.分析总结了脑与认知科学、神经生理学在人类交叉模式认知机制上的研究成果,对人类听觉通路、视觉通路、听觉神经元感受野和交叉模式神经元感受野特性进行了总结 2.根据神经生物学启示,仿照人类听知觉空间,以听觉神经元感受野数学模型为基础建立了机器人听觉空间感知图、并将其转换为图像形式,应用图像处理技术从而提高了机器人听觉目标检测的准确性和稳定性。。 3.以机器人视觉技术为基础,建立了机器人视觉空间感知图,并和机器人听觉空间感知图融合、配准,建立了机器人交叉模式空间感知图。以此为基础,建立机器人交叉模式朝向注意模型,使机器人能快速的注意到环境视觉目标或(和)听觉目标。 4.设计了基于视觉、听觉的目标朝向注意仿真实验系统,采用LabVIEW图形化语言开发了视觉、听觉信息处理软件,对典型的朝向注意事例进行了实验验证。 实验结果表明,本文听觉朝向注意模型目标检测精度一般在-5o~+5o之间,由于对听觉目标检测采用了图像处理技术,使听觉目标检测达到了视觉目标检测的精度,同时弥补了当视觉目标模糊、被遮挡或完全不可见时视觉目标检测的局限性。
【学位授予单位】:河北工业大学
【学位级别】:硕士
【学位授予年份】:2006
【分类号】:TP242.63

【参考文献】
中国期刊全文数据库 前2条
1 刘松涛;周晓东;;图像融合技术研究的最新进展[J];激光与红外;2006年08期
2 王璐,崔益安,苏虹,蔡自兴;移动机器人的运动目标实时检测与跟踪[J];计算机工程与应用;2005年15期
中国硕士学位论文全文数据库 前1条
1 周波;基于生物视觉原理的机器人快速目标检测技术的研究[D];河北工业大学;2006年
【共引文献】
中国期刊全文数据库 前10条
1 刘再群,华田苗,孙庆艳,梅斌,张长征;扬子鳄胚胎中脑视叶的组织发生[J];动物学杂志;2004年05期
2 张大银;童传旺;万安;王赦焱;华田苗;;猫嗅球外丛层和僧帽细胞层年龄相关形态学变化[J];动物学杂志;2006年05期
3 王东;郭兆正;;机器人避障功能的设计[J];长春师范学院学报;2005年12期
4 张朝前;娄文忠;乔杰;;微声传感器在低空飞行器信号采集系统中的应用[J];传感技术学报;2006年05期
5 柳洪义;罗忠;;非结构环境下超声波传感器探测原理及其误差分析[J];东北大学学报(自然科学版);2006年08期
6 谢菠荪;多通路与虚拟环绕声的问题[J];电声技术;1999年05期
7 谢菠荪;环绕声的设计思路与音质评价问题[J];电声技术;1999年08期
8 谢菠荪;虚拟环绕声的原理与误区[J];电声技术;2000年02期
9 彭健新,吴硕贤;可听化技术在室内音质设计中的应用[J];电声技术;2000年05期
10 张承云,谢菠荪,谢志文;立体声耳机重发中头中定位效应的消除[J];电声技术;2000年08期
中国重要会议论文全文数据库 前9条
1 王枞;涂序彦;刘嘉;;注意-情绪协调的个性化信息推荐模型[A];2006年首届ICT大会信息、知识、智能及其转换理论第一次高峰论坛会议论文集[C];2006年
2 刘幺和;陈睿;彭伟;周蕾;;一种BP神经网络学习率的优化设计[A];湖北省机械工程学会机械设计与传动专业委员会第十五届学术年会论文集(一)[C];2007年
3 余文斌;郑学文;陈晓勤;吴明磊;富喜;;超微孔吸声技术和结构应用研究[A];全国环境声学学术讨论会论文集[C];2007年
4 庄稼捷;周迪;;现代城市道路交通噪声及控制[A];全国环境声学学术讨论会论文集[C];2007年
5 金赞;赵跃英;;耳机三维立体环绕声场的数字化实验系统设计[A];2005年全国高校非物理类专业物理教育学术研讨会论文集[C];2005年
6 刘箴;;虚拟人社会性非言语情绪交互研究[A];计算机技术与应用进展·2007——全国第18届计算机技术与应用(CACIS)学术会议论文集[C];2007年
7 冯秉初;张正平;任方;;大飞机噪声技术研究——工程解决方法[A];大型飞机关键技术高层论坛暨中国航空学会2007年学术年会论文集[C];2007年
8 林燕丹;陈文成;陈大华;;浅谈蓝光照明对长时间视觉作业的影响[A];中国长三角照明科技论坛论文集[C];2006年
9 石秀东;;固液的超声分离[A];'97北京国际食品加工及包装技术讨论会论文集[C];1997年
中国博士学位论文全文数据库 前10条
1 姜大志;计算机视觉中三维重构的研究与应用[D];南京航空航天大学;2002年
2 刘虎;斜视性弱视视皮层神经元时空特性的改变及其相关机制研究[D];天津医科大学;2004年
3 刘盛;旋转体视显微检测理论及装置研究[D];浙江大学;2003年
4 许改霞;细胞传感器及其在药物分析中应用的研究[D];浙江大学;2005年
5 崔世钢;远程脑全方位医用服务机器人研究[D];天津大学;2004年
6 蒲艺;针刺干预海洛因欣快记忆痕迹的多巴胺受体机制研究[D];成都中医药大学;2005年
7 王丽萍;立体视觉检测及弱视治疗系统研究[D];浙江大学;2004年
8 聂爱芳;二氧化硫衍生物对大鼠海马神经元和心肌细胞离子通道的影响[D];山西大学;2006年
9 宋勇;基于回路信息表达的新型联想记忆模型与算法研究[D];中国科学技术大学;2006年
10 刘海波;智能机器人神经心理模型研究[D];哈尔滨工程大学;2005年
中国硕士学位论文全文数据库 前10条
1 刘艳;基于结构光测量技术的自由曲面反求工程关键技术的研究[D];河北工业大学;2000年
2 陈雪勤;基于计算声场景分析的混叠语音分离研究[D];苏州大学;2002年
3 郑奇;双自由度类人上肢的设计及气动执行器的研究[D];天津大学;2004年
4 刘志元;大鼠海马CAI区及下丘脑促垂体区NOS含量过度训练后变化的实验研究[D];山西大学;2004年
5 刘军;神经生长因子—脂质体通过血脑屏障的研究[D];南京医科大学;2004年
6 林映;反求工程在口腔修复中的应用及开发[D];中国海洋大学;2004年
7 孙超;逆向工程技术在船模数字化检测中的应用研究[D];武汉理工大学;2004年
8 秦爱中;基于ZMP的双足步行机器人步态规划研究[D];西北工业大学;2005年
9 段俊花;足球机器人系统路径规划研究[D];西北工业大学;2005年
10 喻伟;神经动力系统中相变机制的研究[D];东华大学;2005年
【同被引文献】
中国期刊全文数据库 前5条
1 黄祥林,沈兰荪;基于内容的图像检索技术研究[J];电子学报;2002年07期
2 范自柱;基于内容的图像检索技术综述[J];华东交通大学学报;2005年05期
3 叶敬福,詹永照;基于Gabor小波变换的人脸表情特征提取[J];计算机工程;2005年15期
4 丁险峰,吴洪,张宏江,马颂德;形状匹配综述[J];自动化学报;2001年05期
5 陆丽珍,刘仁义,刘南;一种融合颜色和纹理特征的遥感图像检索方法[J];中国图象图形学报;2004年03期
中国博士学位论文全文数据库 前1条
1 陈倩;多生物特征融合身份识别研究[D];浙江大学;2007年
中国硕士学位论文全文数据库 前4条
1 朱木健;基于服务机器人视觉系统的设计[D];重庆大学;2006年
2 蔡丹琳;基于SVM反馈和多特征融合的图像检索技术研究[D];华侨大学;2007年
3 吴锐航;基于SIFT特征的图像检索技术研究[D];厦门大学;2007年
4 郭依正;基于多特征融合的医学图像识别研究[D];江苏大学;2007年
【二级参考文献】
中国期刊全文数据库 前10条
1 杜艳红,高庆吉,曾浩,牛国臣;基于颜色和形状特征的目标检测与识别[J];东北电力学院学报;2005年02期
2 李秋华,李吉成,沈振康;一种基于多传感器多级信息融合的红外目标检测方法[J];电子与信息学报;2004年11期
3 曹治国,王文武;应用统计信号处理和模糊数学的图像融合算法[J];光电工程;2005年05期
4 彭刚,黄心汉,王敏,熊春山;基于视觉引导和超声测距的运动目标跟踪和抓取[J];高技术通讯;2002年06期
5 苗启广,王宝树;基于非负矩阵分解的多聚焦图像融合研究[J];光学学报;2005年06期
6 纪良文;机器人超声测距数据的采集与处理[J];工业控制计算机;2001年04期
7 潘宗预,潘登;超声波测距精度的探讨[J];湖南大学学报(自然科学版);2002年S2期
8 王立,张科,李言俊;Off型感受野研究及在红外图像处理中的应用[J];红外与毫米波学报;2003年03期
9 马治国,王江安,雷选华,宗思光;基于红外双波段图像融合的点目标识别[J];激光与红外;2003年03期
10 刘亚,艾海舟,徐光佑;基于主运动分析的野外视觉侦察系统——运动目标检测、跟踪及全景图的生成[J];机器人;2001年03期
中国硕士学位论文全文数据库 前1条
1 李秋华;基于红外图像信息融合的目标检测和识别技术研究[D];国防科学技术大学;2002年
【相似文献】
中国期刊全文数据库 前10条
1 ;锻压机器人打造绿色锻压[J];发明与创新(综合版);2009年05期
2 ;韩开发出可清除血栓的“血管机器人”[J];创新科技;2010年05期
3 ;毛虫软体机器人会滚动弹射 终于实现快速运动[J];科技传播;2011年09期
4 ;河北大学机器人研究中心[J];河北大学学报(自然科学版);2004年06期
5 戴克中;卡内基-梅隆大学的机器人研究所[J];机器人;1987年03期
6 刘进长;迎接挑战,推动智能机器人的发展——中科院自动化所乔红教授专访[J];机器人技术与应用;2005年04期
7 ;业界动态[J];传感器世界;2005年10期
8 王瑞良;;机器人医生“抢班夺权”[J];青少年科技博览;2010年10期
9 ;《机器人》杂志征稿启事[J];控制工程;1986年06期
10 ;知识长廊[J];科协论坛;1997年07期
中国重要会议论文全文数据库 前10条
1 薛青;徐文超;郑长伟;刘永红;;基于有限理性的虚拟视觉感知因子分析[A];第13届中国系统仿真技术及其应用学术年会论文集[C];2011年
2 廖毅;程志全;党岗;;一种基于显著性分析的网格分割算法[A];中国图学新进展2007——第一届中国图学大会暨第十届华东六省一市工程图学学术年会论文集[C];2007年
3 荣浩磊;;开放的紫禁城之古木花亭——奥林匹克公园下沉广场2号院照明设计[A];上海市照明学会成立30周年庆典暨四直辖市照明科技论坛、长三角照明科技论坛、上海市照明学会2008年年会论文集[C];2008年
4 马宪民;赵跃齐;;一种基于数据融合理论的煤矿抢险救护机器人技术的研究[A];第十六届全国煤炭自动化学术年会、中国煤炭学会自动化专业委员会学术会议论文集[C];2006年
5 毕胜;季林红;纪树荣;;神经康复机器人研究进展[A];第四届全国康复治疗学术大会论文摘要汇编[C];2004年
6 杨辰龙;周晓军;;面向复杂形状工件的超声检测机器人研究[A];2005中国控制与决策学术年会论文集(下)[C];2005年
7 倪国强;蔓君;胡宏清;;基于生物视觉特性的真实影像再现技术及其前景展望[A];中国光学学会2006年学术大会论文摘要集[C];2006年
8 杨敏;梁玮;李善青;贾云得;;一种基于交互式学习的穿戴视觉感知方法[A];第七届和谐人机环境联合学术会议(HHME2011)论文集【oral】[C];2011年
9 荣伟彬;孙立宁;陈立国;蔡鹤皋;;面向微小零件装配的微操作机器人的研究[A];2003中国控制与决策学术年会论文集[C];2003年
10 黄沛杰;朱立华;刘学慧;吴恩华;王传铭;;针对实时视觉通信的图像序列自动提炼[A];中国计算机图形学进展2008--第七届中国计算机图形学大会论文集[C];2008年
中国重要报纸全文数据库 前10条
1 记者 李陈续 通讯员 杨保国;中国科大智能服务机器人研究获突破[N];光明日报;2009年
2 田学科;原有记忆会降低视觉感知能力[N];科技日报;2011年
3 刘孝沅;用视觉感知的新闻[N];中国新闻出版报;2003年
4 通讯员 张劲 周小铮 本报记者 魏东;站在电力机器人研究的最前沿[N];科技日报;2010年
5 健康时报特约记者  樊中文;机器人手术能治三类病[N];健康时报;2006年
6 本报记者 慕海燕薛明;“十年之后,机器人保姆走进百姓家”[N];哈尔滨日报;2007年
7 本报记者 李学华;当机器人认出了自己[N];科技日报;2007年
8 编译 杨孝文 江鑫;仿真机器人离奇潜逃[N];北京科技报;2006年
9 本报记者  张亮;机器人大赛的吸引力为何这么大?[N];科技日报;2006年
10 杨文利;最新仿人形机器人亮相[N];中国高新技术产业导报;2006年
中国博士学位论文全文数据库 前10条
1 张桦;基于视觉感知的图像质量评价方法研究[D];浙江大学;2009年
2 向遥;基于视觉感知的图像处理方法研究[D];中南大学;2011年
3 杨恒伏;结合视觉感知的图像认证与数据隐藏算法研究[D];湖南大学;2009年
4 崔世钢;远程脑全方位医用服务机器人研究[D];天津大学;2004年
5 方挺;无人机协同编队飞行中的视觉感知关键技术研究[D];南京航空航天大学;2008年
6 瞿心昱;基于仿人脑认知计算模型的机器人视觉学习方法[D];浙江工业大学;2012年
7 梁惠;视频信息隐藏关键技术研究[D];中国科学技术大学;2010年
8 谢德红;高动态范围图像显示再现技术的研究[D];武汉大学;2010年
9 毛晓波;仿生机器眼运动系统建模与控制研究[D];郑州大学;2011年
10 胡德昆;基于生物视觉感知机制的图像理解技术研究[D];电子科技大学;2012年
中国硕士学位论文全文数据库 前10条
1 付洪保;基于视觉听觉交叉模式的机器人感知技术的研究[D];河北工业大学;2006年
2 柯尔挺;基于视觉感知信息的乳腺钼靶肿块辅助诊断研究[D];杭州电子科技大学;2013年
3 林祥明;人类视觉感知经验的数学化表示及其在深度估算中的应用[D];复旦大学;2010年
4 李双;乳腺钼靶诊断中的视觉感知研究[D];杭州电子科技大学;2011年
5 尹清;视觉感知中特征捆绑建模方法的研究[D];太原理工大学;2011年
6 孙博闻;论色质[D];中央美术学院;2011年
7 谭菊;基于视觉感知的目标特性分析[D];重庆大学;2010年
8 辛帅;基于视觉感知的流场可视化[D];中国海洋大学;2012年
9 林济延;带可控静止功能的动物机器人研究[D];浙江大学;2011年
10 王魏;空中机器人视觉系统研究[D];浙江大学;2005年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026