收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

基于文本和视觉信息融合的Web图像检索

黄鹏  
【摘要】: 随着数码技术、扫描技术和Internet的迅速发展,Web图像资源日益丰富。但由于Web数据具有多样性、复杂性和无规则性等特点,如何快速、准确地从海量Web资源中查找用户感兴趣的图像成为一个非常具有挑战性的任务。Web图像检索通过合理地组织Web图像资源,并研究高效的查询和检索方法以达到充分利用Web图像资源的目的。目前主流的Web图像检索方法大致可以分为两大类,即基于关键词的图像检索(TBIR)和基于内容的图像检索(CBIR)。 Web图像主要包含两种类型的信息,一种是Web图像本身所包含的丰富的视觉信息,另一种是Web图像所在网页包含的丰富的文本信息。TBIR仅仅使用从文本信息中抽取的文本特征索引和检索图像,而CBIR仅仅使用从图像视觉信息中抽取的低层视觉特征索引和检索用户。显然,要较好地满足用户检索图像的需求,在Web图像检索过程中必须充分利用并融合上述两种不同类型的信息;此外,还需要为Web图像附加上包括图像内容的高层语义在内的各种信息,因为用户主要根据图像的高层语义特征判断图像满足自己的需要程度。但如何为Web图像附加语义信息,以及如何实现上述两种信息的融合直到今天依旧是图像检索领域中的研究难点。 针对上述问题,本文首先提出了浅层语义处理技术一词汇相似性计算技术。词汇相似性计算是自然语言处理领域中语义处理的基础性研究之一,主要研究如何计算词汇之间的语义相似程度。本文的研究中将词汇相似性计算技术作为语义信息的度量手段,这使得存在于人类思维中的抽象语义信息具有了可计算性和可对比性,同时也进一步使得Web图像的文本信息和视觉信息(图像视觉信息被表示为高层语义特征,参考下文)的融合成为可能。 其次,本文针对Web图像的低层视觉特征和高层语义特征之间的语义鸿沟问题,提出了一个Web图像自动加权标注模型:首先使用各种机器学习和统计技术学习从图像低层视觉特征到图像高层语义特征的映射模型;然后利用这个映射模型抽取图像的高层语义特征;最后根据Web图像文本信息和提取出的高层语义特征本身,使用词汇相似性计算技术度量抽取出的高层语义特征的质量。通过上述步骤可以将Web图像表示为带有权重的高层语义特征,同时也进一步将图像视觉信息和文本信息的融合转化为表达图像内容的高层语义特征和Web图像文本信息的融合。 接着,针对Web图像包含的文本信息和从图像视觉信息中提取的高层语义特征,提出了一种具有可扩展性的Web图像检索模型。为了充分利用Web文档中的文本信息和从Web图像低层视觉特征中抽取的高层语义特征,该模型构架在贝叶斯推理网上,利用推理网内在的多信息源融合能力,将Web图像文本特征和Web图像的高层语义特征无缝地融合在一起实现Web图像检索。 基于上述研究,本文设计并实现了一个Web图像检索原型系统,该系统充分利用Web图像的两类信息:从Web图像内容中提取高层语义特征,然后将它们与从Web图像文本信息中提取的文本特征融合在一起实现Web图像检索,研究结果验证了本文提出的模型在Web图像检索中的有效性。 文章最后对本文的研究工作进行了总结和展望。


知网文化
【相似文献】
中国期刊全文数据库 前20条
1 章新华,林良骥,王骥程;目标识别中信息融合的准则和方法[J];软件学报;1997年04期
2 袁南儿,杨东勇,林毅;多传感器信息融合及其在工业控制中的应用[J];浙江工业大学学报;1999年04期
3 何兵;基于分类及不确定墒的DS证据合成及判决方法[J];北京航空航天大学学报;2003年10期
4 陈俊风,景方,孙华;B样条模糊神经网络在信息融合中的应用[J];哈尔滨理工大学学报;2004年02期
5 张杰林,刘德长,曹代勇;基于信息融合的铀矿床遥感数据挖掘技术[J];世界核地质科学;2004年02期
6 梁志恒,杜庆东;应用多传感器融合技术的燃煤锅炉供热自动控制系统[J];工业锅炉;2004年06期
7 陈东,吴文华;模糊信息融合在电路故障诊断中的应用研究[J];工业仪表与自动化装置;2004年06期
8 许任洲,李训诰;基于距离的目标运动分析方法研究[J];仪器仪表用户;2005年01期
9 江红,张炎华,赵忠华;多传感器信息融合的时间不确定性[J];上海交通大学学报;2005年03期
10 吴宏岐;周妮娜;张正喜;;电气设备故障诊断中的信息融合技术研究[J];信息技术;2006年03期
11 汪永东;陈颖;;模糊证据理论及其在信息融合中的应用[J];工矿自动化;2006年05期
12 何友;薛培信;王国宏;;一种新的信息融合功能模型[J];海军航空工程学院学报;2008年03期
13 苏志东;;网络招生信息融合系统研究[J];黑龙江科技信息;2009年15期
14 宋婷;;传感器在农业采摘机器人中的应用[J];农机化研究;2009年05期
15 王军;王员云;;基于Rough集的多传感器信息融合[J];河池学院学报;2009年02期
16 钱进;;改进的联合Kalman滤波及其在组合导航中的应用[J];火力与指挥控制;2009年07期
17 张欣;薛伟敏;童法松;;旋转机械信息融合故障诊断方法及其发展状况[J];机电设备;2009年04期
18 申宇皓;孟晨;张磊;傅振华;;基于支持向量机的信息融合模拟电路故障诊断方法研究[J];计算机测量与控制;2009年11期
19 胡宝洁;范江涛;杨沛;轩健峰;;复杂电磁环境对组网雷达的影响研究[J];电子科技;2010年01期
20 赵欣;;D-S证据理论在机床故障诊断中的应用[J];工业控制计算机;2010年07期
中国重要会议论文全文数据库 前10条
1 郭丽珍;李晓奇;;基于三种模糊积分的分类器方法及其改进[A];第四届中国智能计算大会论文集[C];2010年
2 胡良梅;高隽;;信息融合技术[A];全国第十四届计算机科学及其在仪器仪表中的应用学术交流会论文集[C];2001年
3 钟京立;韩沂宁;;战术数据链信息融合模型研究[A];第十届中国科协年会信息化与社会发展学术讨论会分会场论文集[C];2008年
4 刘永安;程哲;徐保国;;信息融合的D-S证据理论综述[A];2007中国控制与决策学术年会论文集[C];2007年
5 杜奕;迟毅林;伍星;;信息融合在设备监测和故障诊断中的应用[A];第二十七届中国控制会议论文集[C];2008年
6 李维运;;多雷达目标信息融合的仿真研究[A];2008-2009年船舶通信导航论文集[C];2009年
7 顾晓波;许建中;肖泽龙;;BP神经网络在红外毫米波信息融合中的应用[A];2005'全国微波毫米波会议论文集(第二册)[C];2006年
8 李录平;邹新元;晋风华;黄树红;卢绪祥;;基于信息融合的旋转机械振动状态评价方法研究[A];第八届全国振动理论及应用学术会议论文集摘要[C];2003年
9 许任洲;李训诰;赖忠干;;被动声纳噪声信息的融合方法[A];2004年全国水声学学术会议论文集[C];2004年
10 罗贺;付超;季星;;基于DS证据理论的智能故障诊断方法[A];中国仪器仪表学会第九届青年学术会议论文集[C];2007年
中国博士学位论文全文数据库 前10条
1 黄鹏;基于文本和视觉信息融合的Web图像检索[D];浙江大学;2008年
2 吴振锋;基于磨粒分析和信息融合的发动机磨损故障诊断技术研究[D];南京航空航天大学;2002年
3 朱大奇;航空电子设备故障诊断技术研究[D];南京航空航天大学;2002年
4 吴世雄;逆向工程中多传感器集成的智能化测量研究[D];浙江大学;2005年
5 袁成清;磨损过程中的磨粒表面和磨损表面特征及其相互关系研究[D];武汉理工大学;2005年
6 王承;基于神经网络的模拟电路故障诊断方法研究[D];电子科技大学;2005年
7 李立京;电梯综合测试系统与故障诊断技术的研究[D];天津大学;2002年
8 张小俊;基于嗅觉信息的机器人味源定位策略及实验研究[D];河北工业大学;2009年
9 孔庆杰;信息融合理论及其在交通监控信息处理中的应用[D];上海交通大学;2010年
10 王志胜;信息融合估计理论及其在航天器控制中的应用研究[D];西北工业大学;2002年
中国硕士学位论文全文数据库 前10条
1 张西雅;基于信息融合的汽车防追尾避撞目标识别研究[D];郑州大学;2010年
2 郝彦彬;基于agent的信息融合与信息过滤机制的研究与实现[D];西北工业大学;2003年
3 许丽佳;组合导航系统中的信息融合研究[D];北京工业大学;2004年
4 孔李军;基于信息融合的粮情测控系统智能决策技术应用研究[D];河南工业大学;2010年
5 夏向阳;电力变压器故障在线监测与诊断系统[D];中南大学;2004年
6 张琳;机械故障诊断中神经网络与D-S推理的信息融合技术研究[D];燕山大学;2003年
7 吴太旗;组合导航多源信息融合方法研究及仿真[D];解放军信息工程大学;2004年
8 魏友华;信息融合在复杂油气储层物性参数研究中的应用[D];成都理工大学;2005年
9 张学敏;组合导航系统多级式融合算法研究[D];吉林大学;2005年
10 刘兆元;基于信息融合的大型电力变压器故障诊断[D];山东大学;2005年
中国重要报纸全文数据库 前10条
1 周新红 田朝晖 段勇;信息融合:现代战争的重要支撑[N];解放军报;2005年
2 许同和 徐德池;C4系统简介[N];解放军报;2005年
3 张军;具有复杂系统特征的运动目标多模多尺度自适应估计与辨识 获2006年国家自然科学基金重点项目[N];科技日报;2007年
4 翁佳焰;手机电视标准即将落地加速信息融合进程[N];通信信息报;2007年
5 李宽宽 苏小和;陈国青看企业信息化[N];经理日报;2006年
6 卓芝琴;免费杂志, 不仅是美丽[N];中华新闻报;2003年
7 段培超;管好系统的“线”[N];计算机世界;2006年
8 中国科学院自动化研究所模式识别国家重点实验室 周密陶建华;与电脑面谈[N];计算机世界;2007年
9 戈;通软联合GoCom5.0实现多通信方式协同[N];电脑商报;2007年
10 张建昌;依据信息革命的规律走跨越发展之路[N];解放军报;2002年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978