收藏本站
《北京交通大学》 2010年
收藏 | 手机打开
二维码
手机客户端打开本文

基于信息融合的多媒体内容搜索

韦世奎  
【摘要】: 基于内容的多媒体检索的目标是从海量的多媒体数据中快速、准确地返回符合用户需求的多媒体内容。当前,主流的多媒体搜索方法都是以特征为导向的,这些方法通过度量特定多媒体特征之间的相似度来评估多媒体内容和用户需求的相关程度。然而,由于多媒体内容的丰富性以及多媒体低层特征与用户高层语义之间存在的“语义鸿沟”,使用单一的媒体特征很难取得理想的搜索效果。为此,有必要寻找一些方法来有效地融合多媒体各方面信息以弥补这个“语义鸿沟”,进而增强对多媒体信息的搜索能力。本文对当前多媒体搜索系统中存在的一些问题进行了深入的研究,并试图从多媒体内容分析及融合的角度加以解决。本文取得如下创新成果: 1.提出了基于多视角协同学习的交互式多媒体搜索方法。该方法将多视角学习(Multi-View Learning)的思想引入到交互式搜索中,通过多个视角的交叉学习来自动地挖掘正例样本以增加反馈信息。此方法是一种半监督的交互式搜索方法,只需要用户标注有限几个正例样本就可以启动这一自推断机制来自动增加反馈信息。实验结果表明,相比于其它交互式方法,本方法在大大减轻用户标注负担的情况下,取得了更高的平均搜索精度,特别是提高了排在前半部分搜索结果的精度。 2.提出基于多模态信息融合的视频重排序方法。该方法充分考虑到用户在实际搜索过程中只检查前几个返回结果这一行为特性,通过交叉利用多个模态空间的信息来重新排列传统多媒体搜索引擎返回的结果,以期将最相关的结果排在最前面。实验结果表明,该方法能够有效地提高排在最前列返回结果的精度,特别是前30个返回结果的精度。 3.提出了基于语义关联信息融合的高层概念检测方法。该方法从本体论的观点来建立概念与概念之间的语义关联,并将这些关联信息融合到单独概念的概念检测之中,以期提高单独概念检测器的检测精度。实验结果表明,对于那些可以找到关联概念的特定概念,其检测器在融合了关联语义信息后,检测准确度比传统的检测器有了明显的提高。 4.提出了基于帧融合的拷贝检测方法。该方法将视频拷贝检测问题转化为隐马尔可夫解码问题(HMM Decoding Problem),通过精心地设计HMM中的状态间转移约束及状态和观察间转移约束来松弛传统检测方法中使用的严格时间一致性条件,以期抵抗各种复杂的视频变化。此外,一个间隙约束也被引入到拷贝检测中,以便于灵活地判断拷贝起始和终止位置。此方法将这三个约束条件融合到一个Viterbi-Like的算法中,使得可以灵活高效地处理长视频流中的拷贝检测问题。实验结果表明,此方法不但可以克服传统拷贝检测中不能检测长视频流的问题,还可以有效地抵抗各种复杂的视频变化,并取得了较高的拷贝定位精度及源视频片段定位精度。此方法使得挖掘长视频数据之间的语义关联信息成为可能。
【学位授予单位】:北京交通大学
【学位级别】:博士
【学位授予年份】:2010
【分类号】:TP391.3

手机知网App
【共引文献】
中国期刊全文数据库 前10条
1 韩强;;基于广义Hough变换的手写文档整词定位[J];安徽电子信息职业技术学院学报;2011年05期
2 程刚;郑小华;阳锋;徐祖舰;;三维全景视觉技术在农业机器人中的应用[J];安徽农业科学;2010年34期
3 何海燕;施培蓓;;基于改进AdaBoost算法的行人检测方法[J];安庆师范学院学报(自然科学版);2009年03期
4 吴慧兰;刘国栋;刘炳国;胡涛;浦昭邦;;ICF实验靶定位技术研究[J];半导体光电;2008年05期
5 陈京;袁保宗;刘渭滨;;多视点标定图像的交替迭代度量重建方法[J];北京交通大学学报;2012年02期
6 周峰;刘辉;李超峰;;SIFT算法在图像配准中的应用[J];办公自动化;2009年22期
7 刘彬;叶丽娜;;一种基于SIFT特征的序列图像拼接算法[J];兵工自动化;2009年06期
8 刘焕敏;王华;段慧芬;;一种改进的SIFT双向匹配算法[J];兵工自动化;2009年06期
9 彭勃;周文晖;刘济林;;基于Harris角点检测的立体视觉里程计[J];兵工学报;2007年12期
10 陈冰;赵亦工;李欣;;基于高斯尺度空间的末制导目标跟踪方法[J];兵工学报;2009年05期
中国重要会议论文全文数据库 前10条
1 刘善磊;张亮;;基于相位相关和SURF算法的关键帧实时匹配研究[A];江苏省测绘学会2011年学术年会论文集[C];2011年
2 隋树林;孙立宏;姚文龙;袁健;;融合改进UKF/SIFT信息的自主光学导航方法[A];第二十六届中国控制会议论文集[C];2007年
3 汪力;叶桦;夏良正;;利用特征点定位嘴巴[A];第二十六届中国控制会议论文集[C];2007年
4 ;Loop-closing By Using SIFT Features for Mobile Robots[A];第二十六届中国控制会议论文集[C];2007年
5 周凯;范瑞霞;李位星;;一种基于SIFT的MeanShift-粒子滤波融合跟踪算法[A];第二十九届中国控制会议论文集[C];2010年
6 ;Rapid Target Recognition and Tracking under Large Scale Variation Using Semi-Naive Bayesian[A];第二十九届中国控制会议论文集[C];2010年
7 ;A High-level Image Sequence Fusion Algorithm for Human Detection[A];第二十九届中国控制会议论文集[C];2010年
8 邹丽晖;陈杰;张娟;窦丽华;;一种基于时空域流形的视频序列图像拼接算法[A];第二十九届中国控制会议论文集[C];2010年
9 ;Machine Vision Based Flotation Froth Mobility Analysis[A];第二十九届中国控制会议论文集[C];2010年
10 孙明竹;赵新;程小燕;孙程;卢桂章;;面向复杂作业的微操作机器人关键技术研究[A];第二十九届中国控制会议论文集[C];2010年
中国博士学位论文全文数据库 前10条
1 王玉全;基于全景视觉的移动机器人同时定位与地图创建方法研究[D];哈尔滨工程大学;2010年
2 梁洪;基于内容的医学图像检索及语义建模关键技术研究[D];哈尔滨工程大学;2010年
3 任桢;图像分类任务的关键技术研究[D];哈尔滨工程大学;2010年
4 孔凡芝;引线键合视觉检测关键技术研究[D];哈尔滨工程大学;2009年
5 王作为;具有认知能力的智能机器人行为学习方法研究[D];哈尔滨工程大学;2010年
6 肖洁;视觉注意模型及其在目标感知中的应用研究[D];华中科技大学;2010年
7 朱清波;序列图像三维重建方法研究[D];华中科技大学;2010年
8 田文;多视图图像的快速三维场景重建[D];华中科技大学;2010年
9 涂虬;智能视觉监视中目标检测与跟踪算法研究[D];华中科技大学;2010年
10 章鹏;多尺度特征检测:方法和应用研究[D];中国科学技术大学;2010年
中国硕士学位论文全文数据库 前10条
1 宋抗;压缩机活塞圆度误差数字检测系统研究[D];河南理工大学;2010年
2 陈忠翔;基于立体视觉的三维重建方法研究[D];南昌航空大学;2010年
3 雒燕飞;地质灾害应急地理信息数据库设计及其应用[D];山东科技大学;2010年
4 唐红梅;基于辐射与空间信息的遥感图像检索[D];山东科技大学;2010年
5 倪希亮;基于尺度不变特征的多源遥感影像配准[D];山东科技大学;2010年
6 贾伟洁;SAR影像与光学影像配准研究[D];山东科技大学;2010年
7 任天宇;自稳定航拍系统算法与设计[D];长春理工大学;2010年
8 韩宁;鲁棒性图像水印算法研究[D];辽宁师范大学;2010年
9 李光;基于均值偏移的视频目标跟踪、检测算法研究及系统实现[D];浙江理工大学;2010年
10 李跃;三维运动估计在织物动态仿真中的应用[D];浙江理工大学;2010年
【相似文献】
中国期刊全文数据库 前10条
1 区仲荣;傅惠南;夏继盛;;纳米操作加工过程定位检测问题研究[J];机电工程技术;2006年09期
2 胡玉才;雷洋;;数字电视机顶盒检测信息解析及应用[J];中国有线电视;2007年18期
3 李小兰;多媒体技术的现状与发展趋势[J];电视字幕.特技与动画;1994年01期
4 李慕兰,郝英英;多媒体技术领域最新进展[J];津图学刊;1994年02期
5 芮文新;多媒体与图书馆[J];情报资料工作;1995年01期
6 徐光祐,巴林凤;网络为中心的计算与多媒体技术的发展[J];多媒体世界;1996年04期
7 马义德 ,罗长印 ,方建晖;多媒体技术讲座(二)[J];家庭电子;1997年04期
8 金振坤;;论开放教育多媒体网络传播[J];湖北电大学刊;1997年03期
9 彭涛;多媒体技术的发展与对策[J];统计与信息论坛;1998年02期
10 梁露;多媒体技术对商业企业经营管理的影响[J];市场与电脑;1999年05期
中国重要会议论文全文数据库 前10条
1 胡天文;陶杰;周庆芳;;多媒体技术在物理实验教学中的应用[A];信息技术环境构建与教学应用[C];2009年
2 李倩;;浅谈多媒体技术在数学教学中的应用效果[A];国家教师科研基金“十一五”成果集(中国名校卷)(五)[C];2009年
3 周巍;赵瑞云;刘国亭;;多媒体技术在医学教育和管理中的应用[A];海峡两岸医疗仪器学术会议论文集[C];1995年
4 冉茂平;;浅谈多媒体技术在大学教学中的运用[A];土木建筑教育改革理论与实践(第12卷)[C];2010年
5 李效义;童学红;;多媒体技术在医学生理学教学中的应用[A];中国生理学会第21届全国代表大会暨学术会议论文摘要汇编[C];2002年
6 林榕;林雪松;;多媒体技术对物理创造性思维的培养[A];第十五次全国原子、原子核物理研讨会暨全国近代物理研究会第八届年会论文集[C];2004年
7 杨玲;;小学语文教学思想和观念的转变——在阅读教学中运用多媒体技术[A];中国教育技术协会2004年年会论文集[C];2004年
8 杨焱;王玉洁;刘莹莹;刘艳红;;多媒体计算机辅助教学的认识与思考[A];都市型高等农业教育教学改革论文专辑[C];2007年
9 林浩;;多媒体课件在体育教学中的作用[A];国家教师科研基金十一五阶段性成果集(江苏卷)[C];2010年
10 辛艺华;;电脑创意编排的多媒体技术运用实验[A];西部大开发 科教先行与可持续发展——中国科协2000年学术年会文集[C];2000年
中国重要报纸全文数据库 前10条
1 沈茂森;多媒体技术与初中化学[N];甘肃日报;2008年
2 夏贵荣 李忠 钱婕靓;中国湿地博物馆多媒体技术的应用[N];中国文物报;2010年
3 记者 梁晓亮;我国多媒体技术角逐国际标准[N];经济日报;2002年
4 南京市民生实验小学 蒋波;多媒体技术和语文阅读教学整合策略初探[N];成才导报.教育周刊;2007年
5 上海市七宝中学教师 李贺;多媒体技术在美术欣赏课的应用[N];上海科技报;2008年
6 白银市平川区靖电学校 赵凤琳;多媒体技术与英语课堂教学[N];甘肃日报;2009年
7 山东省邹平县黄山中学 辛丹;多媒体技术在课堂教学应用中存在的问题与应对策略[N];学知报;2010年
8 本报记者;海信TCL长虹结成多媒体技术联盟[N];青岛日报;2011年
9 山东省垦利县实验中学 高振卿;浅谈多媒体在教学中的作用[N];学知报;2011年
10 胡英;英特图3D唯我乐园[N];计算机世界;2006年
中国博士学位论文全文数据库 前10条
1 韦世奎;基于信息融合的多媒体内容搜索[D];北京交通大学;2010年
2 田新梅;基于内容的图像搜索重排序研究[D];中国科学技术大学;2010年
3 刘媛;视频搜索结果的重排序研究[D];中国科学技术大学;2009年
4 肖友能;网络电视中的关键技术研究[D];复旦大学;2005年
5 朱磊;基于自适应邻域概念的视频图像处理技术研究[D];中国科学技术大学;2007年
6 许治华;抗几何攻击的图像拷贝检测算法研究[D];华中科技大学;2010年
7 杨小军;基于粒子滤波的混合估计理论与应用[D];西北工业大学;2006年
8 吴斌;H.264解码关键算法的VLSI实现研究[D];吉林大学;2008年
9 袁俊;异构多连接系统面向QoS保障的关键技术研究[D];北京邮电大学;2011年
10 张剑寅;Web服务冲突动态检测和解决方法的研究[D];北京邮电大学;2007年
中国硕士学位论文全文数据库 前10条
1 廖继承;基于Java与多媒体技术的外语教学系统[D];大连理工大学;2003年
2 王铁枫;多媒体技术对发展学生空间想象能力的实验研究[D];东北师范大学;2007年
3 郝瑛;多媒体在高中英语教学中的应用和影响[D];内蒙古师范大学;2007年
4 王薇;多媒体任务型词汇教学在高职英语课堂中的运用[D];湖南大学;2009年
5 孙英梅;基于多媒体教学的中等职业教育研究[D];山东师范大学;2009年
6 卢倩;多媒体技术在中专基础化学课堂教学中适时应用的研究[D];首都师范大学;2005年
7 李阳;基于多媒体技术平台的继电保护培训系统的研究与开发[D];山东大学;2005年
8 张磊;多媒体技术在高校体育教学中应用的研究[D];四川大学;2005年
9 李春霞;多媒体技术在高中生物实验教学中的应用研究[D];西北师范大学;2005年
10 黄春蕾;高职院校商务英语教学[D];福建师范大学;2005年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026