收藏本站
《浙江大学》 2007年
收藏 | 手机打开
二维码
手机客户端打开本文

基于相关性挖掘的跨媒体检索研究

张鸿  
【摘要】: 从九十年代初期开始,基于内容的多媒体检索一直是计算机领域的研究热点。认知心理学的研究表明人脑对外界事物的认知需要跨越不同感官传递的信息以作出综合的判断,类似地,人们对多媒体数据的检索需求是要能够灵活跨越不同类型的多媒体数据(如图像、音频等),以形成对多媒体语义的整体理解。这就需要有一种新的检索方式能够处理和查询不同类型的多媒体数据,本文的目的便是研究这种灵活跨越不同类型多媒体数据的检索方式——跨媒体检索。 针对图像、音频等多媒体数据在底层内容特征上的异构性和不可比性使得难以计算跨媒体相关性的现状,本文以典型相关性分析为突破点,研究了图像和音频在内容特征上潜在的统计关系,并且在特征降维的同时最大程度地保持了相关性学习结果,从而通过自定义的距离函数实现了跨媒体的相关性度量;还进一步提出了基于增量学习的相关反馈机制,从用户交互过程中提取先验知识,以修正图像和音频数据集在同构子空间中的拓扑结构,从而有效缩小了底层内容与高层语义之间的鸿沟,提高了跨媒体检索效率。 大量研究证明流形结构在多媒体数据表达方面可以发现非线性的数据关系,本文提出一个流形子空间讨算方法,用来模拟文本、图像和音频数据在语义空间上的分布关系。该方法通过计算多媒体数据的本征距离矩阵,在此基础上求取语义子空间的本征参数,从而得到内嵌的非线性的流形子空间作为语义子空间;同时给出了短期修正和长期修正两种策略用以结合相关反馈信息来更新流形结构。 针对Web环境中多媒体数据集之间特有的跨媒体数据关系,提出以Web页面中的多媒体对象为最小数据单元,建立跨媒体关联图用以综合表达在内容特征、链接关系和用户交互三方面的数据关系;提出全局相关性推理算法充分利用跨媒体关联图中各种数据关系之间的互补性,从而准确找到跨媒体的相关对象; 提出用隐性语义索引分析图像的视觉特征和音频的听觉特征之间的互索引关系,并通过交互式的相似度传递优化了图像和音频的聚类质量,设计了主动学习策略用以计算用户标注的反馈样本周围未标注样本的的条件概率,加速了图像和音频之间跨媒体检索的收敛过程,而且当查询例子不在数据库中时也能取得较好的检索性能。 在数据管理方面,针对多媒体资源数据量大、存储分散等特征,本文从信息共享这个基本问题出发,尝试将数字图书馆中海量、分布的多媒体数据资源用网格技术进行管理,给出了初步的技术方案和体系设计,以及仿真实验结果。
【学位授予单位】:浙江大学
【学位级别】:博士
【学位授予年份】:2007
【分类号】:TP391.3

手机知网App
【引证文献】
中国期刊全文数据库 前1条
1 宁建红;吴显勰;杨尚衡;;跨媒体检索研究[J];福建电脑;2013年04期
中国博士学位论文全文数据库 前1条
1 刘杰;食品安全突发事件跨媒体信息的语义分析与分类研究[D];北京邮电大学;2013年
中国硕士学位论文全文数据库 前1条
1 范雪峰;基于跨媒体特征向量的分类及多模态数据分析[D];吉林大学;2013年
【参考文献】
中国期刊全文数据库 前2条
1 苏中,张宏江,马少平;基于贝叶斯分类器的图像检索相关反馈算法[J];软件学报;2002年10期
2 王涛,胡事民,孙家广;基于颜色-空间特征的图像检索[J];软件学报;2002年10期
【共引文献】
中国期刊全文数据库 前10条
1 陈弋兰;;基于朴素贝叶斯分类的图像消噪[J];安庆师范学院学报(自然科学版);2008年03期
2 白晓明,石勤,尹宝才,苏世前;基于HSV空间的彩色边缘检测[J];北京工业大学学报;2004年04期
3 马乐;翁智生;罗军;;一种基于SVM的网页层次分类算法[J];北京师范大学学报(自然科学版);2009年03期
4 陈长江;侯进;;一种贝叶斯和支持向量机相结合的相关反馈策略[J];成都信息工程学院学报;2012年01期
5 郝博;王吉军;魏小鹏;魏昱宁;;基于心理测试图像模板的图像情感识别[J];大连大学学报;2008年03期
6 刘峰;龚健雅;;一种基于多特征的高光谱遥感图像分类方法[J];地理与地理信息科学;2009年03期
7 朱旭娟,李晓华,沈兰荪;一种自适应提取最优特征维的相关反馈算法[J];电路与系统学报;2004年01期
8 王李冬;;基于分块主色法的图像检索算法研究[J];电脑知识与技术;2008年21期
9 戴声扬,章毓晋;图像检索中的两层描述和非对称区域匹配[J];电子学报;2005年04期
10 许相莉;张利彪;刘向东;于哲舟;周春光;;基于粒子群的图像检索相关反馈算法[J];电子学报;2010年08期
中国重要会议论文全文数据库 前6条
1 ;Rapeseed Seeds Colour Recognition by Machine Vision[A];第二十七届中国控制会议论文集[C];2008年
2 洪清启;王备战;董槐林;张磊;陈兵;;一种改进的基于广义直方图的图像检索方法[A];第四届中国软件工程大会论文集[C];2007年
3 田艳艳;李大湘;齐敏;彭进业;;一种改进的彩色图像图文分割方法[A];全国第一届信号处理学术会议暨中国高科技产业化研究会信号处理分会筹备工作委员会第三次工作会议专刊[C];2007年
4 王艳娟;孙劲光;张志艳;崔彩峰;;综合颜色及空间特征的图像检索方法[A];全国第13届计算机辅助设计与图形学(CAD/CG)学术会议论文集[C];2004年
5 孙君顶;周利华;;基于颜色-空间特征的彩色图像检索方法[A];几何设计与计算的新进展[C];2005年
6 范自柱;;基于曲面拟合的图像检索方法[A];几何设计与计算的新进展[C];2005年
中国博士学位论文全文数据库 前10条
1 许相莉;基于智能计算的图像检索算法研究[D];吉林大学;2011年
2 薄一航;模拟人类视觉感知的行人图像显著结构的研究及应用[D];北京交通大学;2011年
3 黄传波;基于视觉感知和相关反馈机制的图像检索算法研究[D];南京理工大学;2011年
4 杜根远;海量遥感图像内容检索关键技术研究[D];成都理工大学;2011年
5 庄德文;高维仿生信息几何理论与应用研究[D];浙江工业大学;2010年
6 王琦;古代壁画的语义检索技术及应用研究[D];浙江大学;2011年
7 刘静波;蔬菜颜色质量评价系统的构建及应用研究[D];吉林大学;2004年
8 张爱华;基于模糊聚类分析的图像分割技术研究[D];华中科技大学;2004年
9 袁贞明;基于样例的空间数据检索技术研究[D];浙江大学;2005年
10 孙君顶;基于内容的图像检索技术研究[D];西安电子科技大学;2005年
中国硕士学位论文全文数据库 前10条
1 杨立志;基于语义网的图像检索算法的研究[D];广西师范学院;2010年
2 李翠;基于车辆自动识别的智能计重监控系统的研究与设计[D];郑州大学;2010年
3 于仕;基于颜色特征的图像检索技术研究[D];南昌大学;2010年
4 吴冬夏;基于小波分解和颜色信息熵的浮游生物图像识别技术研究[D];电子科技大学;2010年
5 李小宁;基于内容图像检索技术的商标比对系统[D];西安电子科技大学;2008年
6 黄晓莎;基于相关反馈的图像内容检索技术研究[D];沈阳工业大学;2011年
7 黄文;三维模型语义标注系统的设计与实现[D];西北大学;2011年
8 李帅豪;基于多特征的图像检索技术研究[D];湖北工业大学;2011年
9 葛帅;基于仿射不变性的环境减灾卫星影像特征提取与匹配[D];山东农业大学;2011年
10 陈重旭;基于分块加权—颜色特征的图像检索[D];吉林大学;2011年
【同被引文献】
中国期刊全文数据库 前10条
1 杨丹;李博;赵红;;鲁棒视觉词汇本的自适应构造与自然场景分类应用[J];电子与信息学报;2010年09期
2 胡正平;戎怡;;基于EILBP视觉描述子结合PLSA的场景分类算法[J];光电工程;2010年11期
3 张鸿;吴飞;庄越挺;;跨媒体相关性推理与检索研究[J];计算机研究与发展;2008年05期
4 路晶;马少平;;使用基于多例学习的启发式SVM算法的图像自动标注[J];计算机研究与发展;2009年05期
5 庄越挺,吴聪苗,吴飞,刘翔;多媒体交叉参照检索系统研究[J];计算机辅助设计与图形学学报;2005年04期
6 李志欣;施智平;刘曦;史忠植;;建模连续视觉特征的图像语义标注方法[J];计算机辅助设计与图形学学报;2010年08期
7 张鸿;吴飞;庄越挺;陈建勋;;一种基于内容相关性的跨媒体检索方法[J];计算机学报;2008年05期
8 曹娟;张勇东;李锦涛;唐胜;;一种基于密度的自适应最优LDA模型选择方法[J];计算机学报;2008年10期
9 徐戈;王厚峰;;自然语言处理中主题模型的发展[J];计算机学报;2011年08期
10 张军;李学斌;;一种基于DTW的孤立词语音识别算法[J];计算机仿真;2009年10期
中国博士学位论文全文数据库 前4条
1 徐昊;基于跨媒体信息和高效图像编码算法的图像搜索关键技术[D];中国科学技术大学;2011年
2 王科平;自动图像标注的关键技术研究[D];北京邮电大学;2011年
3 谭璐;高维数据的降维理论及应用[D];国防科学技术大学;2005年
4 刘亚楠;多模态特征融合和变量选择的视频语义理解[D];浙江大学;2010年
中国硕士学位论文全文数据库 前4条
1 丁爱明;基于MFCC和GMM的说话人识别系统研究[D];河海大学;2006年
2 单晗怀;跨媒体相似度机制研究和实现[D];浙江大学;2006年
3 孟凡炼;基于异构特征统计分析的跨媒体检索研究[D];武汉科技大学;2010年
4 张凯;基于跨媒体检索的网络报警的研究与实现[D];吉林大学;2012年
【二级参考文献】
中国期刊全文数据库 前1条
1 刘忠伟,章毓晋;利用局部累加直方图进行彩色图象检索[J];中国图象图形学报;1998年07期
【相似文献】
中国期刊全文数据库 前10条
1 肖建国;XmL和DAM技术跨媒体出版[J];今日印刷;2001年03期
2 ;什么是跨媒体[J];山东电子;2001年03期
3 蓝芳风;集团尝试跨媒体 首次参拍电视剧——《勇敢面对》即将播映[J];出版参考;2003年01期
4 王世蓉;;交流 合作 共赢——2007中国财经媒体高峰论坛侧记[J];中国报业;2007年05期
5 谢莹;;从“电视图书”看传媒融合对策[J];东南传播;2008年11期
6 黄立冬;;Flash教育资源文档的处理技术综述[J];中国教育信息化;2009年04期
7 丁红;;论汶川地震报道中的跨媒体联动[J];淮海工学院学报(社会科学版);2010年01期
8 林如鹏;跨媒体、跨地区、跨行业——中国媒介集团做大做强的必由之路[J];新闻大学;2002年04期
9 罗梅君,陈佑霖,张家玮;跨媒体彩色复杂影像再现品质效益评估模式—“空间滤波器”及“CIEDE2000色差公式”的结合应用(英文)[J];仪器仪表学报;2004年S3期
10 陈怡;封面链接[J];中国记者;2005年08期
中国重要会议论文全文数据库 前10条
1 郭之文;;跨媒体科学传播初探[A];第十一届中国科协年会第33分会场新媒体与科技传播研讨会论文集[C];2009年
2 ;天映频道[A];卫星直播与接收系统(机顶盒)应用研讨会资料汇编[C];2005年
3 万晓霞;李凌宵;;图像传播科技的发展趋势[A];第2届北京印刷技术与印刷教育研讨会论文集[C];2004年
4 张吉录;张震一;;约会春天[A];中国印刷业数字化发展策略论坛论文集[C];2005年
5 林金玲;罗梅君;;平行处理技术运用于跨媒体原色重现之研究[A];传统色彩与现代应用——海峡两岸传统色彩与现代应用学术研讨会论文集[C];2010年
6 张凤辉;;媒介价值链延伸研究[A];第五届河北省社会科学学术年会论文专辑[C];2010年
7 施水才;肖诗斌;都云程;王洪俊;;TRS中文信息检索技术的发展(摘要)[A];中文信息处理前沿进展——中国中文信息学会二十五周年学术会议论文集[C];2006年
8 毛伟众;;报业网站架构若干概念与实践[A];中国新闻技术工作者联合会五届一次理事会暨学术年会论文集(上篇)[C];2009年
9 王强;陈浩杰;李文毅;;排版软件的智能化发展[A];第2届北京印刷技术与印刷教育研讨会论文集[C];2004年
10 喻国明;;过剩时代,如何抢占传媒竞争的制高点[A];和而不同——全球化视野中的影视新格局——第三届中国影视高层论坛论文集[C];2004年
中国重要报纸全文数据库 前10条
1 李希光;媒体的融合与跨媒体记者[N];中华新闻报;2001年
2 本报记者 王政;跨媒体:阳光何时灿烂[N];中国电子报;2001年
3 刘小如;跨媒体数字直播带来新模式[N];中国计算机报;2003年
4 本报记者 李广宇;跨媒体是网站未来发展方向吗?[N];通信信息报;2001年
5 本报记者 海澜;腾讯与SMG开启跨媒体联姻[N];中国证券报;2011年
6 谭颖敏;跨媒体模式成功 做文化科技产业龙头[N];中国高新技术产业导报;2004年
7 钱;时代经济社推跨媒体图书[N];中国图书商报;2008年
8 本报记者 曾革楠;齐学进:抢占高端 扩大亮点 拓展品牌[N];中国新闻出版报;2009年
9 郝 静;跨媒体环境中的出版新思路[N];中华新闻报;2004年
10 本报记者 李小兵;杨国猛:TOM将坚持跨媒体寻找“赢的机会”[N];上海证券报;2008年
中国博士学位论文全文数据库 前4条
1 商建辉;竞争活力与规模经济[D];中国传媒大学;2007年
2 徐沁;泛媒体时代的生存法则—论媒介融合[D];浙江大学;2008年
3 徐昊;基于跨媒体信息和高效图像编码算法的图像搜索关键技术[D];中国科学技术大学;2011年
4 马德永;国际传媒集团的成长与变革[D];复旦大学;2011年
中国硕士学位论文全文数据库 前10条
1 宋黎黎;时代华纳[D];北京印刷学院;2003年
2 吴志明;我国传媒跨行业、跨媒体、跨区域发展研究[D];武汉大学;2005年
3 金泽;从《体坛周报》看体育类报纸发展[D];四川大学;2005年
4 洪晓燕;由“第一财经”看我国跨媒体财经传媒之品牌构建[D];汕头大学;2008年
5 蒋益秀;新闻信息的跨媒体传播研究[D];中国社会科学院研究生院;2002年
6 吴惇;从笔墨到光影[D];暨南大学;2006年
7 许向阳;基于CIECAM02平台的图像色域映射算法的研究[D];南京林业大学;2008年
8 高捷;新形势下提升报业核心竞争力探讨[D];厦门大学;2007年
9 范雪峰;基于跨媒体特征向量的分类及多模态数据分析[D];吉林大学;2013年
10 孟凡炼;基于异构特征统计分析的跨媒体检索研究[D];武汉科技大学;2010年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026