收藏本站
《华中科技大学》 2011年
收藏 | 手机打开
二维码
手机客户端打开本文

视频内容组织与索引技术研究

何云峰  
【摘要】:面对网络中呈爆炸性增长的视频数据,如何从这些非结构化的数据中找到感兴趣的视频片段成为一种迫切的需求,由此而引发了基于内容视频检索(CBVR)技术的研究热潮。在CBVR中,检索的对象并不是视频对象本身,而是视频的“内容”描述数据。国际标准MPEG-7对视频内容的描述进行了规范化,为视频描述数据的传输与交换提供了便利。然而,由于视频数据的复杂性和多样性,视频描述数据中包含了多类文本语义信息和高维的低层特征信息,如何有效地组织和管理视频内容的描述数据以满足检索的需求成为CBVR重要的研究内容和挑战。在此背景下,提出一种通用的视频描述数据组织模型以及针对低层特征数据的索引方法。 为了满足视频检索的要求,在MPEG-7标准的基础上,提出了一种通用的视频组织模型。该组织模型以视频、情节、场景和镜头形成的视频内容单元层次结构为基础,将视频描述数据分类管理,其中视频、情节只包含文本信息,而低层特征信息只出现在场景和镜头中。在视频组织模型的基础上,提出一种视频检索对象模型和通用的视频检索框架。视频检索对象模型以视频内容单元为检索对象,将其文本属性和低层特征属性分离,并在视频检索框架中对这两类数据分别建立索引,以满足基于关键字检索和基于样例检索的需要。 在视频内容的生成与管理框架中,视频内容描述信息存储在视频描述数据库中,视频描述数据库采用支持XML的关系数据库。处理视频数据时,通过对相关MPEG-7文档的解析,将已经生成的视频描述信息存入视频描述数据库,其中适用于检索的描述信息,包括结构信息、特征信息和语义信息存储到相应的表中,其他的描述信息则以XML片段的方式存储。经过特征提取、视频内容分析等过程生成相关MPEG-7文档中不存在的且适用于检索的描述信息,并存储在数据库的表中。 为了满足基于样例的视频检索中,对样例的特征以及对应的权值进行自定义的需求,提出了一种面向可变权值的多特征索引树MFI-Tree结构及其相应的ADD-kNN检索算法。MFI-Tree采用适应于浏览的树型结构,通过多特征相似度距离模型对描述视频内容的多个特征向量进行索引。索引结构的建立依赖于数据集合的分裂,MFI-Tree在分裂时通过距离阈值动态确定子集合的数目,并且采用虚拟对象使得子集覆盖半径最小化,从而获得重叠区域较小的多个子集。在检索时,直接遍历索引结构的最底层集合节点而不是通过树型结构遍历,避免高维度对检索效率的影响。ADD-kNN检索算法针对多特征检索的特点,在遍历时通过对确定需要计算的数据子集先进行相似度计算的方法,更早更快地降低用于过滤的判断值,从而提高检索的效率。实验结果表明,索引结构MFI-Tree和ADD-kNN检索算法是有效的。 视频分析是视频检索的基础,原型系统AnyVideoStudio实现了多类低层特征提取和结构分析方法生成MPEG-7文档的过程。为了解决样例获取困难导致用户难于描述检索需求的问题,设计了一种基于图像样例的视频检索人机交互接口。在人机交互接口中,增加了图像处理模块,该模块可以加载本地或者数据库中的图像,然后通过图像剪切、拼接等操作形成样例图像进行检索。这种人机交互方式能够辅助用户更好地描述检索需求,提高检索效率。 基于内容的视频检索需要研究的问题还很多。在视频内容的描述方面,现有的低层特征种类繁多而且大多维度较高,如何找到适合于视频检索的低层特征仍然是未来一个重要的研究方向。在视频结构分析方面,视频镜头检测技术相对成熟,但在场景聚类等涉及语义内容分析的部分,由于“语义鸿沟”的存在,目前只能结合领域知识,对特定的视频进行处理。在索引结构方面,目前的特征结构仍然不能满足视频搜索引擎对检索时间的要求,必须有效地降低特征的维度,进一步减少检索过程中距离计算和结果排序开销,提高检索的效率。此外,在视频检索的人机接口方面还需要更加方便有效的手段辅助用户描述检索需求。
【学位授予单位】:华中科技大学
【学位级别】:博士
【学位授予年份】:2011
【分类号】:TP391.41

手机知网App
【参考文献】
中国期刊全文数据库 前2条
1 章毓晋,陆海斌;视频分层组织方案和技术[J];中国工程科学;2000年03期
2 张静;俞辉;;一种多模态信息融合的视频检索模型[J];计算机应用;2008年01期
【共引文献】
中国期刊全文数据库 前10条
1 韩强;;基于广义Hough变换的手写文档整词定位[J];安徽电子信息职业技术学院学报;2011年05期
2 程刚;郑小华;阳锋;徐祖舰;;三维全景视觉技术在农业机器人中的应用[J];安徽农业科学;2010年34期
3 何海燕;施培蓓;;基于改进AdaBoost算法的行人检测方法[J];安庆师范学院学报(自然科学版);2009年03期
4 吴慧兰;刘国栋;刘炳国;胡涛;浦昭邦;;ICF实验靶定位技术研究[J];半导体光电;2008年05期
5 陈京;袁保宗;刘渭滨;;多视点标定图像的交替迭代度量重建方法[J];北京交通大学学报;2012年02期
6 周峰;刘辉;李超峰;;SIFT算法在图像配准中的应用[J];办公自动化;2009年22期
7 刘彬;叶丽娜;;一种基于SIFT特征的序列图像拼接算法[J];兵工自动化;2009年06期
8 刘焕敏;王华;段慧芬;;一种改进的SIFT双向匹配算法[J];兵工自动化;2009年06期
9 彭勃;周文晖;刘济林;;基于Harris角点检测的立体视觉里程计[J];兵工学报;2007年12期
10 陈冰;赵亦工;李欣;;基于高斯尺度空间的末制导目标跟踪方法[J];兵工学报;2009年05期
中国重要会议论文全文数据库 前10条
1 刘善磊;张亮;;基于相位相关和SURF算法的关键帧实时匹配研究[A];江苏省测绘学会2011年学术年会论文集[C];2011年
2 隋树林;孙立宏;姚文龙;袁健;;融合改进UKF/SIFT信息的自主光学导航方法[A];第二十六届中国控制会议论文集[C];2007年
3 汪力;叶桦;夏良正;;利用特征点定位嘴巴[A];第二十六届中国控制会议论文集[C];2007年
4 ;Loop-closing By Using SIFT Features for Mobile Robots[A];第二十六届中国控制会议论文集[C];2007年
5 周凯;范瑞霞;李位星;;一种基于SIFT的MeanShift-粒子滤波融合跟踪算法[A];第二十九届中国控制会议论文集[C];2010年
6 ;Rapid Target Recognition and Tracking under Large Scale Variation Using Semi-Naive Bayesian[A];第二十九届中国控制会议论文集[C];2010年
7 ;A High-level Image Sequence Fusion Algorithm for Human Detection[A];第二十九届中国控制会议论文集[C];2010年
8 邹丽晖;陈杰;张娟;窦丽华;;一种基于时空域流形的视频序列图像拼接算法[A];第二十九届中国控制会议论文集[C];2010年
9 ;Machine Vision Based Flotation Froth Mobility Analysis[A];第二十九届中国控制会议论文集[C];2010年
10 孙明竹;赵新;程小燕;孙程;卢桂章;;面向复杂作业的微操作机器人关键技术研究[A];第二十九届中国控制会议论文集[C];2010年
中国博士学位论文全文数据库 前10条
1 王玉全;基于全景视觉的移动机器人同时定位与地图创建方法研究[D];哈尔滨工程大学;2010年
2 张泽宝;空间数据库的索引技术研究[D];哈尔滨工程大学;2009年
3 梁洪;基于内容的医学图像检索及语义建模关键技术研究[D];哈尔滨工程大学;2010年
4 任桢;图像分类任务的关键技术研究[D];哈尔滨工程大学;2010年
5 孔凡芝;引线键合视觉检测关键技术研究[D];哈尔滨工程大学;2009年
6 王作为;具有认知能力的智能机器人行为学习方法研究[D];哈尔滨工程大学;2010年
7 肖洁;视觉注意模型及其在目标感知中的应用研究[D];华中科技大学;2010年
8 朱清波;序列图像三维重建方法研究[D];华中科技大学;2010年
9 田文;多视图图像的快速三维场景重建[D];华中科技大学;2010年
10 涂虬;智能视觉监视中目标检测与跟踪算法研究[D];华中科技大学;2010年
中国硕士学位论文全文数据库 前10条
1 宋抗;压缩机活塞圆度误差数字检测系统研究[D];河南理工大学;2010年
2 陈忠翔;基于立体视觉的三维重建方法研究[D];南昌航空大学;2010年
3 雒燕飞;地质灾害应急地理信息数据库设计及其应用[D];山东科技大学;2010年
4 唐红梅;基于辐射与空间信息的遥感图像检索[D];山东科技大学;2010年
5 倪希亮;基于尺度不变特征的多源遥感影像配准[D];山东科技大学;2010年
6 贾伟洁;SAR影像与光学影像配准研究[D];山东科技大学;2010年
7 任天宇;自稳定航拍系统算法与设计[D];长春理工大学;2010年
8 李跃;三维运动估计在织物动态仿真中的应用[D];浙江理工大学;2010年
9 娄铮铮;sIB算法在图像无监督分类中的应用研究[D];郑州大学;2010年
10 王博;全景视觉智能移动机器人固有环境定位[D];哈尔滨工程大学;2010年
【相似文献】
中国期刊全文数据库 前10条
1 何芳;;应用Video for Windows进行视频捕捉的开发[J];电脑与电信;2006年09期
2 罗一平;;视频技术实验室建设与实验改革探索[J];实验技术与管理;2008年06期
3 胡瑞敏;牟晓弦;李明;;面向视频监控的视频编解码技术[J];电视技术;2008年05期
4 ;视频技术[J];电子科技文摘;2001年11期
5 ;视频技术[J];电子科技文摘;2006年04期
6 ;广播与电视 视频技术[J];电子科技文摘;2006年10期
7 ;茁壮网络携手美国ICTV推进主动视频在亚太区的运营[J];中国有线电视;2008年04期
8 齐振国;;基于视频案例的教学研究[J];中国电化教育;2009年06期
9 孙磊;;多媒体视频信息处理的研究[J];科技信息;2010年24期
10 曾志;曾苏强;;基于网络视频的教育传播效果优化研究[J];贺州学院学报;2012年03期
中国重要会议论文全文数据库 前10条
1 潘伟;龙华;刘云;许瑞琛;;基于无线技术的农业视频管理系统的设计[A];2009年研究生学术交流会通信与信息技术论文集[C];2009年
2 邱林;李强;;视频行为分析在建筑节能应用中的探讨[A];中国自动化学会控制理论专业委员会C卷[C];2011年
3 童世和;;视频技术数字化与重庆电视台的技术建设[A];全国广播电影电视系统首届中青年优秀科技论文集[C];2001年
4 彭妙颜;;信息化音视频技术的发展及其在教学领域中的应用[A];全国高等学校电子技术研究会论文集[C];2010年
5 鲁寅辉;;基于开源软件的校园网络视频平台设计与实现[A];中国高等教育学会教育信息化分会第十二次学术年会论文集[C];2014年
6 毛拥华;;跨跃视讯业务接入屏障—视频流穿透防火墙/NAT接入技术研究[A];中国通信学会信息通信网络技术委员会2003年年会论文集[C];2003年
7 杨晓燕;盛磊;;视频监控指挥系统在钢铁企业保卫工作中的应用[A];自动化技术与冶金流程节能减排——全国冶金自动化信息网2008年会论文集[C];2008年
8 郑福泽;高洪歌;吴杰伟;赵会群;;视频技术在乒乓球比赛技战术分析中的应用研究[A];第十二届全国图象图形学学术会议论文集[C];2005年
9 薛富善;;视频技术在呼吸道管理中的应用进展[A];2008年中华医学会全国麻醉学术年会论文汇编[C];2008年
10 杨震勇;;视频监控存储技术的应用[A];天津市电视技术研究会2010年年会论文集[C];2010年
中国重要报纸全文数据库 前10条
1 本报记者  陈铖;网络视频的“危”与“机”[N];通信信息报;2007年
2 见习记者 李雪昆;网络视频将进入快速发展期[N];中国新闻出版报;2007年
3 沈建苗 编译 许磊;让视频为企业所用[N];计算机世界;2010年
4 本报记者 薛娟;视频云的蓝海生意[N];中国经济时报;2012年
5 记者 梁杰;视频技术人才走俏[N];人才市场报;2007年
6 崔西;网络视频渐热 市场规模激增[N];中国文化报;2009年
7 ;可搜索的视频:又一座金矿[N];网络世界;2010年
8 本报记者 齐洁;CC视频 企业视频商业化[N];中国经营报;2011年
9 中国科学院院士 中国工程院院士 李德仁;视频技术在智慧城市中的应用[N];中国信息化周报;2013年
10 阿清;2007 数码舞动视频[N];中国证券报;2007年
中国博士学位论文全文数据库 前6条
1 何云峰;视频内容组织与索引技术研究[D];华中科技大学;2011年
2 章国锋;视频场景的重建与增强处理[D];浙江大学;2009年
3 何军;LTE核心网络中协作式视频缓存研究[D];中国科学技术大学;2013年
4 商飞;面向大型科学仪器网络实验室的视觉视频关键技术研究与应用[D];吉林大学;2009年
5 蔡利梅;基于视频的煤矿井下人员目标检测与跟踪研究[D];中国矿业大学;2010年
6 郭眈;中文互联网视频搜索引擎系统策略研究[D];北京交通大学;2012年
中国硕士学位论文全文数据库 前10条
1 王刚;视频混合编辑技术在击剑训练视频处理分析中的研究与应用[D];中国海洋大学;2011年
2 陈果;大学生群体对网络视频发展趋势的影响研究[D];浙江师范大学;2012年
3 杨晖;视频融合分析与语义理解[D];浙江大学;2006年
4 汪澄澄;基于视频内容的体育领域元数据提取技术研究与实现[D];东华大学;2011年
5 苗耀锋;基于音频分析的足球视频摘要系统分析研究[D];西北大学;2010年
6 彭健;交互式视频技术研究与实现[D];电子科技大学;2012年
7 李雪;中国视频网站盈利模式优化研究[D];湖南大学;2008年
8 李学朝;基于内容的体育视频描述、管理和浏览研究与实现[D];中国科学院研究生院(计算技术研究所);2003年
9 沈江;面向家庭视频的视频摘要技术的研究[D];浙江大学;2002年
10 毛一强;面向足球比赛的视频摘要生成技术研究[D];浙江大学;2007年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026