收藏本站
《北京邮电大学》 2011年
收藏 | 手机打开
二维码
手机客户端打开本文

基于内容的视频分析关键技术

高赞  
【摘要】:随着计算机和通信技术、宽带网络技术、音视频压缩技术以及计算机硬件技术的发展,数字视频也越来越广泛地融入于人们的生活中。由于视频数据自身内容的丰富性和多样性、结构的复杂性以及具有时空多维结构性,如何有效地对这些视频数据进行组织、表达、存储和管理,以便人们快速地浏览和检索,成为一个亟待解决的重大课题。传统的数据管理与检索技术已远不能适应这种急速的变化和需求,因此基于内容的视频检索(CBVR)应运而生,相关的研究迅速在各研究机构展开。同时,随着网络摄像头的普及以及人们安全意识的提高,对于视频监控以及监控视频的智能分析的需求也越来越迫切。 目前,虽然CBVR和监控视频的智能分析在多个方面取得了长足的进步,但是视频中语义对象的提取、检索、视频的智能分析等仍存在较大的问题。本论文围绕基于内容的视频分析与检索中的难点—高层语义提取问题,从底层特征描述、语义对象提取、评估协议、事件检测、医疗设备使用监督等方面进行了研究,提出了一些新的算法和框架,主要贡献如下: 在视觉底层特征方面,对大规模数据中视觉底层特征在高层语义提取上的性能进行了全面评估,并提出了ML-SIFT特征提取算法。如何从众多的底层特征中选择出好的特征以更好地描述视频,决定了视频高层语义提取的性能。因此,本章在TRECVID2009大规模数据集上,通过实验对目前在高层语义提取中广泛使用的基于关键点、纹理、边缘、颜色信息的多种类型的视觉底层特征进行了全面的性能评估,其结果对高层语义提取中的特征选择是很有价值的参考。在本章中,我们还针对在高层语义提取中表现最好的关键点特征,提出了一种ML-SIFT算法。在数据集Calatech256和Sceneclass13上的实验表明,ML-SIFT算法是有效地,其性能较SIFT和SURF算法性能要好。 在高层语义提取方面,提出了基于最佳选择的混合融合算法和基于不同标注的融合算法。虽然已经有一些不同的决策级融合算法,并取得了不错的成绩,然而,目前有些融合算法性能的提高不是很明显,也有些融合算法仅对部分甚至小部分语义提取的性能有帮助,而对其它语义提取的性能却没有任何帮助。为此提出了基于最佳选择的混合融合算法。通过在TRECVID 2008数据集上实验表明,基于最佳选择的混合融合算法的性能提高率最好,且对所有语义都有一定的促进作用。同时,针对不同标注对算法性能的影响以及不同标注方法的差异,提出了基于不同标注的融合算法。通过在TRECVID2008数据集上实验显示,基于不同标注的融合算法对对象类高层语义非常有效,而且90%以上的对象类语义的性能都能得到提高。 在动作识别算法评估协议方面,量化评估了不同评估协议对算法性能的影响。虽然很多动作识别算法被提出,但是对于算法性能的评估却没有统一平台,而更为糟糕的是,研究者对评估协议对算法性能的影响尚认识不足,这对相关技术的发展是不利的。本章以先进的MoSIFT特征和SVM分类器识别方法为基本算法,在广泛使用的公开数据集KTH上,从不同角度考察了评估协议对动作识别算法性能的影响。实验表明,采用不同的n交叉实验方法,算法性能有很大的波动,当采用1交叉实验方法时,波动最大,达到10.5%;当分别采用留一法与n交叉实验方法时,算法性能同样具有较大的波动,其最大波动达到7.926%。对于n交叉实验方法,随着n交叉实验次数的增加,其性能变化逐渐减小,当交叉次数增加到25次以上,算法性能才是稳定的。另外,不同数据集划分方法对算法性能也有较大的影响,因此在进行算法比较时,需要采用相同的数据划分方法;如果必须在不同的数据划分下实验,则留一法交叉实验方法能使其误差较小 在大规模数据集中数据不平衡方面,提出了增强等级算法。由于数据不平衡问题在日常生活中普遍存在,且对分类器性能有较大的影响,所以本章在对现有的处理数据不平衡问题的算法分析的基础上,提出了增强等级算法,该算法集采样、过滤和训练为一体,并融入了等级层次结构。在TRECVID数据集上的评测结果表明,该算法在处理数据不平衡问题时,比任意下采样算法和合奏下采样算法的性能要好,当EHS算法的层数增加时,其性能也能够稳定的提高,具有较好的稳定性。对于不同类型的特征,EHS算法同样表现出优越、稳定的性能,具有良好的鲁棒性。当将该算法应用到2010年的TRECVID视频监控竞赛中,在四个事件上取得了第一的成绩。 在家庭医疗设备使用的监督方面,讨论了家庭医疗设备使用监督的可行性问题,提出了一套解决方案。对MAUDE数据集中医疗事故的原因和家庭医疗设备使用情况的调查发现,对家庭医疗设备使用进行监督非常必要。通过卡耐基梅隆大学的CASCUHM研究计划,本章对家庭输液泵使用监督的可行性进行了较为深入的研究,从传感器选择、设置,操作协议的制定,到操作动作的识别算法等,提出了一套解决方案,最终达到平均准确率80%左右,初步证明自动化监督家庭医疗设备的使用是可能的,也为认知辅助系统CASCUHM的研制提供了经验。
【学位授予单位】:北京邮电大学
【学位级别】:博士
【学位授予年份】:2011
【分类号】:TP391.41

手机知网App
【相似文献】
中国期刊全文数据库 前10条
1 张振领;;基于内容的监视视频摘要技术研究[J];电脑知识与技术;2008年10期
2 刘元春;练益群;凌坚;;电视台MAM系统视频检索技术的应用研究[J];中国有线电视;2008年11期
3 张涛;杨德利;李屹;;统一视频标记和检索方法的研究[J];广东通信技术;2009年11期
4 蔡肯;梁晓莹;;基于内容的视频检索技术[J];现代计算机(专业版);2007年12期
5 王鹏,蔡锐,李彬,杨士强;网球视频分析的运动向量场变换算法[J];电子学报;2005年05期
6 李晓光;沈兰荪;;压缩域视频内容分析与摘要提取技术[J];测控技术;2006年05期
7 任利宁;;基于数据挖掘技术的城市监控视频分析[J];机械管理开发;2007年05期
8 王照;;基于数据挖掘技术的城市监控视频分析[J];科技资讯;2008年17期
9 李玉峰;熊建文;杨友源;;视频分析软件在物理实验中的应用[J];实验室研究与探索;2009年04期
10 肖坦;杨栩;张涛;;视频分析技术在铁路综合视频监控系统中的应用[J];铁路技术创新;2010年02期
中国重要会议论文全文数据库 前10条
1 杜俊俐;王海龙;;基于内容的图像检索系统研究[A];全国第16届计算机科学与技术应用(CACIS)学术会议论文集[C];2004年
2 孙芮英;王永海;;基于内容管理技术的博物馆网站管理和发布系统[A];数字博物馆研究与实践(2009)[C];2010年
3 李志宏;史元春;;Web上基于内容的病理图像检索的设计与展望[A];信息科学与微电子技术:中国科协第三届青年学术年会论文集[C];1998年
4 周立兵;柳景超;;贝叶斯理论在垃圾邮件过滤中的应用分析[A];中国造船工程学会电子技术学术委员会2006学术年会论文集(上册)[C];2006年
5 舒后;何薇;;基于内容的多媒体数据库检索技术[A];第一届全国数字媒体技术专业规范建设研讨会论文集[C];2010年
6 徐忠强;;电视新闻节目基于内容的视频检索技术及其实现[A];2009中国电影电视技术学会影视技术文集[C];2010年
7 冯松;欧阳鑫;朱志宁;;基于内容检测Symbian手机短信拦截设计与实现[A];第二十七届中国控制会议论文集[C];2008年
8 何盈捷;冯月利;王珊;;Peer-to-Peer环境下基于内容的智能搜索[A];第二十一届中国数据库学术会议论文集(研究报告篇)[C];2004年
9 杨鸿宾;;多媒体搜索[A];中国教育技术协会2004年年会论文集[C];2004年
10 金韬;杨姝;鲁振德;;基于内容的图象颜色检索系统[A];1999中国控制与决策学术年会论文集[C];1999年
中国重要报纸全文数据库 前10条
1 童剑军;视频分析技术潜力无限[N];计算机世界;2008年
2 巴战辉;基于内容计费的实现[N];通信产业报;2004年
3 ;基于内容计费的智能解决方案[N];人民邮电;2003年
4 安阳;视频分析技术解决安防监控难题[N];中国城乡金融报;2010年
5 佚名;城市反恐与智能视频分析技术研讨会举行[N];中国建设报;2008年
6 彭东;智能视频监控:给您最及时的危机报告[N];科技日报;2007年
7 ;构建内容计费解决方案[N];中国计算机报;2003年
8 记者 杨文利;智能监控技术产业化箭在弦上[N];中国高新技术产业导报;2007年
9 ;引入内容计费适应业务发展[N];人民邮电;2007年
10 北电网络移动产品解决方案部经理 温明;移动网如何智能计费?[N];通信产业报;2004年
中国博士学位论文全文数据库 前10条
1 高赞;基于内容的视频分析关键技术[D];北京邮电大学;2011年
2 刘宇翔;基于内容的音乐分析研究[D];清华大学;2011年
3 张一飞;基于内容的医学图像检索关键技术研究[D];东北大学;2009年
4 唐磊;基于内容和用户历史的音乐可视分析[D];山东大学;2012年
5 周良;基于内容的工程图档检索及其关键技术研究[D];南京航空航天大学;2008年
6 王文惠;基于内容的图像检索技术研究[D];国防科学技术大学;2001年
7 刘阳;数字电视的视频分析与组播传输[D];中国科学院研究生院(软件研究所);2003年
8 夏定元;基于内容的图像检索通用技术研究及应用[D];华中科技大学;2004年
9 雒涛;基于内容的视频图像非线性缩放技术研究[D];中国科学院研究生院(长春光学精密机械与物理研究所);2010年
10 汤林勰;多媒体广告计算[D];中国科学技术大学;2011年
中国硕士学位论文全文数据库 前10条
1 刘文哲;基于内容视频检索的镜头边界检测与分层组织研究[D];西安电子科技大学;2005年
2 张洪德;基于内容的视频检索技术研究[D];国防科学技术大学;2002年
3 刘伟;基于内容的视频检索系统的研究与实现[D];北京交通大学;2010年
4 刘伟;基于内容视频检索系统的实现[D];北京交通大学;2010年
5 程捷;辅助视频内容分析的音频技术研究与实现[D];中国人民解放军国防科学技术大学;2003年
6 王静;视频分割与基于内容的自动分类[D];西安理工大学;2005年
7 苗盼盼;基于内容的视频检索若干技术研究[D];南京理工大学;2010年
8 屈有政;基于内容的暴力视频检索[D];北京交通大学;2011年
9 陈恒;基于内容的视频搜索引擎[D];北京邮电大学;2011年
10 陈昌科;基于内容的图像检索研究及应用[D];电子科技大学;2010年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026