收藏本站
《国防科学技术大学》 2009年
收藏 | 手机打开
二维码
手机客户端打开本文

基于内容的新闻视频挖掘方法研究

徐新文  
【摘要】: 信息时代以新闻视频为代表的多媒体信息在国家政治、经济、文化、外交、国防安全以及人们日常生活等领域发挥着重要作用。研究如何从大量的新闻视频数据中提取出潜在的、有价值的知识已成为必然。传统的多媒体处理和基于内容的检索技术虽然在多媒体数据组织、管理、浏览和检索等方面取得较好的成效,却无法发现其中潜在的高层语义知识;传统的数据挖掘技术虽然能够解决结构化或半结构化数据的知识发现问题,却难以直接应用于非结构化的多媒体数据。本文的研究旨在结合基于内容的视频处理技术和传统的数据挖掘技术来解决多模态、高特征维的新闻视频中潜在的、有价值的、可理解的模式知识的发现问题。 本文首先提出了一个新闻视频挖掘概念和技术框架,在此基础上重点研究了该框架中新闻视频语义结构挖掘、语义主题挖掘和语义事件挖掘等关键技术。论文的主要工作和创新点体现在以下几个方面: (1)提出了基于内容的新闻视频挖掘的概念和技术框架。在概念框架中,定义了新闻视频挖掘的概念和任务,提出了新闻视频挖掘的层次结构。在技术框架中,提出了新闻视频挖掘的系统结构,介绍了新闻视频挖掘的重要关键技术,同时指出本文研究的主要任务。 (2)提出并改进了部分新闻视频语义结构挖掘方法。提出了一种基于图像分割与对象跟踪的新闻视频镜头探测方法和一种基于播音员声纹的音频镜头探测方法。在此基础上,提出了一种综合音视频多线索的新闻故事单元探测方法,为后续的高层挖掘奠定了基础。实验证明,本文提出的方法对视频的低层特征变化、对象运动、摄相机运动和视频质量差异具有较强的鲁棒性,能较好地克服故事单元定位不准和对特殊场景较为敏感等问题,获得较好的查全率和查准率。 (3)提出了一种基于多翼Harmoniums模型的新闻视频语义主题挖掘方法。基于双层无向图模型Harmoniums,对新闻视频的伴随文本特征和关键帧的HSV颜色直方图、边界直方图等视觉特征进行高维多模态数据联合建模,生成视频数据的低维潜在语义模型,即多翼Harmoniums新闻视频潜在语义主题模型,对新闻视频语义主题进行挖掘。该模型通过隐含主题与观测输入数据间的双向依存关系扩展和改善了先前的基于两层的随机场模型。实验证明,该模型在促进有效推理、鲁棒主题混合和灵活潜在主题空间建模等方面具有较好的性能。 (4)提出并改进了部分新闻视频语义事件挖掘方法。首先,提出了一种基于多语义类新闻视频事件表示法,并给出了新闻视频事件间的相似性度量的计算方法。然后,提出了一种改进的增量k均值的新闻事件探测方法。该方法克服了初始聚类中心选择和对新闻语料处理顺序过分依赖等弊端,明显提高了事件探测性能。最后,提出了一种基于多语义类的新闻事件多维频繁模式挖掘方法和一种基于“事件立方”关联图的可视化方法。该挖掘方法首先建立新闻事件多维事务数据库,然后采用扩展的Apriori性质的剪枝策略和多维索引树对新闻事件多维频繁模式进行挖掘。实验表明该方法是有效且高效的。同时,基于“事件立方”关联图是一种直观且有趣的可视化工具。 综上所述,本文的研究主要集中在基于内容的新闻视频语义层次上的挖掘,提出了新闻视频挖掘概念和技术框架,从语义结构、语义主题和语义事件三个层次分别探讨了新闻视频挖掘方法与应用,在理论和应用上都取得了一定的成果。这些研究不仅对视频分析和挖掘技术具有积极的影响,同时也对多媒体情报分析技术具有的理论和实践意义。
【学位授予单位】:国防科学技术大学
【学位级别】:博士
【学位授予年份】:2009
【分类号】:TP391.41

手机知网App
【引证文献】
中国期刊全文数据库 前1条
1 陈丹雯;张俊;韩兵;吴玲达;;基于改进词袋模型的相似关键帧匹配方法[J];计算机工程与设计;2011年08期
中国博士学位论文全文数据库 前1条
1 侯锋;中文报业出版的文字质量智能辅助控制技术研究[D];国防科学技术大学;2010年
中国硕士学位论文全文数据库 前2条
1 韩兵;新闻视频故事单元关联分析技术研究[D];国防科学技术大学;2010年
2 孟雨;基于视频镜头的苹果病斑检索研究[D];西北农林科技大学;2011年
【参考文献】
中国期刊全文数据库 前10条
1 裴继红,范九伦,谢维信;聚类中心的初始化方法[J];电子科学学刊;1999年03期
2 钱雪忠;孔芳;;关联规则挖掘中对Apriori算法的研究[J];计算机工程与应用;2008年17期
3 熊华,老松杨,吴玲琦,李恒峰,吴玲达,李国辉;NewsVideoCAR:一个基于内容的视频新闻节目浏览检索系统[J];计算机工程;2000年11期
4 胡军涛,武德峰,李国辉,甘亚莉;多媒体数据挖掘的体系结构和方法[J];计算机工程;2003年09期
5 付畅俭;李国辉;代科学;;视频结构挖掘的概念和框架[J];计算机工程;2007年06期
6 郭汉龙,陈福民,张敏芳;基于自动门限的分区直方图的镜头分割[J];计算机工程与科学;2005年08期
7 姜帆,章毓晋;新闻视频的场景分段索引及摘要生成[J];计算机学报;2003年07期
8 武德峰,李国辉,来旭,胡军涛;多媒体数据集中的数据挖掘:系统框架和方法[J];计算机应用研究;2005年02期
9 丁凡;王斌;白硕;刘宜轩;李亚楠;;文档检索中句法信息的有效利用研究[J];中文信息学报;2008年04期
10 鲍焕军;郑方;;GMM-UBM和SVM说话人辨认系统及融合的分析[J];清华大学学报(自然科学版);2008年S1期
中国博士学位论文全文数据库 前1条
1 姚志强;说话人识别中提高GMM性能方法的研究[D];中国科学技术大学;2006年
【共引文献】
中国期刊全文数据库 前10条
1 张伯虎;杨金柱;陈建莉;;智能视频监控系统分析与应用[J];安防科技;2006年11期
2 王春腾;杨厚群;符传谊;邢洁清;;基于独立成分分析的谱聚类方法[J];安徽电子信息职业技术学院学报;2011年03期
3 干娟;;基于决策树算法的学生综合测评系统的设计[J];安徽电子信息职业技术学院学报;2011年04期
4 李玲玲;辛浩;;FCM算法及其有效性度量方法[J];安徽电子信息职业技术学院学报;2011年05期
5 朱六璋;;浅析电网运行调度决策支持系统的应用[J];安徽电力;2005年02期
6 徐国华,马众模,黄世祥,雷能忠;基于GIS的巢湖流域水环境综合治理决策支持系统研究[J];安徽地质;2001年04期
7 王兴旺;金宝华;;基于WEB的桃树病虫害决策支持系统设计与实现[J];安徽农业科学;2010年12期
8 王轲;邵陆寿;;基于镜头检测的成熟期水稻图像处理算法研究[J];安徽农业大学学报;2011年06期
9 郭有强;胡学钢;;基于项目增长法高效求解最大频繁项集[J];安徽科技学院学报;2006年06期
10 柯加山;陈朗;冯长根;;矿井安全综合评估决策支持系统分析[J];兵工安全技术;2000年03期
中国重要会议论文全文数据库 前10条
1 周炎涛;唐剑波;王家琴;;基于信息熵的改进TFIDF特征选择算法[A];第二十六届中国控制会议论文集[C];2007年
2 魏立新;田学静;王洪瑞;宋阳;;基于改进型模糊聚类的模糊系统辨识方法[A];第二十七届中国控制会议论文集[C];2008年
3 赵云鹏;石丽;刘莹;;基于数据挖掘的高校规模分析及应用研究[A];第九届全国信息获取与处理学术会议论文集Ⅰ[C];2011年
4 刘怡君;唐锡晋;顾基发;;专家会商的方法支持与工具应用[A];经济全球化与系统工程——中国系统工程学会第16届学术年会论文集[C];2010年
5 吴倩;史萍;;新闻视频中主持人帧检测方法的研究[A];图像图形技术研究与应用2009——第四届图像图形技术与应用学术会议论文集[C];2009年
6 王皓;曹永锋;孙洪;;基于流域变换的聚类分析[A];第十二届全国信号处理学术年会(CCSP-2005)论文集[C];2005年
7 宋林峰;朱灿焰;郑博;;基于ICA和LWT的数字水印改进方案[A];第十三届全国信号处理学术年会(CCSP-2007)论文集[C];2007年
8 张众;张旭东;杨小牛;;基于子空间方法的雷达信号分离算法[A];第十四届全国信号处理学术年会(CCSP-2009)论文集[C];2009年
9 陈晋央;吴瑛;;基于独立分量分析的通信信号盲分离算法研究[A];第十四届全国信号处理学术年会(CCSP-2009)论文集[C];2009年
10 吴栋;张京华;王玉成;胡伍生;;前兆信息模型在地震预测中的应用[A];数字测绘与GIS技术应用研讨交流会论文集[C];2008年
中国博士学位论文全文数据库 前10条
1 乔梁;信源定位的可观测性及跟踪技术研究[D];哈尔滨工程大学;2010年
2 陆满君;通信辐射源个体识别与参数估计[D];哈尔滨工程大学;2010年
3 吴启涛;城市抗震防灾规划空间决策支持系统研究[D];中国海洋大学;2010年
4 刘文全;基于GIS的海上石油平台溢油应急决策支持系统结构与应用研究[D];中国海洋大学;2010年
5 苏日建;信息测量系统及其若干问题的研究[D];华中科技大学;2010年
6 谭林;基于动力指纹的结构损伤识别可靠度方法研究[D];华南理工大学;2010年
7 符茂胜;局部保持的流形学习理论及其在视觉信息分析中的应用[D];安徽大学;2010年
8 康锋;基于视觉特征的早期农林火灾检测方法的基础研究[D];浙江大学;2010年
9 张海龙;110~220kV XLPE电缆绝缘在线检测技术研究[D];武汉大学;2009年
10 王冬丽;基于可扩展的支持向量机分类算法及在信用评级中的应用[D];东华大学;2011年
中国硕士学位论文全文数据库 前10条
1 岑忠;体感诱发电位实验系统的设计、测量与分析[D];南京医科大学;2010年
2 蔡浩;基于Web使用挖掘的协同过滤推荐算法研究[D];浙江理工大学;2010年
3 李翠;基于车辆自动识别的智能计重监控系统的研究与设计[D];郑州大学;2010年
4 刘春燕;教学网络DIDS数据分析方法的研究与改进[D];郑州大学;2010年
5 边峦剑;基于改进粒子群的盲源分离算法及其应用研究[D];哈尔滨工程大学;2010年
6 左国辉;基于子空间方法的人脸识别技术研究[D];哈尔滨工程大学;2009年
7 史文财;省级政务网安全检测系统的设计与实现[D];哈尔滨工程大学;2010年
8 张珍军;基于内容的图像检索技术研究[D];哈尔滨工程大学;2010年
9 王洋;基于潜在语义分析的智能搜索技术研究[D];哈尔滨工程大学;2010年
10 尹丽玲;基于人工免疫算法的Web文本挖掘研究[D];哈尔滨工程大学;2010年
【同被引文献】
中国期刊全文数据库 前10条
1 吴云芳;;并列成分中心语语义相似性考察[J];当代语言学;2005年04期
2 盛骁杰;杨小康;;基于动态规划的自适应关键帧提取算法[J];电视技术;2009年04期
3 凌坚;练益群;;新闻单元的自动快速分割方法[J];电视技术;2009年07期
4 冯元勇;孙乐;张大鲲;李文波;;基于小规模尾字特征的中文命名实体识别研究[J];电子学报;2008年09期
5 孙广路;王晓龙;刘秉权;关毅;;基于词聚类特征的统计中文组块分析模型[J];电子学报;2008年12期
6 贺祥;卢光辉;;基于图像相似度的关键帧提取算法[J];福建电脑;2009年05期
7 宋宜纯,王杰中;中央电视台音像资料馆媒体资产管理系统的技术特点[J];广播与电视技术;2005年05期
8 文军;吴玲达;曾璞;谢毓湘;;新闻视频中基于“场景词汇”的故事单元相似度分析[J];国防科技大学学报;2009年06期
9 王骞,花蕾,李红波;渭北高原苹果害物专家系统的构建[J];干旱地区农业研究;2005年03期
10 宋擒豹,沈钧毅;数字商品非法复制和扩散的监测机制[J];计算机研究与发展;2001年01期
中国重要会议论文全文数据库 前1条
1 董静;孙乐;吕元华;冯元勇;;基于线性链条件随机场模型的语义角色标注[A];中文信息处理前沿进展——中国中文信息学会二十五周年学术会议论文集[C];2006年
中国博士学位论文全文数据库 前5条
1 谢毓湘;辅助情报分析的新闻视频挖掘技术研究[D];国防科学技术大学;2004年
2 凌坚;新闻视频主题识别与跟踪的研究[D];浙江大学;2007年
3 雷震;基于事件的新闻报道分析技术研究[D];国防科学技术大学;2006年
4 闫君飞;视频点播系统中的视频检索研究[D];中国科学技术大学;2008年
5 曹政;电视节目自动分割与相似视频检索[D];中国科学技术大学;2010年
中国硕士学位论文全文数据库 前5条
1 陈丹雯;基于文本驱动的虚拟新闻生成技术研究[D];国防科学技术大学;2006年
2 蒋海娜;基于镜头的视频检索方法研究[D];重庆大学;2007年
3 曲泽超;足球视频检索技术研究与实现[D];南京理工大学;2008年
4 梁宵;基于内容的新闻视频检索系统的研究与实现[D];吉林大学;2009年
5 尹湘舟;面向web图片检索的文本和图片信息融合技术研究[D];湘潭大学;2009年
【二级参考文献】
中国期刊全文数据库 前10条
1 种劲松,周孝宽,王宏琦;基于遗传算法的最佳熵阈值图像分割法[J];北京航空航天大学学报;1999年06期
2 张勇,马克茂,杨明,王子才;基于Hebb竞争聚类的模糊控制器规则的获取[J];哈尔滨工业大学学报;1998年02期
3 朱兴全,薛向阳,吴立德;一种自动门限选取的视频Shot分割方法[J];计算机研究与发展;2000年01期
4 熊华,王辰,老松杨,胡晓峰;基于内容的视频浏览界面的设计与实现[J];计算机工程与应用;2001年01期
5 曹莉华,胡晓峰,李国辉;基于内容检索中的视频处理技术研究[J];计算机工程与应用;1998年06期
6 熊华,老松杨,吴玲琦,李恒峰,吴玲达,李国辉;NewsVideoCAR:一个基于内容的视频新闻节目浏览检索系统[J];计算机工程;2000年11期
7 胡军涛,武德峰,李国辉,甘亚莉;多媒体数据挖掘的体系结构和方法[J];计算机工程;2003年09期
8 庄越挺,刘小明,吴翌,潘云鹤;通过例子视频进行视频检索的新方法[J];计算机学报;2000年03期
9 赵军;金千里;徐波;;面向文本检索的语义计算[J];计算机学报;2005年12期
10 任金昌,赵荣椿,冯大淦;一个基于内容的数字新闻检索系统的设计与实现[J];计算机应用;2001年10期
中国博士学位论文全文数据库 前1条
1 裴继红;基于模糊信息处理的图像分割方法研究[D];西安电子科技大学;1998年
中国硕士学位论文全文数据库 前2条
1 胡军涛;视频高层结构分析和挖掘[D];中国人民解放军国防科学技术大学;2002年
2 黄文辉;基于矢量量化的说话人识别技术研究[D];西安电子科技大学;2006年
【相似文献】
中国期刊全文数据库 前10条
1 于俊清,汤旸,闫冬,周洞汝;基于规则分析的新闻视频口播帧检测[J];计算机工程与应用;2004年06期
2 刘华咏;基于音视频特征和文字信息自动分段新闻故事[J];系统仿真学报;2004年11期
3 徐峰;梁学战;;新闻视频帧中的标题字幕探测[J];中国科技信息;2009年23期
4 于俊清,汤旸,周向东;利用主色模板匹配检测新闻视频口播帧[J];计算机辅助设计与图形学学报;2005年03期
5 王艳;李莉;;基于3/10时空切片的主题字幕边界帧检测[J];大众科技;2010年09期
6 陈凯江;欧嘉致;黄萱菁;吴立德;;新闻视频、音频中的主题检测[J];计算机科学;2002年11期
7 张琍;一个新闻视频库的原型系统设计[J];河北省科学院学报;2005年01期
8 朱志辉;;基于视频摘要生成技术的研究[J];微电子学与计算机;2006年02期
9 梁学战;朱明;;融合多特征的新闻故事自动分割[J];计算机应用;2009年04期
10 徐新文;李国辉;付畅俭;;基于MWH模型的新闻视频语义挖掘[J];计算机工程;2009年17期
中国重要会议论文全文数据库 前10条
1 吴倩;史萍;;新闻视频中主持人帧检测方法的研究[A];图像图形技术研究与应用2009——第四届图像图形技术与应用学术会议论文集[C];2009年
2 徐忠强;;电视新闻节目基于内容的视频检索技术及其实现[A];2009中国电影电视技术学会影视技术文集[C];2010年
3 刘森;方卫;封化民;宋国森;方勇;;一种扩展的基于学习的视频镜头检测方法[A];第一届建立和谐人机环境联合学术会议(HHME2005)论文集[C];2005年
4 谢毓湘;栾悉道;吴玲达;文军;老松杨;;一种基于聚类的播音员镜头探测方法[A];第一届建立和谐人机环境联合学术会议(HHME2005)论文集[C];2005年
5 刘丽丽;郭锋;吕凝;;新闻视频中标题字幕的检测与识别[A];中国通信学会第五届学术年会论文集[C];2008年
6 杜俊俐;王海龙;;基于内容的图像检索系统研究[A];全国第16届计算机科学与技术应用(CACIS)学术会议论文集[C];2004年
7 孙芮英;王永海;;基于内容管理技术的博物馆网站管理和发布系统[A];数字博物馆研究与实践(2009)[C];2010年
8 舒后;何薇;;基于内容的多媒体数据库检索技术[A];第一届全国数字媒体技术专业规范建设研讨会论文集[C];2010年
9 李志宏;史元春;;Web上基于内容的病理图像检索的设计与展望[A];信息科学与微电子技术:中国科协第三届青年学术年会论文集[C];1998年
10 周立兵;柳景超;;贝叶斯理论在垃圾邮件过滤中的应用分析[A];中国造船工程学会电子技术学术委员会2006学术年会论文集(上册)[C];2006年
中国重要报纸全文数据库 前10条
1 记者 李亚楠;享有“人格的尊严”,一个都不能少[N];新华每日电讯;2009年
2 本报记者 薛娟;电影在线发行收益指日可待?[N];中国经济时报;2011年
3 本报记者 王雪娟;成都“数据高速公路”对接世界[N];成都日报;2009年
4 ;基于内容计费的智能解决方案[N];人民邮电;2003年
5 巴战辉;基于内容计费的实现[N];通信产业报;2004年
6 ;CNN新推文字供稿服务,试水通讯社业务[N];新华每日电讯;2008年
7 ;构建内容计费解决方案[N];中国计算机报;2003年
8 本报记者 朱艳燕;抢抓市场空白 凤凰欲吃短视频“独食”[N];中华工商时报;2011年
9 王 旃;车载GPS渐走渐强 中国卫通欲率先抢滩[N];中国企业报;2004年
10 ;引入内容计费适应业务发展[N];人民邮电;2007年
中国博士学位论文全文数据库 前10条
1 徐新文;基于内容的新闻视频挖掘方法研究[D];国防科学技术大学;2009年
2 冀中;基于多模态信息的新闻视频内容分析技术研究[D];天津大学;2007年
3 赵亚琴;基于内容的视频片段检索技术研究[D];南京理工大学;2007年
4 文军;新闻视频故事单元跟踪关键技术研究[D];国防科学技术大学;2008年
5 凌坚;新闻视频主题识别与跟踪的研究[D];浙江大学;2007年
6 张一飞;基于内容的医学图像检索关键技术研究[D];东北大学;2009年
7 刘宇翔;基于内容的音乐分析研究[D];清华大学;2011年
8 周良;基于内容的工程图档检索及其关键技术研究[D];南京航空航天大学;2008年
9 王振;数字视频中文本的提取方法研究[D];中国海洋大学;2011年
10 唐磊;基于内容和用户历史的音乐可视分析[D];山东大学;2012年
中国硕士学位论文全文数据库 前10条
1 屈洁;新闻视频内容结构分析研究[D];西安电子科技大学;2010年
2 韩兵;新闻视频故事单元关联分析技术研究[D];国防科学技术大学;2010年
3 万建平;新闻视频语义概念检测技术研究[D];解放军信息工程大学;2011年
4 夏肇霖;新闻视频故事单元分割[D];南京理工大学;2012年
5 白志杰;新闻视频主题追踪技术研究[D];解放军信息工程大学;2009年
6 杨益铮;基于内容的新闻镜头分类技术研究[D];天津大学;2008年
7 黄珺;基于音频的电视内容提取与分析[D];北京邮电大学;2011年
8 李默;新闻视频场景分割技术研究[D];中国人民解放军信息工程大学;2005年
9 张海勇;基于片花的新闻视频搜索引擎的设计和实现[D];河海大学;2006年
10 陶永宽;新闻视频中标题文本检测定位技术研究[D];国防科学技术大学;2007年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026