收藏本站
收藏 | 论文排版

多模态融合的新闻故事单元分割

刘立巍  
【摘要】: 对视频数据的有效处理、浏览、检索和管理正伴随着视频数据的快速增长而成为亟待解决的现实问题。视频内容分析技术旨在将非结构化的视频数据结构化,并提取其中的语义内容,构建低层特征到高层语义之间的桥梁,最终建立视频的摘要、索引和检索等应用系统,提供给用户方便的视频内容获取方式。 本文以新闻视频为研究对象,通过对字幕、音频、视频这三个不同类型信息的研究,实现了对新闻视频故事单元的分割。并以Visual C++为开发平台,设计并实现了一个新闻视频故事单元分割系统。 本文首先对视频进行了结构化的处理,提出了一种改进的镜头边界检测方法,即对运动补偿之后的像素不变点采用自适应双阈值来判定切变镜头和渐变镜头。在此基础之上,对一种字幕检测算法进行了改进,利用小波变换提取图像特征,对其进行模糊C均值聚类,判断出图像帧中的字幕信息;同时以提取的关键帧为基础实现一种主持人镜头的检测方法,利用新闻视频中主持人镜头的固有特点,提取区域图像的颜色特征进行判断,将镜头分为主持人镜头和一般报道镜头。 本文利用基于隐马尔科夫模型的音频分类算法,提取视频中的底层音频信息特征,首先对音频进行静音判断,然后使用隐马尔科夫模型对其进行分类,实现对新闻音频信息的分类与识别。 最后本文以Visual C++6.0为编程平台,实现了新闻故事单元分割系统,完成了对新闻视频的镜头检测、字幕检测,音频分类识别,主持人镜头检测,新闻故事单元分割以及数据库的管理和检索。


知网文化
【相似文献】
中国期刊全文数据库 前20条
1 王策,何炎祥,王云,张春林;基于视音频特征和文本信息的新闻视频自动场景分割[J];计算机工程;2005年06期
2 刘华咏;基于音视频特征和文字信息自动分段新闻故事[J];系统仿真学报;2004年11期
3 于俊清,汤旸,周向东;利用主色模板匹配检测新闻视频口播帧[J];计算机辅助设计与图形学学报;2005年03期
4 王艳;李莉;;基于3/10时空切片的主题字幕边界帧检测[J];大众科技;2010年09期
5 陈凯江;欧嘉致;黄萱菁;吴立德;;新闻视频、音频中的主题检测[J];计算机科学;2002年11期
6 于俊清,汤旸,闫冬,周洞汝;基于规则分析的新闻视频口播帧检测[J];计算机工程与应用;2004年06期
7 朱志辉;;基于视频摘要生成技术的研究[J];微电子学与计算机;2006年02期
8 徐新文;李国辉;付畅俭;;基于MWH模型的新闻视频语义挖掘[J];计算机工程;2009年17期
9 邵晨曦;李海波;王李忠;;基于Prewitt算子的新闻字幕检测[J];电子技术;2009年11期
10 吴玲达;文军;陈丹雯;袁志民;;新闻视频故事单元关联分析技术研究综述[J];计算机科学;2010年06期
11 袁美英;;加强新闻视频档案管理工作之浅见[J];浙江档案;2010年08期
12 李默,李弼程,邓子健;新闻视频主持人镜头的半屏幕检测算法[J];计算机工程与应用;2005年15期
13 王倩;;古永锵无畏寒冬积极转型 在线视频新闻好看不好做[J];IT时代周刊;2008年24期
14 王伟;李丹丹;;基于网络的新闻视频实时发布系统[J];安徽科技;2009年08期
15 徐峰;梁学战;;新闻视频帧中的标题字幕探测[J];中国科技信息;2009年23期
16 刘海涛;老松杨;郭金林;白亮;;一种快速新闻视频标题字幕探测与定位方法[J];计算机应用研究;2011年08期
17 高健;叶静;陈莹莹;聂藩;;基于动态自动提取模板的实时口播帧检测方法[J];电视技术;2006年12期
18 高健;郭梦琦;沈辉;赵其杰;;一种基于分布特点的口播帧识别算法[J];光电子.激光;2007年06期
19 刘宇驰;栾悉道;谢毓湘;吴玲达;;新闻视频中非新闻段的去除[J];小型微型计算机系统;2007年10期
20 彭天强;李弼程;;一种有效的抗闪光灯新闻视频镜头检测方法[J];信息工程大学学报;2007年04期
中国重要会议论文全文数据库 前5条
1 吴倩;史萍;;新闻视频中主持人帧检测方法的研究[A];图像图形技术研究与应用2009——第四届图像图形技术与应用学术会议论文集[C];2009年
2 刘森;方卫;封化民;宋国森;方勇;;一种扩展的基于学习的视频镜头检测方法[A];第一届建立和谐人机环境联合学术会议(HHME2005)论文集[C];2005年
3 谢毓湘;栾悉道;吴玲达;文军;老松杨;;一种基于聚类的播音员镜头探测方法[A];第一届建立和谐人机环境联合学术会议(HHME2005)论文集[C];2005年
4 刘丽丽;郭锋;吕凝;;新闻视频中标题字幕的检测与识别[A];中国通信学会第五届学术年会论文集[C];2008年
5 徐忠强;;电视新闻节目基于内容的视频检索技术及其实现[A];2009中国电影电视技术学会影视技术文集[C];2010年
中国博士学位论文全文数据库 前7条
1 徐新文;基于内容的新闻视频挖掘方法研究[D];国防科学技术大学;2009年
2 文军;新闻视频故事单元跟踪关键技术研究[D];国防科学技术大学;2008年
3 冀中;基于多模态信息的新闻视频内容分析技术研究[D];天津大学;2007年
4 凌坚;新闻视频主题识别与跟踪的研究[D];浙江大学;2007年
5 赵亚琴;基于内容的视频片段检索技术研究[D];南京理工大学;2007年
6 王振;数字视频中文本的提取方法研究[D];中国海洋大学;2011年
7 钱学明;基于语义的视频浏览系统中的关键技术研究[D];西安交通大学;2007年
中国硕士学位论文全文数据库 前10条
1 屈洁;新闻视频内容结构分析研究[D];西安电子科技大学;2010年
2 韩兵;新闻视频故事单元关联分析技术研究[D];国防科学技术大学;2010年
3 刘嘉琦;基于多模态特征的新闻视频结构分析[D];西安电子科技大学;2012年
4 夏肇霖;新闻视频故事单元分割[D];南京理工大学;2012年
5 陈翰;新闻视频的语义提取与自动分类技术研究[D];河南科技大学;2013年
6 白志杰;新闻视频主题追踪技术研究[D];解放军信息工程大学;2009年
7 刘明杰;针对新闻视频的内容分析研究[D];复旦大学;2012年
8 万建平;新闻视频语义概念检测技术研究[D];解放军信息工程大学;2011年
9 闫建鹏;基于多模态特征的新闻视频语义分析[D];西安电子科技大学;2012年
10 秦钢;一种基于视觉特性的新闻内容分析[D];北京邮电大学;2013年
中国重要报纸全文数据库 前10条
1 记者 李亚楠;享有“人格的尊严”,一个都不能少[N];新华每日电讯;2009年
2 本报记者 薛娟;电影在线发行收益指日可待?[N];中国经济时报;2011年
3 本报记者 王雪娟;成都“数据高速公路”对接世界[N];成都日报;2009年
4 ;CNN新推文字供稿服务,试水通讯社业务[N];新华每日电讯;2008年
5 王 旃;车载GPS渐走渐强 中国卫通欲率先抢滩[N];中国企业报;2004年
6 本报记者 朱艳燕;抢抓市场空白 凤凰欲吃短视频“独食”[N];中华工商时报;2011年
7 李军;国内首家车载卫星导航平台业务开通[N];人民邮电;2004年
8 ;RealNetworks提供手机视频服务[N];计算机世界;2003年
9 本报记者 廖庆升;央视进军网络视频业 传统媒体掘金新领域[N];通信信息报;2009年
10 李永刚;网络乱战中的视频走势[N];经济观察报;2010年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978