收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

多媒体传感器网络中音频语义分析方法的研究

李祺  
【摘要】: 随着人们监控要求的日趋复杂多变,迫切需要将信息丰富的音频、视频、图像等多媒体信息引入到以传感器网络为基础的环境监测活动中来,实现细粒度、精准信息的环境监测,多媒体传感器网络因而成为近年来的研究热点。音频语义分析技术对自动感知环境特征、提高环境监测的精确度等具有重要意义。如何有效地提取监控场景中的音频语义信息是多媒体传感器网络的重要研究内容之一。 针对多媒体传感器网络中的音频语义分析问题,本文从音频特征选择、基本音频元素检测和音频高层语义分析三个方面提出一系列新模型和新方法。本论文的主要贡献如下: (1)基于可鉴别主成分分析的音频特征集构造方法。音频特征的选择与提取是在多媒体传感器网络中进行音频语义分析的基础。一方面,所选取的特征需要充分体现出音频信息在时域和频域中的重要分类特性。另一方面,为了节省后序处理中的计算能耗,我们需要控制特征维数、降低特征间的冗余性。本文提出了一种基于可鉴别主成分分析的特征集构造方法。该方法将主成分分析方法和线性鉴别分析方法进行结合,既提取了音频信号的最佳表示特征又根据训练样本的类别信息提高了这些特征的鉴别能力。通过这种方法,我们可以提取音频信息中最为关键的并相互独立的特征。 (2)基于加权关联图的基本音频元素检测方法。基本音频元素检测是音频底层特征与音频高层语义信息之间的桥梁。在本文中,我们提出了一种基于加权关联图的音频元素检测方法。该方法首先利用隐马尔科夫模型对多种基本音频元素建模,然后,根据先验知识在基本音频元素模型的基础上建立加权关联图模型。此外,考虑到对不同音频元素检测失误所造成的决策风险不同,我们采用基于最小风险贝叶斯决策的方法进行音频元素判定。通过这种方法,我们能够在音频背景复杂、多种音频事件同时发生的多媒体传感器网络中,准确地提取音频低层语义信息。 (3)基于神经网络的音频高层语义分析方法。音频高层语义分析对人们理解音频内容具有重要意义。多媒体传感器网络中,节点计算能力有限且背景噪声复杂,因而传统的用于影视节目的基于机器学习或基于逻辑规则的高层语义分析方法不能直接应用于多媒体传感器网络。在本文中,我们提出了一种基于神经网络的音频高层语义分析方法。我们首先选取足够的训练样本对神经网络进行训练,之后,利用先验知识对神经网络的参数进行调整,将机器学习和人们的先验知识进行了有效地结合。通过这种方法,我们能够准确地提取多媒体传感器网络中的音频高层语义信息。 (4)验证系统的设计与实现。为了验证本文研究成果的有效性,我们基于本实验室开发的多媒体传感器网络原型系统设计了多媒体传感器网络中音频语义分析的验证系统。并将基于可鉴别主成分分析的音频特征选择方法、基于加权关联图的音频元素检测方法和基于神经网络的音频高层语义分析方法部署到该验证系统上,在交通环境和会场环境下提取音频语义信息。实验证明,本文提出的方法能够在多媒体传感器网络中对音频语义信息进行准确地分析。


知网文化
【相似文献】
中国期刊全文数据库 前20条
1 孙利民;叶驰;廖勇;;传感器网络的路由机制[J];计算机科学;2004年03期
2 姚向华;韩九强;;传感器网络中的传感器配置问题研究[J];信息与控制;2006年02期
3 陈红;肖军;苏洁;;基于DSP的动态传感器网络实验平台的设计和开发[J];信息与控制;2006年02期
4 刘媛;邴志刚;;基于RFID的智能仓储管理系统的研发[J];天津工程师范学院学报;2006年03期
5 李凯;;无线传感器网络协议与研究[J];中国科技信息;2007年04期
6 王日俊;刘峰;凌国宇;周金龙;;浅谈传感器的发展[J];甘肃科技纵横;2007年03期
7 丰少伟;彭鹏菲;程远国;;传感器网络的数据查询处理技术研究[J];舰船电子工程;2008年01期
8 肖德琴;冯健昭;周权;杨波;;基于高斯分布的传感器网络信誉模型[J];通信学报;2008年03期
9 张玲玉;张玉峰;李凤霞;李丽敏;;用于智能交通系统的无线传感器网络[J];硅谷;2009年15期
10 胡博;沈军;;空降作战中传感器网络需求分析[J];国防科技;2009年04期
11 刘瑞玲;李祥林;;无线传感网络研究与应用综述[J];电脑知识与技术;2010年12期
12 陈靖;;数据采集传感器网络与大容量存储器[J];信息系统工程;2010年05期
13 尹亚光;丁贵广;;无线传感器网络中的数据压缩技术研究[J];计算机应用与软件;2010年07期
14 徐平平;王岩;周萍;刘培;;传感器网络技术与标准化连载(四) 传感器网络通信与信息交互技术解析[J];信息技术与标准化;2010年Z1期
15 宋光明,葛运建;智能传感器网络研究与发展[J];传感技术学报;2003年02期
16 朱黎明,周乐青,邓灿烽;传感器网络路由协议分类研究[J];科学技术与工程;2005年13期
17 石高涛;廖明宏;;传感器网络操作系统问题与进展[J];计算机科学;2005年08期
18 李春杰;刘瑞霞;王继志;;基于无线传感器网络的监控平台设计[J];传感技术学报;2006年01期
19 陈帅;钟先信;石军锋;廖晓纬;;无线微型传感器网关研究[J];自动化仪表;2006年04期
20 顾一中;;基于“北斗”导航系统的无线传感器网络定位算法研究[J];山东交通学院学报;2006年03期
中国重要会议论文全文数据库 前10条
1 谢志军;陈红;;传感器网络中能量高效的聚集算法研究[A];第二十四届中国数据库学术会议论文集(研究报告篇)[C];2007年
2 解婷婷;樊小泊;陈红;;传感器网络中基于动态线路的连续查询处理[A];第二十三届中国数据库学术会议论文集(技术报告篇)[C];2006年
3 程时端;;传感器网络[A];中国通信学会信息通信网络技术委员会2004年年会论文集[C];2004年
4 谢志军;陈红;;传感器网络中能量高效的区域连接算法研究[A];第二十四届中国数据库学术会议论文集(研究报告篇)[C];2007年
5 姚剑波;;无线Mesh传感器网络中的位置隐私[A];全国第20届计算机技术与应用学术会议(CACIS·2009)暨全国第1届安全关键技术与应用学术会议论文集(上册)[C];2009年
6 纪守领;李金宝;;基于公共子树缓存的传感器网络查询技术研究[A];第26届中国数据库学术会议论文集(B辑)[C];2009年
7 曾加;慕春棣;胡建斌;;基于博弈论的传感器网络能量平衡路由[A];第二十六届中国控制会议论文集[C];2007年
8 石为人;张阳;邓鹏程;;传感器网络局部时间同步协议研究[A];第二十六届中国控制会议论文集[C];2007年
9 张和生;潘成;杨军;贾利民;董宏辉;梁玉庆;梁乙朝;;一种面向交通状态获取传感器网络体系结构的设计与实现[A];第二十九届中国控制会议论文集[C];2010年
10 房栋;李宇;尹力;黄海宁;;水声传感器网络MAC协议研究与实现[A];2009年全国水声学学术交流暨水声学分会换届改选会议论文集[C];2009年
中国博士学位论文全文数据库 前10条
1 李祺;多媒体传感器网络中音频语义分析方法的研究[D];北京邮电大学;2010年
2 罗汉江;海洋监测传感器网络关键技术研究[D];中国海洋大学;2010年
3 王越超;中高速传感器网络服务质量保障关键技术研究[D];广东工业大学;2012年
4 张可;无线移动自组织及传感器网络中若干问题的研究[D];电子科技大学;2010年
5 郜帅;移动传感器网络高效数据收集机制研究[D];北京交通大学;2010年
6 吴晓培;传感器网络的部署以及节能研究[D];电子科技大学;2012年
7 易叶青;传感器网络中基于数字水印的安全数据收集机制[D];湖南大学;2011年
8 崔筱宁;基于传感器网络的扩散型事件监测技术研究[D];中国科学技术大学;2010年
9 解文斌;面向监测应用的传感器网络关键技术研究[D];国防科学技术大学;2009年
10 李明;异构传感器网络覆盖算法研究[D];重庆大学;2011年
中国硕士学位论文全文数据库 前10条
1 刘斌;跨层优化技术在传感器网络中的研究与应用[D];太原理工大学;2011年
2 李白莉;改进DV-Hop算法在随机传感器网络中的应用研究[D];太原科技大学;2011年
3 刘广;基于NS2的无线多媒体传感器网络多路径路由算法仿真与实现[D];陕西师范大学;2010年
4 沈昊为;传感器网络中基于Voronoi网格的快速覆盖判定算法研究[D];湖南大学;2010年
5 彭蓓雷;基于低时延和区分服务的中高速传感器网络QoS保证MAC协议研究[D];广东工业大学;2011年
6 沈卓;基于虚拟MIMO的无线温室测控系统传感器网络结构研究[D];江苏大学;2010年
7 王岩;基于流场守恒律模型的传感器网络路由技术研究[D];南京理工大学;2010年
8 王肯生;电力载波传感器网络路由算法的研究[D];中国石油大学;2010年
9 何鎏;基于嵌入式系统和现场总线的多参量传感器网络研究[D];上海交通大学;2011年
10 张军;非均匀无线多媒体传感器网络路由算法及其仿真与研究[D];陕西师范大学;2010年
中国重要报纸全文数据库 前10条
1 杨志杰;物联网两项行业标准正式立项[N];中国建设报;2010年
2 布轩;传感器网络标准工作组在北京成立[N];中国电子报;2009年
3 许泳;传感器网络将与互联网融合[N];计算机世界;2007年
4 记者 过国忠 通讯员 王楠;传感器网络SoC芯片制成[N];科技日报;2010年
5 ;中国首台IPv6微型传感路由器诞生[N];网络世界;2006年
6 记者 过国忠;我国传感网首批6项标准发布[N];科技日报;2011年
7 本报记者 吴磊;物联网关键技术亟待突破[N];通信产业报;2009年
8 工业和信息化部 通信科技委委员 侯自强;物联网仅仅才开始[N];计算机世界;2009年
9 本报记者 韩义雷 过国忠;无锡加快建设物联网“感知中国”中心[N];科技日报;2009年
10 通讯员  张兰 记者  赵凤华;我国研制出首套IPv6微型传感路由器[N];科技日报;2005年
中国知网广告投放
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978