收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

复杂场景下的人体行为识别

吴秋霞  
【摘要】:随着信息技术的飞速发展,在过去的几十年里,我们见证了视频数据在生活中无限泛滥。在很多领域,能够自动理解视频内容就变得越来越重要。人的行为是视频内容中的重要组成部分,已经存在很多重要的研究工作是对视频中人的行为进行分析。但是,已提出的大部分研究方法都是基于简单场景特性的数据的研究,很难被应用到实际场景下人体行为的分析。在本文中,我们研究了实际场景下的人体行为识别,包括三个部分,多模态的人体行为识别方法;基于时空兴趣点选择的人体行为识别;基于局部特征全局背景的人体行为识别。 传统的人体行为识别的方法在动态背景等因素的影响下,已经不能满足复杂场景下人体行为识别的需要。我们通过对复杂场景下人体行为的特性进行分析,发现实际场景中的声音和行为有一定的对应性,例如电话铃声会伴随接电话的行为,因此,将实际场景中的声音信息加入到人体行为识别中,形成多模态(声音模态和视觉模态)的人体行为识别系统。另外,实际场景下人体行为所对应的声音信息存在多样性的特点,我们使用推广的多核学习的方法来挖掘更有效的声音特征。在最终决策时,我们使用模糊积分融合的方法,对声音和视觉两个模态的识别结果进行了决策层的融合。实验结果证明了我们提出的多模态人体行为识别系统能够得到更好的识别性能,同时也揭示了声音背景是如何帮助有效识别实际场景下的人体行为。 时空兴趣点已经被成功地应用于人体行为识别中,然而在实际场景中获取的大部分兴趣点与表征实际场景下的特定人体行为是无关的。因此,本文提出了一种删除无关时空兴趣点的方法,从而达到降低计算量并提高识别性能的目的。基于对注意机制的感知原理的分析,视觉显著性能够帮助定位视觉中的行为主体,因此我们根据显著图来选择相关的时空兴趣点,将未落入显著区域的兴趣点认定为无关的噪声点删除。实验结果证明了我们提出的方法可以减少计算量,并且能够提高系统的识别性能。 实际场景下的人体行为存在多样性的特点,因此如何对实际场景下的人体行为进行表征,就成了一个极具挑战性的研究课题。基于Bag-of-features模型的人体行为识别系统将人体行为表征成基于行为视频中关键点局部特征的分布。因此,用来表达各种关键点的局部特征相应地被提出。但是,这些局部特征却没有对关键点之间结构化的位置关系进行表达。在本文中,我们提出了使用形状背景描述符来表达这种结构化的信息,每个关键点由局部视觉属性,以及关键点相对于其他关键点之间结构化的全局背景来共同表征。实验结果证明了,我们提出的加入结构化信息的行为表征方法,在实际场景下具有更强的表征能力。另外,我们也研究了不同的特征描述符(SIFT描述符、HOGHOF描述符、形状背景描述符)对实际场景下的人体行为的表征能力,同时发现,在致密的关键点下使用我们提出的结构化的全局背景能够取得更好的识别结果。 本文的主要创新点可以总结如下:(1)本文提出了利用背景声音信息形成多模态的人体行为识别系统,更有效地对实际场景下的人体行为进行识别,本文的工作是首次使用多模态的特征来对实际场景下的人体行为进行识别。(2)本文利用推广的多核学习的方法,从大量的声音特征中挑选出能够对实际场景下的人体行为进行更有效表征的声音特征。(3)本文提出了利用模糊积分融合的方法,在决策层对多模态的信息进行融合,取得了更好的识别性能。(4)受到人的感知原理的启发,基于视觉注意机制的显著图被提取,由于视觉显著性能够帮助定位行为的主体,因此可以用来确定图像中的相关兴趣点,未落入显著区域的兴趣点被视为是无关兴趣点而被删除。(5)本文提出了利用形状背景描述符来描述局部关键点的结构化的位置关系,因此,每个关键点可以被描述成它的局部视觉属性,以及关键点相对于其他关键点之间结构化的全局背景的共同表达。


知网文化
【相似文献】
中国期刊全文数据库 前20条
1 冯波;赵春晖;杨涛;张洪才;程咏梅;;基于光流特征与序列比对的实时行为识别[J];计算机应用研究;2007年03期
2 张天丹;;行为识别与反垃圾邮件技术研究[J];吉林省教育学院学报(学科版);2008年05期
3 廖永雄;;浅谈行为识别技术在视频监控系统的实战应用[J];广东公安科技;2008年02期
4 吴建武;;行为识别式反垃圾邮件技术研究[J];大众商务;2009年08期
5 殷明均;陈立伟;唐全华;;基于多镜头的视频行为识别方法[J];电脑知识与技术;2009年25期
6 刘凯;叶锡君;房燚;;基于行为识别、BATV和DKIM技术的垃圾邮件过滤模型研究[J];网络安全技术与应用;2009年11期
7 梁雪松;;基于SMTP会话层的垃圾邮件行为识别技术[J];信息技术;2010年04期
8 李英杰;尹怡欣;邓飞;;一种有效的行为识别视频特征[J];计算机应用;2011年02期
9 石义;钱步仁;;基于内容与行为特征的反垃圾邮件系统[J];网络安全技术与应用;2009年04期
10 杨强;;基于结构模型和主元分析法的行为识别[J];苏州科技学院学报(工程技术版);2009年03期
11 雷金娥;;三维扩散模型在视频行为识别中的应用[J];计算机工程与应用;2009年32期
12 张璐;;网络反垃圾邮件中的行为识别技术研究[J];硅谷;2010年23期
13 王传旭;刘云;厉万庆;;基于时空特征点的非监督姿态建模和行为识别的算法研究[J];电子学报;2011年08期
14 黄彬;田国会;李晓磊;;利用轮廓特征识别人的日常行为[J];光电子.激光;2008年12期
15 罗倩;秦玉平;王春立;;反垃圾邮件技术综述[J];渤海大学学报(自然科学版);2008年04期
16 张伟东;陈峰;徐文立;杜友田;;基于阶层多观测模型的多人行为识别[J];清华大学学报(自然科学版);2009年07期
17 阮涛涛;姚明海;瞿心昱;楼中望;;基于视觉的人体运动分析综述[J];计算机系统应用;2011年02期
18 张伟东;陈峰;徐文立;杜友田;;基于阶层多观测模型的多人行为识别[J];清华大学学报(自然科学版)网络.预览;2009年07期
19 张强;;基于阻断发送源的垃圾邮件过滤技术[J];网络安全技术与应用;2006年02期
20 李妍婷;罗予频;唐光荣;;单目视频中的多视角行为识别方法[J];计算机应用;2006年07期
中国重要会议论文全文数据库 前10条
1 黄紫藤;吴玲达;;监控视频中简单人物行为识别研究[A];第18届全国多媒体学术会议(NCMT2009)、第5届全国人机交互学术会议(CHCI2009)、第5届全国普适计算学术会议(PCC2009)论文集[C];2009年
2 薛亚楠;廖闻剑;彭艳兵;;垃圾邮件行为识别研究[A];中国电子学会第十六届信息论学术年会论文集[C];2009年
3 苗强;周兴社;於志文;倪红波;;一种非觉察式的睡眠行为识别技术研究[A];第18届全国多媒体学术会议(NCMT2009)、第5届全国人机交互学术会议(CHCI2009)、第5届全国普适计算学术会议(PCC2009)论文集[C];2009年
4 王晗;滕鹏;梁玮;;使用稠密兴趣点包的非对称风景图像检索[A];第七届和谐人机环境联合学术会议(HHME2011)论文集【poster】[C];2011年
5 方帅;曹洋;王浩;;视频监控中的行为识别[A];2007中国控制与决策学术年会论文集[C];2007年
6 齐娟;陈益强;刘军发;;基于多模信息感知与融合的行为识别[A];第18届全国多媒体学术会议(NCMT2009)、第5届全国人机交互学术会议(CHCI2009)、第5届全国普适计算学术会议(PCC2009)论文集[C];2009年
7 江星;;加入WTO后的科技期刊形象战略初探[A];学报编辑论丛(第十一集)[C];2003年
8 成昌玲;;抓住“一个中心,两个基本点”——浅谈新课标下的语文阅读教学[A];江苏省教育学会2006年年会论文集(文科专辑)[C];2006年
9 杜志敏;蒋立辉;田峻峰;;支持向量机在决策层融合目标识别中的应用[A];中国电子学会第十五届信息论学术年会暨第一届全国网络编码学术年会论文集(下册)[C];2008年
10 王西点;马华兴;;移动位置服务发展的关键问题分析[A];2007年中国通信学会“移动增值业务与应用”学术年会论文集[C];2007年
中国博士学位论文全文数据库 前10条
1 吴秋霞;复杂场景下的人体行为识别[D];华南理工大学;2012年
2 王亮;基于判别模式学习的人体行为识别方法研究[D];哈尔滨工业大学;2011年
3 何卫华;人体行为识别关键技术研究[D];重庆大学;2012年
4 王双全;申请上海交通大学工学博士学位论文基于无线传感器网络的行为识别与目标定位研究[D];上海交通大学;2008年
5 黄彬;智能空间中人的行为识别与理解[D];山东大学;2010年
6 赵海勇;基于视频流的运动人体行为识别研究[D];西安电子科技大学;2011年
7 佟伟民;股指期货交易中操纵行为识别方法研究[D];哈尔滨工业大学;2008年
8 付耀文;雷达目标融合识别研究[D];中国人民解放军国防科学技术大学;2003年
9 王美珍;垃圾邮件行为模式识别与过滤方法研究[D];华中科技大学;2009年
10 张永梅;基于融合的人脸识别方法研究[D];中北大学;2005年
中国硕士学位论文全文数据库 前10条
1 朱启兵;基于局部时空特征的人体行为识别以及打架行为检测[D];合肥工业大学;2012年
2 于天福;基于声音特征的动物行为识别系统研究[D];东北林业大学;2010年
3 徐经纬;基于无线传感器的人体行为识别研究[D];南京大学;2012年
4 王媛媛;视频中人体行为识别的判别稀疏编码方法研究[D];国防科学技术大学;2011年
5 曲晓艺;基于兴趣为导向的设计研究[D];北京印刷学院;2012年
6 刘吉松;合肥香江高科的CIS策划[D];西南交通大学;2004年
7 廖秋萍;基于兴趣点特征的多类物体识别[D];中南民族大学;2011年
8 李浩攀;室内人的跌倒行为识别[D];华南理工大学;2012年
9 贾程程;基于张量和多尺度特征的多视角人体行为识别[D];吉林大学;2010年
10 易向阳;智能视频监控系统中的行为识别研究[D];广西大学;2011年
中国重要报纸全文数据库 前10条
1 本报记者 粘青;如何选择兴趣班[N];吉林日报;2011年
2 郑年永(作者单位:农行江苏徐州文亭支行);了解客户兴趣[N];中国城乡金融报;2006年
3 解放军总医院第一附属医院心身医学门诊主任医师 彭国球;退休了写个情绪日记[N];健康时报;2010年
4 东林;行为识别新技术让监控没有“死角”[N];人民公安报;2007年
5 首席记者 张守梅;合作兴趣点由“原木”转向“产品”[N];牡丹江日报;2011年
6 本报记者 蓝芳;兴趣班到底“兴趣”了谁?[N];闽西日报;2011年
7 ;走出去,向客人展示自己[N];兰州日报;2004年
8 高洪勇;第三代防垃圾邮件技术“行为识别”诞生[N];中国计算机报;2005年
9 李彦志 田冰;内蒙古总队三支队 抓住官兵“兴趣点”增强教育效果[N];人民武警;2008年
10 记者 徐行翔;小小光盘浓缩4800多个兴趣点[N];嘉兴日报;2005年
中国知网广告投放
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978