收藏本站
《北京邮电大学》 2011年
收藏 | 手机打开
二维码
手机客户端打开本文

基于流量监测的网络用户行为分析

延皓  
【摘要】:随着网络技术和业务的发展,网络用户数量逐年增加。人们在网络中既可以浏览新闻、收听音乐、收看视频,又可以发表言论、购买商品、游戏娱乐。网络已成为人们现实生活的延伸。人们在网络世界中交流互动,表现出各种网络行为。研究人们的网络行为,对于网络优化、网络服务的定制和推广都具有重要意义。 流量监测技术通过对网络流量进行长期监视和测量,获取反映网络流量特征的数据。该技术最初被电信运营商应用于网络规划和QoS测量。近年来,运营商的工作重点正在由网络建设、运营和维护逐步转向为更广泛的用户群体提供优质服务。在这种情况下,网络用户行为分析对于运营商来说显得尤为重要,而流量监测技术则为网络用户行为分析提供了真实可靠的数据。 本文致力于网络用户行为规律及其分析技术的研究,研究所用数据均来自于国内运营商城域网环境,这也使得本文的研究成果能够反映当前国内网络用户行为现状。 本文主要内容和创新点如下: 用户会话行为统计分析:分析用户的会话行为有助于了解用户对网络的基本使用情况,然而当前对国内网络用户会话行为的研究仍然不够充分,针对这一问题,本文借鉴了国外相关研究中的方法,从会话行为指标随时间的分布特征、会话行为指标间的相关性、会话行为中的帕雷托效应三个方面对国内某城域网用户会话行为进行了统计分析,并对发现的用户会话行为规律进行了总结。该研究成果对于认识和理解国内网络用户会话行为具有重要价值。 用户上网时段喜好分析:许多工作研究不同时段的用户上网行为,然而目前尚缺乏对用户上网时间使用情况的研究。本文通过分析真实网络环境下的用户上网时间数据发现并验证了用户上网时间分布的近相似性。在该特性基础上,开发了基于快速分组的层次聚类算法(HCFG),挖掘用户的上网时段喜好模式。根据实际应用环境,我们提出了以时段重合率为指标的时段喜好显著性评估方法,并结合聚类结果结构指标和时间复杂度对HCFG算法进行了评估。评估结果表明HCFG算法能够显著区分不同模式下的用户喜好时段,达到了聚类的目的,并且其时间复杂度较低,是一种高效的用户喜好时段发现算法。 用户Web喜好分析:Web喜好分析对于制定个性化服务和定向营销意义重大,目前缺乏针对用户全网Web喜好的分析。本文对城域网用户全网Web喜好进行了研究,通过对用户Web访问数据的统计分析,得到了各Web类型在用户中的流行程度的排名,并发现用户对Web类型的访问具有一定的选择性。聚类常用于发现用户Web访问喜好的主要模式,但也面临着如何实现对高维数据进行有效压缩的问题,针对该问题,本文提出了基于量值的频繁闭项集层次聚类算法(CFIHCQ),该算法通过频繁闭项集挖掘发现用户频繁Web访问行为,既实现了对数据维度的压缩,又达到了发现用户稳定行为模式的目的,该算法的结果可明确表示用户对Web类型的喜好程度。我们对该算法进行了较为全面的评估,主要包括聚类结果评估、算法参数评估和复杂度分析。评估结果表明,该算法的聚类结果对用户未来的Web访问行为具有较好的预测能力,聚类结果的结构特性好,且能够显著的表明用户的Web喜好模式,该算法在聚类数目的选取上有较好的灵活性,在大数据量情况下效率较高。 用户Web访问状态转移研究:研究用户动态行为是网络用户行为分析的热点之一,目前多数相关研究关注用户对单个网站的Web访问动态行为,缺乏对用户全网Web访问动态行为的研究。本文首次从全网角度研究了用户的Web访问状态转移模式,对连续多天在线用户Web访问状态序列进行了统计分析,分析结果说明用户未来的Web访问状态在一定程度上可由历史状态进行预测。状态转移矩阵是研究状态变化的有效工具。本文提出了连续Web访问状态转移矩阵(CWSTM)的概念,并开发了基于熵的CWSTM聚类算法,该算法通过在CWSTM中引入熵,提高了聚类结果中确定性转移概率的识别数量。实验表明,状态转移模式中含有转移概率确定性越强,对于用户下一状态预测效果越好,从而说明通过引入熵提高确定性转移概率的识别数量是非常有意义的。
【学位授予单位】:北京邮电大学
【学位级别】:博士
【学位授予年份】:2011
【分类号】:TP393.07

【引证文献】
中国期刊全文数据库 前2条
1 魏浩;陈性元;王超;杜学绘;;一种基于数据流分析的网络行为检测[J];计算机应用研究;2013年12期
2 陈勇;;GPRS用户行为特征分析[J];软件;2012年12期
中国硕士学位论文全文数据库 前5条
1 杜杰;基于校园网海量访问日志的用户行为分析[D];大连海事大学;2012年
2 樊庆君;Windows系统内存取证研究及实现[D];华北电力大学;2012年
3 邓宇超;企业网用户行为分析[D];北京邮电大学;2013年
4 郝增勇;基于Hadoop用户行为分析系统设计与实现[D];北京交通大学;2014年
5 李政泽;微博用户行为分析技术的研究与实现[D];国防科学技术大学;2012年
【参考文献】
中国期刊全文数据库 前7条
1 马宁,毛小玲;关于目前以太网接入相关问题的探讨[J];电信建设;2002年03期
2 苏红;万国根;;基于用户行为关联分析的电子取证系统研究[J];电信科学;2010年12期
3 李君;王攀;孙雁飞;王浩云;;P2P业务流量识别、分析和控制研究[J];计算机工程;2006年11期
4 潘蕾;苏晶;徐汀荣;;网络访问行为关联规则提取的研究与设计[J];计算机应用与软件;2008年03期
5 朱建平;来升强;;时态数据挖掘在手机用户消费行为中的应用[J];数理统计与管理;2008年01期
6 戴臻;费洪晓;李俊;谢文彪;肖新华;;基于特定模式树的用户行为关联规则挖掘算法[J];计算机系统应用;2007年05期
7 黄春宁;;一种基于ARMA模型的移动通信网管数据挖掘系统设计方法[J];科技资讯;2010年06期
中国博士学位论文全文数据库 前2条
1 林平;网络流量的离线分析[D];北京邮电大学;2010年
2 窦伊男;根据多维特征的网络用户分类研究[D];北京邮电大学;2010年
中国硕士学位论文全文数据库 前1条
1 董富强;网络用户行为分析研究及其应用[D];西安电子科技大学;2005年
【共引文献】
中国期刊全文数据库 前10条
1 申明金;模湖K均值聚类分析用于染料的分类[J];安庆师范学院学报(自然科学版);2005年02期
2 董明哲;充电电池容量预测的算法研究[J];鞍山师范学院学报;2000年03期
3 徐正光,王海涛,瞿寿德;基于统计空间映射的模式识别及在线质量推断[J];北京科技大学学报;2001年02期
4 徐正光,瞿寿德,于连荣;基于统计空间映射的自学习模式识别方法[J];北京科技大学学报;2003年05期
5 易中凯,吴沧浦;一种用于多类模式识别的综合感知器网络和学习算法[J];北京理工大学学报;2001年04期
6 刘万春,罗双华,朱玉文,谢世斌;基于聚类分析和支持向量机的布匹瑕疵分类方法[J];北京理工大学学报;2004年08期
7 刘毅,邵庆余,李桥;医学图象的边界处理[J];北京生物医学工程;1997年01期
8 张兴;颜志;肖静;蔡雯琦;王文博;;无线网络业务行为——特性分析与行为建模[J];北京邮电大学学报;2010年05期
9 延皓;张博;刘芳;雷振明;;基于量值的频繁闭项集层次聚类算法[J];北京邮电大学学报;2011年06期
10 欧阳秀平;王攀;饶翔;李薇;汪英;;基于多识别引擎的下一代网络业务识别模型[J];重庆邮电大学学报(自然科学版);2008年01期
中国重要会议论文全文数据库 前7条
1 孙浩军;刘志辉;孔令俊;;一种基于交叠率聚类的改进[A];2007'仪表,自动化及先进集成技术大会论文集(二)[C];2007年
2 刘宁宁;孙铁;瞿寿德;;基于图象序列的水泥煅烧区的温度预报研究[A];1995年中国智能自动化学术会议暨智能自动化专业委员会成立大会论文集(下册)[C];1995年
3 陈爱军;魏祥泉;朱兵;;卫星遥感图像中河流的快速提取方法[A];2006年全国光电技术学术交流会会议文集(D 光电信息处理技术专题)[C];2006年
4 李政泽;韩毅;周斌;贾焰;;微博用户分类的特征词权重优化及推荐策略[A];第27次全国计算机安全学术交流会论文集[C];2012年
5 孙珠峰;朱伟良;郑文恩;;水面舰艇机动规避鱼雷协同模式研究[A];中国造船工程学会电子技术学术委员会——2012年水下复杂战场环境目标识别与对抗及仿真技术学术交流论文集[C];2012年
6 李子玉;陈希;李美玲;;一种基于流量和payload双重特征识别P2P流量的方法研究[A];中国空气动力学会测控技术专委会第六届四次学术交流会论文集[C];2013年
7 李夕海;张斌;;基于核Fisher判别分析的核爆地震识别[A];陕西地球物理文集(五)国家安全与军事地球物理研究[C];2005年
中国博士学位论文全文数据库 前10条
1 谢超;自适应地图可视化关键技术研究[D];解放军信息工程大学;2009年
2 王旭;基于声发射技术的聚乙烯自增强复合材料损伤模式识别研究[D];东华大学;2010年
3 于秋水;基于图像处理方法的光学瞄具自动调焦技术研究[D];长春理工大学;2011年
4 朱方;多信息融合模式分类方法研究及在公交客流识别系统中的应用[D];河北工业大学;2010年
5 郭志军;周扫式光电预警实时图像处理系统的研究[D];中国科学院研究生院(长春光学精密机械与物理研究所);2011年
6 王新良;僵尸网络异常流量分析与检测[D];北京邮电大学;2011年
7 史志存;电子鼻及其应用研究[D];中国科学院电子学研究所;2000年
8 万朋;合成孔径雷达目标检测及相关技术研究[D];电子科技大学;2000年
9 王学良;基于成像光谱图像特征的处理方法研究[D];中国科学院长春光学精密机械与物理研究所;2000年
10 陈遵德;地震储层信息智能处理方法研究[D];成都理工学院;2001年
中国硕士学位论文全文数据库 前10条
1 王素云;基于特征进程的P2P流量识别方法研究[D];山东科技大学;2010年
2 王文栋;GEP及SVM融合的分类技术研究[D];广西师范学院;2010年
3 董衍堂;基于铌酸锂晶体的体全息存储与相关识别研究[D];哈尔滨工程大学;2010年
4 刘义红;基于Bayes统计学习的语义图像检索研究[D];华东师范大学;2010年
5 葛苗苗;基于校园网的网络用户行为分析研究[D];南京财经大学;2010年
6 于天;一种在线动态心电信号聚类分析策略[D];天津理工大学;2010年
7 张鸣;网游用户行为数据分析与挖掘[D];华南理工大学;2010年
8 冯学桥;基于稀疏表示的脱机手写体汉字识别研究[D];山东大学;2010年
9 李世娟;基于人工免疫算法的在线产品检测应用与研究[D];沈阳大学;2010年
10 李冬梅;基于CPU软件无线电的调制方式识别方法研究[D];西安电子科技大学;2011年
【同被引文献】
中国期刊全文数据库 前10条
1 于立红;杜芸;;数据挖掘中数据预处理方法与技术[J];安徽电子信息职业技术学院学报;2009年04期
2 沈奕,滑峰,刘椿年;基于GDT的对FOIL系统的改进[J];北京工业大学学报;2005年02期
3 陈龙;谭响林;高如岱;;智能取证技术研究[J];重庆邮电大学学报(自然科学版);2009年04期
4 李华锋;吴友蓉;;数据挖掘中的预处理技术研究[J];成都纺织高等专科学校学报;2010年02期
5 陈华;蒋文保;陈德礼;许能;;高速网络取证的数据分析模型[J];赤峰学院学报(自然科学版);2009年10期
6 赵小冬;;校园网用户上网行为的安全管理[J];产业与科技论坛;2011年06期
7 蒋群;王九如;;Web日志挖掘与上网行为习惯分析[J];电脑知识与技术;2008年12期
8 曹记东;;基于Windows物理内存的计算机取证技术的研究[J];电脑知识与技术;2011年27期
9 苏红;万国根;;基于用户行为关联分析的电子取证系统研究[J];电信科学;2010年12期
10 陈洪波;电子政务网络安全事件预警与应急响应[J];计算机安全;2004年02期
中国博士学位论文全文数据库 前5条
1 孙波;计算机取证方法关键问题研究[D];中国科学院研究生院(软件研究所);2004年
2 王晋;一种基于移动代理的自适应的分布式入侵检测系统的架构与实施[D];中国科学院研究生院(软件研究所);2005年
3 陈龙;计算机取证的安全性及取证推理研究[D];西南交通大学;2009年
4 刘鹏;网络用户行为分析的若干问题研究[D];北京邮电大学;2010年
5 窦伊男;根据多维特征的网络用户分类研究[D];北京邮电大学;2010年
中国硕士学位论文全文数据库 前10条
1 张琦;计算机取证中的内存镜像获取的研究与实现[D];吉林大学;2011年
2 刘秀波;基于计算机物理内存分析的Rootkit查找方法研究与实现[D];山东轻工业学院;2011年
3 孙燕花;基于聚类的网络用户行为分析[D];中南大学;2011年
4 罗朝晖;计算机犯罪侦查取证技术——计算机证据研究[D];北京工业大学;2003年
5 杨斌;移动通信网中GPRS中Gn接口的信令协议分析[D];重庆大学;2003年
6 李海芬;Pareto分布的统计分析[D];华东师范大学;2004年
7 吕德明;船舶推进动力装置状态监控的网络信息化[D];大连海事大学;2006年
8 隋喆;群体网络行为模型研究与应用[D];四川大学;2006年
9 蒋中云;基于多代理的网络入侵动态取证的研究[D];江南大学;2006年
10 董春辉;电信运营商信息安全建设规划[D];山东大学;2007年
【二级引证文献】
中国期刊全文数据库 前1条
1 袁海;刘幺和;李采;;基于物联网的车辆运输管理系统研究与实现[J];计算机与数字工程;2014年10期
中国硕士学位论文全文数据库 前1条
1 李游;基于校园网的用户行为分析研究[D];云南大学;2013年
【二级参考文献】
中国期刊全文数据库 前10条
1 李春梅;吴云峰;;基于客户个性偏好的服务匹配与选择的研究[J];楚雄师范学院学报;2007年06期
2 武斌;杨义先;郑康锋;;入侵检测中基于序列模式的告警关联分析[J];电子科技大学学报;2009年03期
3 吴桦,丁伟;基于奇异谱方法的网络行为分析[J];东南大学学报(自然科学版);2002年06期
4 杜文华;Web使用挖掘综述[J];电脑开发与应用;2003年04期
5 王攀;张顺颐;陈雪娇;;基于DBP的Web用户行为分析关键技术[J];电信快报;2008年08期
6 李江涛,姜永玲;P2P流量识别与管理技术[J];电信科学;2005年03期
7 钟茂生;廖辉传;谢勇;;面向用户兴趣的Web信息过滤系统[J];广西师范大学学报(自然科学版);2006年04期
8 曲桂英;冯丽娜;张志嵩;张志海;;基于用户兴趣模型的个性化信息服务系统研究[J];哈尔滨商业大学学报(自然科学版);2007年03期
9 宋擒豹,沈钧毅;Web日志的高效多能挖掘算法[J];计算机研究与发展;2001年03期
10 韩家炜,孟小峰,王静,李盛恩;Web挖掘研究[J];计算机研究与发展;2001年04期
中国博士学位论文全文数据库 前2条
1 郭岩;网络日志中用户兴趣的挖掘及利用[D];中国科学院研究生院(计算技术研究所);2004年
2 李超锋;Web使用挖掘关键技术研究[D];华中科技大学;2007年
【相似文献】
中国期刊全文数据库 前10条
1 徐卫;陈丽亚;刘功申;;基于用户行为分析的网站广告投放策略[J];计算机工程与应用;2006年28期
2 马维亮;;用户行为分析系统在宽带网络中的应用[J];科技信息(科学教研);2008年23期
3 乔志伟;;基于用户行为的3G业务分析与探讨[J];移动通信;2010年12期
4 龚尚福;姜晓旭;;基于用户行为分析的广告欺诈点击检测[J];计算机应用与软件;2011年04期
5 陶彩霞;谢晓军;陈康;郭利荣;刘春;;基于云计算的移动互联网大数据用户行为分析引擎设计[J];电信科学;2013年03期
6 毛承洁;张龙;庞川;陈洁敏;;社会网络服务及其用户行为分析[J];华南师范大学学报(自然科学版);2013年02期
7 雒江涛;胡燕清;徐孝娜;周进艳;;基于CDMA2000 1x EVDO网络的用户行为分析模型设计[J];电视技术;2013年07期
8 许春玲;范志刚;郑小盈;李明齐;;有线电视用户行为分析实践[J];网络新媒体技术;2014年01期
9 李朝阳;谢传中;;一种移动互联网用户行为分析系统的顶层设计[J];江西通信科技;2014年01期
10 刘英梅;;大数据时代的信息用户行为分析[J];科技情报开发与经济;2014年05期
中国重要会议论文全文数据库 前9条
1 赵勇;;移动互联网用户行为分析系统技术架构浅析[A];2012全国无线及移动通信学术大会论文集(下)[C];2012年
2 冯铭;王保进;蔡建宇;;基于云计算的可重构移动互联网用户行为分析系统的设计[A];CCF NCSC 2011——第二届中国计算机学会服务计算学术会议论文集[C];2011年
3 岑荣伟;刘奕群;张敏;茹立云;马少平;;网络搜索引擎用户行为分析和研究[A];第五届全国信息检索学术会议论文集[C];2009年
4 赵艳梅;朱晓燕;;转变运维模式,迎接移动互联网新挑战[A];中国通信学会信息通信网络技术委员会2011年年会论文集(上册)[C];2011年
5 刘奕群;张敏;马少平;;用户行为分析在网络信息检索中的应用概述[A];全国第八届计算语言学联合学术会议(JSCL-2005)论文集[C];2005年
6 毛翔博;齐观德;李石坚;潘纲;;基于位置轨迹加权网络图的用户行为分析识别算法[A];第六届和谐人机环境联合学术会议(HHME2010)、第19届全国多媒体学术会议(NCMT2010)、第6届全国人机交互学术会议(CHCI2010)、第5届全国普适计算学术会议(PCC2010)论文集[C];2010年
7 尔古打机;苏小龙;朱征;;基于用户行为分析的移动终端偏好模型研究[A];第八届(2013)中国管理学年会——商务智能分会场论文集[C];2013年
8 陈磊;茹立云;马少平;;基于用户日志挖掘的搜索引擎广告效果分析[A];第四届全国学生计算语言学研讨会会议论文集[C];2008年
9 吴强;;基于区域、时段和用户行为分析话务量变化[A];中国通信学会信息通信网络技术委员会2009年年会论文集(上册)[C];2009年
中国重要报纸全文数据库 前4条
1 谭景华杨国良;IP网络用户行为分析方法的探讨[N];人民邮电;2007年
2 本报记者 逄丹;建设用户行为分析智慧模型[N];通信产业报;2010年
3 李中朝通讯员 黄伟;重庆电信建成宽带用户行为分析系统[N];人民邮电;2007年
4 记者 顾洪洪;逾六成木马网站涉黄[N];新华每日电讯;2009年
中国博士学位论文全文数据库 前4条
1 刘鹏;网络用户行为分析的若干问题研究[D];北京邮电大学;2010年
2 延皓;基于流量监测的网络用户行为分析[D];北京邮电大学;2011年
3 窦伊男;根据多维特征的网络用户分类研究[D];北京邮电大学;2010年
4 岑荣伟;基于用户行为分析的搜索引擎评价研究[D];清华大学;2010年
中国硕士学位论文全文数据库 前10条
1 周岳;基于兴趣分类的用户行为分析系统的研究与设计[D];北京邮电大学;2010年
2 郑桂凤;移动互联网的用户行为分析系统的设计与实现[D];北京邮电大学;2010年
3 魏彦鹏;基于移动社会网络的用户行为分析[D];北京邮电大学;2011年
4 董富强;网络用户行为分析研究及其应用[D];西安电子科技大学;2005年
5 高峰;基于兴趣分类的用户行为分析系统的研究[D];山东大学;2010年
6 何速;社会电视用户行为分析[D];国防科学技术大学;2011年
7 王海明;面向博文搜索的用户行为分析技术研究与应用[D];东北大学;2010年
8 李威;移动互联网用户行为分析研究[D];北京邮电大学;2013年
9 毛严奇;社交云平台下用户行为分析的研究[D];湖南师范大学;2013年
10 胡畅;用户行为分析系统设计[D];湖北工业大学;2011年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026