收藏本站
《山东大学》 2013年
收藏 | 手机打开
二维码
手机客户端打开本文

网络安全热点分析系统的研究与开发

柳淑明  
【摘要】:当前互联网的迅猛发展,使得互联网的应用渗透到了各行各业,为人们的生活提供了极大的便利,因为互联网的虚拟性,为网络犯罪提供了便利,利用互联网的漏洞来进行攻击等等。当前主流的网络安全热点分析系统的研究和开发主要是基于自然语言处理技术,里面分析热点的关键方法是基于主题模型的LDA模型[4]和N-gram模型[7]从海量数据中提取重点信息。用自然语言处理技术来进行网络安全热点分析,得到的热点准确性较高,现在流行的无监督学习方法更是方便可行,不用人工手动去分类,而是通过一系列的训练数据自动进行识别分类,提高了分类的准确性和效率。 本论文的主要描述了网络安全热点分析的一种方法——基于主题模型的网络安全热点识别方法。首先,需要用网络爬虫技术来将海量数据按照规则爬取下来;其次,用基于LDA模型[4]和基于N-gram模型[7]主题模型来提取海量数据的主题,主题即是海量数据背后隐藏的核心观点;接着,分析主题部分采用了建造主题链和趋势分析两种方法对比效果,目的是一样的要找到热点,但是两者的侧重点不同,趋势分析部分需要引入时间的维度进行分析;最后,采用WiGis[3]工程来实现每个主题链的可视化。 本论文的另外一个主要工作是开发出一款基于主题模型的网络安全热点分析的框架系统。本文设计与实现的系统分为了B/S与C/S两种架构相结合的模式。使用了J2EE技术下的MVC开发框架结构,并使用了开源的SSH (Spring、 Struts、 Hibernate)作为系统框架结构。该系统使用多线程技术,提高了系统整体的执行效率。该框架系统运用了多模块化设计方式,因此具有良好地可扩展性。系统运行中的爬虫技术、主题模型提取主题、建造主题链和趋势分析安全热点走向、可视化实验结果等等都可以通过配置进行修改。 通过分析大量网络安全数据信息来对系统功能进行测试,经过分析该系统可以提取到比较准确的主题和主题链,通过趋势分析模块可以较清晰看到主题随着时间变化情况。系统是通过各模块的协调配合,实现了从大量网络数据中提取到比较准确的安全热点,但是今后的工作会继续完善系统功能,通过技术改进实现更多的功能。
【学位授予单位】:山东大学
【学位级别】:硕士
【学位授予年份】:2013
【分类号】:TP311.52;TP393.08

手机知网App
【参考文献】
中国期刊全文数据库 前3条
1 刘金红;陆余良;;主题网络爬虫研究综述[J];计算机应用研究;2007年10期
2 赵敏涯;;结合语言模型的自动文本分类的应用研究[J];计算机与现代化;2010年03期
3 张洋;何楚杰;段俊文;杨春程;;微博舆情热点分析系统设计研究[J];信息网络安全;2012年09期
中国博士学位论文全文数据库 前1条
1 张雪英;基于粗糙集理论的文本自动分类研究[D];南京理工大学;2005年
【共引文献】
中国期刊全文数据库 前10条
1 王正;陆余良;刘金红;施凡;;基于Lucene的互联网文献信息检索系统的研究[J];安徽大学学报(自然科学版);2009年05期
2 吴教育;陈华政;钟雷;张勇;曾庆斌;刘海;;Apusic与JBoss的集群策略分析与研究[J];江西师范大学学报(自然科学版);2007年04期
3 毛晓蛟;;搜索引擎中网络蜘蛛的研究与实现[J];电脑编程技巧与维护;2010年18期
4 唐波;;网络爬虫的设计与实现[J];电脑知识与技术;2009年11期
5 周民;邱雅;王华彬;;网络舆情分析中智能爬虫的设计[J];电脑知识与技术;2011年33期
6 王岩;;搜索引擎中网络爬虫技术的发展[J];电信快报;2008年10期
7 马刚;基于JMX的JBoss体系结构研究[J];福建电脑;2005年12期
8 黄敏;;网络舆情热点挖掘算法研究与实现[J];安徽大学学报(自然科学版);2012年06期
9 屠要峰;钱煜明;;一种基于海量数据的信息云系统及其关键技术研究[J];电信科学;2012年12期
10 赵前东;叶猛;;微博热点话题检测系统的设计与实现[J];电视技术;2013年03期
中国重要会议论文全文数据库 前2条
1 吴晨生;刘彦君;张鲁冀;董晓晴;;科普搜索的研究与实现[A];数字博物馆研究与实践(2009)[C];2010年
2 单铁城;张安妮;马德辉;;基于爬虫改进算法的个性化搜索引擎应用研究[A];战略性新兴产业与科技支撑——2012年山东省科协学术年会论文集[C];2012年
中国博士学位论文全文数据库 前3条
1 田俊华;基于本体知识库的教学资源自动采集技术研究[D];南京师范大学;2011年
2 何琳;古农学本体的半自动构建及检索研究[D];南京农业大学;2007年
3 万源;基于语义统计分析的网络舆情挖掘技术研究[D];武汉理工大学;2012年
中国硕士学位论文全文数据库 前10条
1 陈可钦;基于垂直搜索引擎的主题爬虫算法的研究[D];中南林业科技大学;2009年
2 杨常清;基于粗糙集的属性约简算法研究[D];西安电子科技大学;2010年
3 华大年;手机产品信息垂直搜索引擎系统设计与开发[D];武汉理工大学;2011年
4 乔宇;一种基于主题数据的存取调度模型的研究[D];北京邮电大学;2011年
5 郭艳芬;林业主题搜索引擎的设计与实现[D];北京林业大学;2011年
6 连惠杰;基于主题的教育信息定向采集系统[D];南京理工大学;2011年
7 陈宗利;面向SNS的社会网络数据抓取与经验性分析[D];长安大学;2011年
8 卢凡;基于领域本体的主题爬虫系统研究与实现[D];电子科技大学;2011年
9 任晓霞;BBS舆情智能分析系统研究与实现[D];沈阳理工大学;2011年
10 王作飞;基于粗糙集的启发式属性约简特征选择方法研究[D];郑州大学;2011年
【二级参考文献】
中国期刊全文数据库 前10条
1 戚涌,徐永红,刘凤玉;基于潜在语义标引的WEB文档自动分类[J];计算机工程与应用;2004年22期
2 王强;张永奎;;基于SVM的中文报道关系识别方法研究[J];计算机工程与应用;2008年33期
3 孙晋文;肖建国;;基于SVM文本分类中的关键词学习研究[J];计算机科学;2006年11期
4 张敬芝;高强;耿桦;潘金贵;;统计自然语言处理中的线性插值平滑技术[J];计算机科学;2007年06期
5 李盛韬,赵章界,余智华;基于主题的Web信息采集系统的设计与实现[J];计算机工程;2003年17期
6 刘美茹;;基于LSI和SVM的文本分类研究[J];计算机工程;2007年15期
7 姚清耘;刘功申;李翔;;基于向量空间模型的文本聚类算法[J];计算机工程;2008年18期
8 王卫玲;刘培玉;初建崇;;一种改进的基于条件互信息的特征选择算法[J];计算机应用;2007年02期
9 周立柱;贺宇凯;王建勇;;情感分析研究综述[J];计算机应用;2008年11期
10 李卫;刘建毅;何华灿;王枞;;基于主题的智能Web信息采集系统的研究与实现[J];计算机应用研究;2006年02期
中国硕士学位论文全文数据库 前4条
1 张岚岚;新浪微博的网络舆情分析研究[D];华东师范大学;2011年
2 王宏勇;网络舆情热点发现与分析研究[D];西南交通大学;2011年
3 杨梅;网络舆情热点发现的研究[D];北京交通大学;2008年
4 齐海凤;网络舆情热点发现与事件跟踪技术研究[D];哈尔滨工程大学;2008年
【相似文献】
中国期刊全文数据库 前10条
1 易骥;网络安全与防火墙[J];人民公安;1999年11期
2 胡娟;冲浪——小心触礁[J];家庭电子;2001年06期
3 阿星;;网络安全不容忽视[J];电脑采购周刊;2002年32期
4 ;证券网络,说不完的安全话题 首创网络安全服务中心[J];电子测试;2002年02期
5 张平安;计算机网络系统安全构筑[J];深圳信息职业技术学院学报;2003年01期
6 王琨月;;病毒续写惊怵——2003年网络安全不容忽视[J];每周电脑报;2003年07期
7 ;为城域网保驾——思科为福建联通实施宽带IP网络安全二期改造[J];每周电脑报;2003年35期
8 彤欣;;网络安全导航图[J];中国计算机用户;2003年42期
9 张杰;企业信息化中网络安全的管理[J];煤炭企业管理;2004年04期
10 沈士根,汪承焱,谭召均;网络安全的基础——PKI[J];嘉兴学院学报;2004年03期
中国重要会议论文全文数据库 前10条
1 张建宇;廖唯棨;张行功;邹维;;网络处理器的发展及其在网络安全中的应用[A];全国网络与信息安全技术研讨会'2005论文集(下册)[C];2005年
2 贺飞;;网络安全实现结构[A];第十三届全国计算机安全技术交流会论文集[C];1998年
3 杜丞香;梁慕慧;;气象网络安全与计算机病毒的防护[A];第27届中国气象学会年会雷达技术开发与应用分会场论文集[C];2010年
4 李伟明;李之棠;;NSL:一种面向网络安全的语言[A];全国网络与信息安全技术研讨会’2004论文集[C];2004年
5 陈成;岳志伟;;浅谈政府门户网站的网络安全[A];中国航海学会航标专业委员会沿海航标学组、无线电导航学组、内河航标学组年会暨学术交流会论文集[C];2009年
6 邱晓鹏;张玉清;冯登国;;蠕虫攻防技术综述[A];全国网络与信息安全技术研讨会’2004论文集[C];2004年
7 王丽香;;网络信息建设与网络安全浅谈[A];山西省科学技术情报学会学术年会论文集[C];2004年
8 刘炳华;;基于国产设施的内部网安全系统集成[A];信息科学与微电子技术:中国科协第三届青年学术年会论文集[C];1998年
9 胡艳华;禚林强;;网络安全在医院信息化建设中的作用[A];第二十三届航天医学年会暨第六届航天护理年会论文汇编[C];2007年
10 邢建萍;;多方构建安全网络[A];第十二届全国核电子学与核探测技术学术年会论文集[C];2004年
中国重要报纸全文数据库 前10条
1 石爱;NetScreen推出全面的网络安全方案[N];通信产业报;2002年
2 记者史晓芳;中小企业应注重网络安全[N];中华工商时报;2003年
3 吕英;Top Layer网络安全方案亮相[N];通信产业报;2002年
4 本报记者 钱炜;政府应加大对网站维护的投入[N];科技日报;2009年
5 马蕾;第三方认证呼声渐高[N];人民邮电;2009年
6 陈飞雪;NETGEAR将安全融入到产品 大幅提升网络安全[N];中国计算机报;2002年
7 费振波 岳欣;自主研发结硕果网络安全显神威[N];黑龙江日报;2004年
8 赵建;网络安全防范问题为全球关注[N];国际商报;2003年
9 本版统筹/撰文 寒山;严望佳:用心护航中国网络安全[N];民营经济报;2006年
10 周雪;国内网络安全厂商坚持本土化[N];电脑商报;2008年
中国博士学位论文全文数据库 前10条
1 司加全;网络安全态势感知技术研究[D];哈尔滨工程大学;2009年
2 赖积保;基于异构传感器的网络安全态势感知若干关键技术研究[D];哈尔滨工程大学;2009年
3 李建平;面向异构数据源的网络安全态势感知模型与方法研究[D];哈尔滨工程大学;2010年
4 刘效武;基于多源融合的网络安全态势量化感知与评估[D];哈尔滨工程大学;2009年
5 孟锦;网络安全态势评估与预测关键技术研究[D];南京理工大学;2012年
6 李志东;基于融合决策的网络安全态势感知技术研究[D];哈尔滨工程大学;2012年
7 赵文涛;基于网络安全态势感知的预警技术研究[D];国防科学技术大学;2009年
8 杨天路;网络威胁检测与防御关键技术研究[D];北京邮电大学;2010年
9 马进;加载隐私保护的网络安全综合管理关键技术研究[D];上海交通大学;2012年
10 程文聪;面向大规模网络安全态势分析的时序数据挖掘关键技术研究[D];国防科学技术大学;2010年
中国硕士学位论文全文数据库 前10条
1 柳淑明;网络安全热点分析系统的研究与开发[D];山东大学;2013年
2 刘轰;基于Internet的远程监控系统及研究[D];河海大学;2003年
3 张雷;基于模式匹配的网络入侵检测系统研究[D];西南交通大学;2005年
4 任艳丽;关于不可否认协议中第三方的研究[D];陕西师范大学;2005年
5 汪兴东;基于BP神经网络的智能入侵检测系统的设计与实现[D];电子科技大学;2005年
6 向碧群;基于遗传算法的入侵检测系统研究[D];重庆大学;2005年
7 单长虹;计算机远程控制技术研究[D];武汉大学;2004年
8 徐小龙;遗传算法在智能入侵检测系统中的应用[D];曲阜师范大学;2006年
9 金飞;基于代理的分布式入侵检测系统的分析与设计[D];浙江大学;2006年
10 刘思培;基于移动代理的分布式入侵检测系统的设计与实现[D];吉林大学;2006年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026