收藏本站
《华南理工大学》 2010年
收藏 | 手机打开
二维码
手机客户端打开本文

垃圾邮件检测与过滤关键技术研究

刘卫红  
【摘要】:随着互联网的普及应用,网上各种垃圾信息尤其是垃圾邮件也随着互联网的广泛应用而充塞在整个互联网上,对人们的工作生活和经济带来了重大的影响。因此,有效的垃圾邮件检测与过滤技术的研究是十分必要且切合实际需要的。 在垃圾邮件的检测与过滤技术方面,国内外已有众多的相关研究,但是由于作弊者作弊技术的不断提高,相应的检测与过滤技术也需要不断地更新进步。在此发展形式下,本文对垃圾邮件的检测与过滤技术、垃圾信息的特征复原等多项关键技术进行了研究。本文的研究内容和创新工作主要包括以下几个方面: 1从理论上证明了指纹向量距离在相似性垃圾信息检测与过滤方面应用的可行性。编辑距离是相似文档比较中精度最高的一种技术,但是其计算复杂度高、运算速度慢,具有较大的应用局限性。q元距离相对于编辑距离,精度降低了,但同时也降低了系统的复杂度,提高了运算速度。指纹向量距离是在q元距离的基础上将q元进行指纹映射,该方法提高了计算速度,但同时也引入了误差,降低了精度。本文通过理论分析,为指纹向量技术在垃圾信息过滤问题上的应用提供了理论依据。 2在理论证明的基础上,实践上证明了指纹向量距离在垃圾信息过滤问题中的有效性。采用基于指纹向量的方法进行垃圾信息的检测,在公开数据集以及实际邮件系统数据集上的实验表明,基于指纹向量的垃圾邮件检测方法在垃圾邮件漏报率上与简单贝叶斯方法相比具有较优的效果,且与常规方法相比具有存储量小、计算代价小的优点。 3本文提出了一种在线垃圾邮件主动学习过滤技术。该技术是基于流的委员会投票主动学习。通过与多种垃圾邮件过滤方法进行对比实验,实验结果表明该技术可以在使用少量标记的情况下能获得好的过滤性能,大大减少训练次数,提高计算性能,降低计算代价,降低人工干预次数。 4本文提出了一种基于梯度树提升法的条件随机域技术对垃圾信息特征进行复原的方法。实验表明,采用基于梯度树提升法的条件随机域技术对垃圾信息进行预处理后,提高了垃圾邮件的检测精度。
【学位授予单位】:华南理工大学
【学位级别】:博士
【学位授予年份】:2010
【分类号】:TP393.098

【引证文献】
中国硕士学位论文全文数据库 前1条
1 王鹏;基于语义体与文本聚类的中文垃圾邮件过滤方法研究[D];兰州理工大学;2012年
【参考文献】
中国期刊全文数据库 前10条
1 刘卫红;方卫东;;一种自适应垃圾邮件过滤算法[J];微计算机信息;2009年33期
2 刘卫红;方卫东;张凌;董守斌;;指纹向量在垃圾邮件检测中的应用[J];陕西科技大学学报(自然科学版);2009年05期
3 孔维华;刘继承;陈娟;;基于优化Naive Bayes的垃圾邮件过滤[J];计算机安全;2009年01期
4 欧红星;杨路明;;垃圾邮件过滤技术研究[J];湖南科技学院学报;2008年12期
5 张萍;韩立娜;;对邮件过滤技术发展现状的比较与分析[J];计算机与数字工程;2008年04期
6 蒋秋香;叶苗;麦范金;;垃圾邮件过滤技术的发展与现状[J];电脑知识与技术(学术交流);2007年21期
7 田泽;颜松远;徐敬东;;基于改进K近邻的垃圾邮件过滤技术[J];计算机工程与应用;2007年25期
8 陈治平;王雷;;基于自学习K近邻的垃圾邮件过滤算法[J];计算机应用;2005年S1期
9 方卫东,袁华,刘卫红;基于Web挖掘的领域本体自动学习[J];清华大学学报(自然科学版);2005年S1期
10 李玉鑑;符号序列之间的归一化距离度量[J];北京工业大学学报;2005年04期
【共引文献】
中国期刊全文数据库 前10条
1 杨曦;莫颖宁;顾正位;;我国农村中药市场现状及对策[J];中国现代中药;2015年09期
2 李坤;单文娟;周晓霞;;农村假劣药品现状分析及对策研究[J];吉林医药学院学报;2014年06期
3 颜晓航;高志峰;杨化新;;部分发达国家药品应急管理经验启示[J];中国药事;2014年09期
4 陈艳;;浅谈农村药品市场存在的问题及对其进行监管的对策[J];当代医药论丛;2014年12期
5 千永香;;药品流通监管中存在的问题及对策[J];中国医药科学;2013年24期
6 谢丽云;段利忠;卢奇;杨良燕;;城乡药品流通模式的利弊分析与思考[J];医药导报;2013年10期
7 涂建明;;股东利益与公共利益的冲突和协调——以药品安全问题为例[J];武陵学刊;2013年05期
8 贡庆;李文思;陈婕;陈澄;;上海部分群众对药品召回认知与态度的调查研究[J];中国药事;2013年03期
9 侯艳红;孙羽佳;;医药逆向物流系统构建及优化研究[J];中国医药技术经济与管理;2013年02期
10 孙敏;;中国药品安全的监管失灵及其治理——对“毒胶囊”事件的剖析[J];吉林工商学院学报;2012年06期
【同被引文献】
中国硕士学位论文全文数据库 前10条
1 韩金哲;风险社会背景下中国食品安全监管理念的变革[D];上海师范大学;2013年
2 马全臻;我国农村药品市场监管发展研究[D];西北农林科技大学;2012年
3 肖帆;医药经济发展中的政府监管研究[D];华中师范大学;2012年
4 李璨;我国中药材物流管理的研究[D];湖北中医药大学;2012年
5 林虹;我国当前药品安全研究[D];西南财经大学;2012年
6 李珊珊;市场背景下药品行业监管的法律规制[D];吉林财经大学;2012年
7 张磊;基于WebService的企业供销管理系统与电子商务集成研究[D];辽宁工程技术大学;2012年
8 张攀;我国基本药物制度下的药品安全问题研究[D];西北大学;2011年
9 胡喆;药品行政处罚的法律问题研究[D];内蒙古大学;2011年
10 李金清;药品安全监管现状及问题研究[D];华东理工大学;2011年
【二级参考文献】
中国期刊全文数据库 前10条
1 于欣;我国医疗器械生产企业监督管理现状[J];中国药事;2005年01期
2 谢先德;试论农村药品监管及供应问题[J];中国药事;2005年01期
3 隋晓燕;山东省食品药品安全协调委员会成立[J];齐鲁药事;2004年09期
4 赵健;邵蓉;;浅析我国《药品管理法》对假劣药的界定[J];药学进展;2004年08期
5 张天,丁德海;中国药品产业管制制度及其演进[J];中国药事;2004年07期
6 高旭东;农村药品市场监管现状及其改进办法[J];江苏药学与临床研究;2004年02期
7 邹江;农村药品市场监管模式初探[J];中国药事;2004年04期
8 张启华 ,张珺;问题药品为何难行“召回制”?[J];中国药店;2004年04期
9 傅象家;农村医药市场的综合治理探讨[J];中国药业;2004年02期
10 何士忠;农村药品市场调查[J];中国药业;2004年02期
【相似文献】
中国期刊全文数据库 前10条
1 刘辉;罗文;;垃圾邮件及反垃圾邮件的策略研究[J];科技资讯;2006年08期
2 李兆翠;刘培玉;周洪利;;基于贝叶斯方法的客户端邮件过滤器的设计与实现[J];信息技术与信息化;2007年03期
3 缪宁;欧蕾;;浅谈垃圾邮件的危害及对策[J];电脑知识与技术;2010年16期
4 何振华;;一种处理垃圾邮件的新方法[J];福建电脑;2008年03期
5 袁奉卫;垃圾邮件是一大社会公害[J];卫生职业教育;2004年22期
6 方学军;浅谈对垃圾邮件的处理[J];南平师专学报;2000年02期
7 张素娟,吴涛,马军;垃圾邮件探析[J];河北理工学院学报;2005年03期
8 尹军,谭晓兰;校园网络中如何防范垃圾邮件[J];衡阳师范学院学报;2005年03期
9 李旸,朱军,高宁;网络垃圾邮件对策之分析[J];农业网络信息;2005年09期
10 尹勇;;垃圾邮件的危害与防范[J];科协论坛(下半月);2013年01期
中国重要会议论文全文数据库 前10条
1 薛亚楠;廖闻剑;彭艳兵;;垃圾邮件行为识别研究[A];中国电子学会第十六届信息论学术年会论文集[C];2009年
2 蒯莉;;网络垃圾邮件的防范与治理[A];第十六次全国计算机安全学术交流会论文集[C];2001年
3 张宇;刘挺;;残缺邮件与完整邮件分离技术的研究[A];全国网络与信息安全技术研讨会’2004论文集[C];2004年
4 梁宏;张慧云;肖新光;;基于社会工程学的邮件样本关联分析[A];第30次全国计算机安全学术交流会论文集[C];2015年
5 沈卫超;;邮件过滤器系统的设计与实现[A];中国工程物理研究院科技年报(2001)[C];2001年
6 李军辉;朱巧明;钱培德;;邮件语料库的语料添加算法研究与实现[A];中文信息处理前沿进展——中国中文信息学会二十五周年学术会议论文集[C];2006年
7 仇小锋;陈鸣;贾永兴;;垃圾邮件及其防范技术[A];第九届全国青年通信学术会议论文集[C];2004年
8 刘磊;;让企业邮局系统远离垃圾邮件的困扰[A];中国核工业勘察设计协会2014年优秀论文集[C];2014年
9 邬江;;基于垃圾邮件检测及过滤技术的研究[A];决策论坛——系统科学在工程决策中的应用学术研讨会论文集(上)[C];2015年
10 李毅;顾健;顾铁军;;基于朴素贝叶斯方法的邮件样本预筛选[A];全国计算机安全学术交流会论文集·第二十五卷[C];2010年
中国重要报纸全文数据库 前10条
1 记者 董娜 通讯员 陈滢 谢柏林;我市进出境邮件突破3000万件[N];宁波日报;2018年
2 记者 汪文汉 通讯员 叶青;去年武汉进出境邮件突破2000万件[N];长江日报;2019年
3 齐向真 郭燕妮;我市同城邮件快件投递前须安检[N];太原日报;2019年
4 云龙;对全程陆运邮件操作规范的思考[N];中国邮政报;2019年
5 方奕晗;老板的邮件你读懂了吗[N];中国青年报;2015年
6 记者 安慧芳 通讯员 黄紫微;铜仁邮政每日吞吐数万邮件[N];贵州日报;2018年
7 本报特派记者 祝越;以“工匠精神”把邮件精准送达千家万户[N];文汇报;2018年
8 周唯;邮件高峰能带来什么[N];中国邮政报;2018年
9 记者 吉蕾蕾;中欧班列首次邮件进口测试成功[N];经济日报;2018年
10 记者 云娜;我市“双11”期间累计处理邮件、快件162.7万件[N];乌兰察布日报;2018年
中国博士学位论文全文数据库 前4条
1 刘卫红;垃圾邮件检测与过滤关键技术研究[D];华南理工大学;2010年
2 陈彬;垃圾邮件的特征选择及检测方法研究[D];华南理工大学;2010年
3 王美珍;垃圾邮件行为模式识别与过滤方法研究[D];华中科技大学;2009年
4 王友卫;基于统计的垃圾邮件识别关键技术研究[D];吉林大学;2015年
中国硕士学位论文全文数据库 前10条
1 代伟;邮件过滤器的设计与实现[D];吉林大学;2010年
2 郑巍;垃圾邮件问题的法律规制[D];北京邮电大学;2008年
3 姚屹东;邮件安全审计和过滤技术的研究与实现[D];电子科技大学;2007年
4 梁荣金;企业内网垃圾邮件监控软件设计[D];电子科技大学;2009年
5 陈凌云;垃圾邮件的侵权法规制[D];吉林大学;2006年
6 盛鹏;基于全文过滤的垃圾邮件防范机制[D];昆明理工大学;2006年
7 张骏;基于内容的垃圾邮件智能过滤系统研究[D];浙江工业大学;2006年
8 刘庆雄;基于数据驱动的垃圾邮件检测技术研究[D];华东交通大学;2016年
9 胡锡衡;垃圾邮件的分析与过滤[D];辽宁科技大学;2008年
10 罗常泳;基于内容的垃圾邮件检测方法研究[D];浙江大学;2014年
中国知网广告投放
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026