收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

网站日志的数据挖掘

段晓峰  
【摘要】:随着INTERNET上数据量呈爆炸式的增长,信息数据的有用性变的十分必要。WEB挖掘是将数据挖掘技术应用于互联网,目前在许多研究领域都是热点。作者讨论了WEB挖掘和WEB挖掘的分类。根据挖掘的内容,WEB挖掘可分为三种,WEB使用挖掘,WEB内容挖掘,WEB结构挖掘。对每种挖掘,作者都讨论了与其相关的研究领域,技术和发展方向。WEB使用挖掘是本文主要的研究方向。 WEB使用挖掘是利用数据挖掘技术根据WEB使用数据挖掘用户访问网站的行为模式。网站使用记录挖掘不同与网站内容挖掘和网站结构挖掘,它的挖掘对象不是网上的原始数据,而是记录用户与网站交互的过程的数据。就些数据包括:客户端浏览器日志记录,网站服务器访问记录、代理服务器日志记录、用户注册信息等。WEB使用挖掘分为三个阶段,数据预处理,模式发现,模式分析。作者详细讨论了这三个阶段所遇到的问题和解决办法。 许多数据挖掘方法在WEB挖掘上都有很好的应用,作者讨论以下几种在WEB使用记录上常用的方法,统计分析方法,关联规则方法,序列模式方法,聚类方法,分类方法,并着重讨论关联规则方法应用于WEB使用记录的挖掘。关联规则方法在数据挖掘领域被广泛应用,它主要用于发现有用的模式,典型的例子就是购物篮分析。将关联规则应用于WEB使用记录挖掘的关键在于如何构造购物篮。用户点击网站的每一页所产生的动作都被服务器记录在日志中,分析日志文件,并结合网站的拓扑和实际内容,经过数据清理,用户识别,会话识别,事务识别四个数据预处理过程,我们可以获得一个事务集合,从而构造购物篮。作者详细讨论了在构造购物篮的过程中所遇到的问题和解决办法。Apriori 算法是一种著名的关联规则挖掘算法,本文讨论了该算法及其实现,并将其应用到一个典型的网站上。 最后,在这些工作的基础上,作者将WEB使用记录挖掘应用到重庆电视台互联网站上,得到了一些有用的模式。


知网文化
【相似文献】
中国期刊全文数据库 前20条
1 于海涛;;Web挖掘技术在搜索引擎中的应用[J];齐齐哈尔师范高等专科学校学报;2009年06期
2 袁柱;;电子商务中Web数据挖掘的应用研究[J];商场现代化;2007年22期
3 余华鸿;;电子商务中Web挖掘技术的应用[J];今日科苑;2008年18期
4 石岩;;Web挖掘技术在电子商务中的应用[J];科技情报开发与经济;2006年23期
5 宋艳;刘少华;;Web挖掘在电子商务中的应用[J];电脑知识与技术;2008年14期
6 史哲;;基于XML的Web数据挖掘及应用模式研究[J];科技创新导报;2011年02期
7 刘峰,张文鹏;远程教学系统中的关键技术——Web挖掘[J];南阳师范学院学报;2005年09期
8 陈伟;;Web挖掘在电子商务中的应用研究[J];商场现代化;2009年02期
9 柳珺;;Web挖掘技术与电子商务[J];商场现代化;2007年09期
10 秦鸿;基于Web的数据挖掘[J];电子科技大学学报;2002年S1期
11 李泽文;基于Web的数据挖掘技术[J];现代计算机;2004年07期
12 林苗;张广泉;;Web挖掘在Web交易中的应用[J];重庆师范大学学报(自然科学版);2007年03期
13 姜涌;吕冰;;Web挖掘技术在电子商务的应用[J];计算机与数字工程;2008年04期
14 杨风雷;阎保平;;Web用户行为模式挖掘研究[J];微电子学与计算机;2008年11期
15 张冬梅,张志东;构建基于Web数据挖掘技术的信息服务系统[J];图书情报工作;2003年02期
16 潘钧;一种有效的Web使用挖掘体系结构[J];扬州大学学报(自然科学版);2005年02期
17 崔国庆;乔佩利;;基于WEB挖掘的SWMS模型的研究与实现[J];哈尔滨理工大学学报;2006年05期
18 贾宇波,冯志友,孙淑荣,王永利;基于中间件的Web挖掘的研究现状分析[J];计算机应用研究;2003年02期
19 田小霞,刘晓霞,钟少丹;基于CORBA的Web数据挖掘工具的设计及应用[J];现代计算机;2003年02期
20 李献礼;;电子商务网站的Web数据挖掘系统设计[J];西南师范大学学报(自然科学版);2007年04期
中国重要会议论文全文数据库 前10条
1 丁瑾;;基于Web数据挖掘的综述[A];山西省科学技术情报学会学术年会论文集[C];2004年
2 易虹;许德刚;;Web数据挖掘的研究与应用[A];第一届全国Web信息系统及其应用会议(WISA2004)论文集[C];2004年
3 吴珊;杨桦;;基于日志挖掘的Web预取模型[A];2006年电气工程教育专业委员会年会论文集[C];2006年
4 薛鲁华;张楠;;聚类分析在Web数据挖掘中的应用[A];北京市第十三次统计科学讨论会论文选编[C];2006年
5 曾潮缤;罗键;;Web使用记录挖掘中的聚类分析研究[A];第二十一届中国数据库学术会议论文集(技术报告篇)[C];2004年
6 郭学军;陈晓云;;粗集方法在数据挖掘中的应用[A];第十六届全国数据库学术会议论文集[C];1999年
7 徐慧;;基于Web的文献数据挖掘[A];第十七届全国数据库学术会议论文集(技术报告篇)[C];2000年
8 孙迎;;医院信息的数据挖掘与方法研究[A];中华医学会第十次全国医学信息学术会议论文汇编[C];2004年
9 薛晓东;李海玲;;数据挖掘的客户关系管理应用[A];科技、工程与经济社会协调发展——河南省第四届青年学术年会论文集(下册)[C];2004年
10 郭建文;黄燕;印鉴;杨小波;梁兆辉;;建立中风病“阴阳类证”辨证规范的数据挖掘研究[A];中华医学会第十三次全国神经病学学术会议论文汇编[C];2010年
中国博士学位论文全文数据库 前10条
1 孙丽;工艺知识管理及其若干关键技术研究[D];大连交通大学;2005年
2 胡志坤;复杂有色金属熔炼过程操作模式智能优化方法研究[D];中南大学;2005年
3 刘革平;基于数据挖掘的远程学习评价研究[D];西南师范大学;2005年
4 刘寨华;基于临床数据分析的病毒性心肌炎证候演变规律研究[D];黑龙江中医药大学;2006年
5 王川;基因芯片数据管理及数据挖掘[D];中国科学院研究生院(上海生命科学研究院);2004年
6 王涛;挖掘序列模式和结构化模式的精简集[D];华中科技大学;2006年
7 郭斯羽;动态数据中的数据挖掘研究[D];浙江大学;2002年
8 李旭升;贝叶斯网络分类模型研究及其在信用评估中的应用[D];西南交通大学;2007年
9 刘东升;面向连锁零售企业的客户关系管理模型(R-CRM)研究[D];浙江工商大学;2008年
10 余红;网络时政论坛舆论领袖研究[D];华中科技大学;2007年
中国硕士学位论文全文数据库 前10条
1 蒲秋梅;基于XML的Web数据挖掘技术的研究[D];武汉大学;2004年
2 段晓峰;网站日志的数据挖掘[D];重庆大学;2003年
3 张承明;基于Web的数据挖掘研究[D];山东科技大学;2003年
4 陈敏;基于Web使用挖掘的知识发现研究[D];合肥工业大学;2005年
5 郭鹏;基于Web数据挖掘分类算法的个性化信息服务[D];太原理工大学;2003年
6 祝效普;WEB用户访问序列模式挖掘[D];天津大学;2005年
7 冶红;基于数据挖掘的Web挖掘系统的研究[D];大连理工大学;2003年
8 彭希鸿;基于Web内容挖掘的网页分类与过滤研究与应用[D];中南大学;2003年
9 潘延军;基于用户浏览内容的Web用户浏览行为个性化研究[D];天津大学;2005年
10 孙丽;Web数据的挖掘方法研究[D];大庆石油学院;2004年
中国重要报纸全文数据库 前10条
1 李开宇 黄建军 田长春;把“数据挖掘”作用发挥出来[N];中国国防报;2009年
2 华莱士;“数据挖掘”让银行赢利更多[N];国际金融报;2003年
3 记者 晏燕;数据挖掘让决策者告别“拍脑袋”[N];科技日报;2006年
4 □中国电信股份有限公司北京研究院 张舒博 □北京邮电大学计算机科学与技术学院 牛琨;走出数据挖掘的误区[N];人民邮电;2006年
5 张立明;数据挖掘之道[N];网络世界;2003年
6 中圣信息技术有限公司 李辉;数据挖掘在CRM中的作用[N];中国计算机报;2001年
7 田红生;数据挖掘在CRM中的应用[N];中国经济时报;2002年
8 王广宇;数据挖掘 加速银行CRM一体化[N];中国计算机报;2004年
9 周蓉蓉;数据挖掘需要点想像力[N];计算机世界;2004年
10 裴维玲;呼叫中心与数据挖掘,谁先上?[N];网络世界;2001年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978