收藏本站
《武汉理工大学》 2007年
收藏 | 手机打开
二维码
手机客户端打开本文

电子商务环境中分布式数据挖掘的研究

余小高  
【摘要】: 现代新兴商业模式的电子商务的蓬勃发展,使得Internet上的资源和服务更加丰富多彩,这些丰富的资源和服务每天都会产生许多新的、蕴涵着大量重要信息的海量数据,这些数据往往是异构的、不确定性的和非结构化的,其复杂程度已远远超出了人类目前己有的分析和理解能力。因此,研究有效利用这些复杂资源的新技术,数据挖掘具有重要的现实意义。就信息处理而言,数据挖掘是致力于数据分析和理解数据内部蕴藏知识的技术,它成为未来信息技术应用的重要目标之一。 本文在对分布式数据挖掘、Web服务及Agent相关技术进行了分析的基础上,为解决电子商务环境中分布式数据挖掘的核心问题,从关键算法和架构两个方面进行了深入研究。 针对k最近邻搜索算法存在的问题,提出了电子商务环境中一种自适应的基于P2P的k最近邻搜索算法P2PAKNNS。探讨了度量空间、相似性查询和GHT~*规则,自定义了高维数据的相似度函数HDSF(X,Y),论述了GHT~*中插入算法及范围查找算法和搜索算法。在此基础上,具体给出了P2PAKNNS算法的实现方法,并通过实验,验证了其正确性。 同时本文对DENCLUE算法进行了研究,为使其适合电子商务环境、解决其存在问题,结合P2PAKNNS算法的优点,提出了电子商务环境中基于距离和密度的无监督聚类算法KNDC。论述了模糊簇的划分及参数k,讨论了参数σ和ξ的设置,给出了KNDC算法的具体实现方法,并予以验证。 本文还针对电子商务环境中分布式数据挖掘的关联规则,在研究Apriori关联规则算法、多重最小支持度Apriori算法、相关支持度Apriori算法RSAA、平均项目集合分割法的基础上,改进了阈值的制定方法;为提高挖掘有价值的稀有数据的效率和精确度,根据RSAA和基于无向项集图算法BOUIGA提出了RSAA-BOUIGA算法,分析了其正确性。 在此基础上,结合业界和学术界对Web服务和移动Agent的研究成果,将Web服务和Agent最新技术引入了电子商务环境中分布式数据挖掘,提出了电子商务环境下基于Web服务和移动Agent技术的数据挖掘架构BWADM,并论述了组合服务规范与组合服务的执行,具体阐述了此架构的数据预处理组件、算法管理组件、控制中心组件、算法库组件和模型表示组件。 最后建立了BWADM原型,结合Web服务技术,给出了基于Web服务的数据挖掘系统逻辑结构,设计并实现了该系统,验证了BWADM的合理性和上述算法在效率、精确度等方面的优越性。
【学位授予单位】:武汉理工大学
【学位级别】:博士
【学位授予年份】:2007
【分类号】:TP311.13

【引证文献】
中国期刊全文数据库 前3条
1 宋磊;;数据挖掘在电子商务系统中的应用[J];福建金融管理干部学院学报;2011年03期
2 罗凤娥;彭佳红;胡建强;;数据挖掘在农业领域中的应用研究[J];农业网络信息;2009年01期
3 黄大荣;黄惠敏;;集成Spring和Aglets的远程数据库访问技术[J];计算机应用;2011年02期
中国硕士学位论文全文数据库 前4条
1 李婵;基于云计算的智能手机数据挖掘平台的架构和实现[D];武汉理工大学;2010年
2 魏爽;基于移动Agent的Web分布式聚类挖掘算法的研究[D];华中师范大学;2011年
3 郑曼;基于SAS系统的税务数据挖掘研究[D];郑州大学;2012年
4 韩昊;移动数据库中基于改进的k-均值算法的数据广播策略的研究[D];华中师范大学;2012年
【参考文献】
中国期刊全文数据库 前10条
1 王冠,司建辉,杨昌锋;数据挖掘系统研究[J];北京工业大学学报;2005年04期
2 帅军;基于熵和KNN的决策模板法在目标识别中的应用[J];湖南文理学院学报(自然科学版);2005年01期
3 秦鸿;基于Web的数据挖掘[J];电子科技大学学报;2002年S1期
4 杨明,杨萍,吉根林,孙志挥;一种基于关联规则的缺省规则挖掘算法[J];东南大学学报(自然科学版);2003年06期
5 文巨峰;朱美琳;邢汉承;;面向商务智能应用的分布式数据挖掘系统设计[J];东南大学学报(自然科学版);2005年06期
6 张懿;数据挖掘在电子商务中的应用[J];电脑知识与技术;2005年12期
7 王枞 ,涂序彦;面向电子商务的智能管理信息系统[J];电子技术应用;2001年07期
8 何红波,熊桂林,李义兵;基于Web Services技术实现物流动态联盟[J];系统工程;2005年03期
9 龙德应;基于Web服务/XML的电子商务体系及数据集成研究[J];广东工业大学学报;2003年01期
10 易久;电子商务中数据挖掘技术的应用[J];工业技术经济;2004年02期
中国博士学位论文全文数据库 前1条
1 毛国君;数据挖掘技术与关联规则挖掘算法研究[D];北京工业大学;2003年
中国硕士学位论文全文数据库 前2条
1 陈畅伟;基于关联规则的数据挖掘可视化系统的实现[D];武汉理工大学;2004年
2 齐金鹏;数据挖掘模型可视化研究及其应用实例[D];吉林大学;2004年
【共引文献】
中国期刊全文数据库 前10条
1 高志升,刘兴伟;基于语义P2P的Web服务模型[J];阿坝师范高等专科学校学报;2005年03期
2 张安勤;数据挖掘与进化算法[J];安徽教育学院学报;2002年03期
3 丛春瑜;利用Web Services实现网络个性化学习[J];安徽广播电视大学学报;2004年02期
4 钱立三;WEB日志挖掘在远程开放教育中的应用[J];安徽广播电视大学学报;2005年03期
5 宁小红;;Web Usage Mining在电子商务中的应用[J];安徽农业科学;2007年13期
6 王红艳;朱全银;丁甜甜;;通信终端与农村科技服务平台的Web服务数据同步设计[J];安徽农业科学;2012年01期
7 张超;张娅玲;杨如艳;;数据挖掘在茶叶鉴定中的应用[J];安徽农业科学;2012年02期
8 郭有强;胡学钢;;基于项目增长法高效求解最大频繁项集[J];安徽科技学院学报;2006年06期
9 杨明;周国祥;;基于Web Service的现代物流平台的设计与实现[J];安徽科技学院学报;2010年01期
10 杨振贤;;基于云计算的安全数据存储研究与设计[J];信息安全与技术;2011年10期
中国重要会议论文全文数据库 前10条
1 代广珍;徐超;;基于Web的数据挖掘研究综述[A];2005年“数字安徽”博士科技论坛论文集[C];2005年
2 付晓东;邹平;;基于元流程的Web服务组合例外处理模型[A];第二十六届中国控制会议论文集[C];2007年
3 ;A Hybrid Clustering Algorithm Based on Grid Density and Rough Sets[A];第二十七届中国控制会议论文集[C];2008年
4 ;WTCA:A Web Text Clustering Algorithm Based on DFSSM[A];第二十七届中国控制会议论文集[C];2008年
5 陶冶;刘建勋;唐明董;;基于Map/Reduce的分布式Web服务搜索引擎设计与实现[A];CCF NCSC 2011——第二届中国计算机学会服务计算学术会议论文集[C];2011年
6 党德鹏;徐俏;徐娟;;基于替代的Web服务事务提交协议及其性能分析[A];CCF NCSC 2011——第二届中国计算机学会服务计算学术会议论文集[C];2011年
7 陈彦萍;李增智;夏虹;朱海萍;;服务质量驱动的Web服务组合框架的设计与实现[A];2006年全国通信软件学术会议论文集[C];2006年
8 汤广富;马春实;刘欢;付强;;模糊聚类快速实用方法[A];第十四届全国信号处理学术年会(CCSP-2009)论文集[C];2009年
9 郝为民;潘之凯;贾海生;王亚利;;网络电能表服务管理系统安全性设计的研究[A];2007中国电机工程学会电力系统自动化专委会供用电管理自动化学科组(分专委会)二届三次会议论文集[C];2007年
10 李宏伟;李勤超;蔡畅;;基于OWL-S的地理信息服务语义描述研究[A];中国地理信息系统协会第四次会员代表大会暨第十一届年会论文集[C];2007年
中国博士学位论文全文数据库 前10条
1 殷志伟;基于统计学习理论的分类方法研究[D];哈尔滨工程大学;2009年
2 赵倩;基于自配置的软件可信性增长模型及方法[D];哈尔滨工程大学;2010年
3 卜志国;海洋生态环境监测系统数据集成与应用研究[D];中国海洋大学;2010年
4 杨喜敏;面向多视点设计的EIS访问控制技术研究[D];华中科技大学;2010年
5 朱里越;多业务协同系统服务组合技术研究[D];中国科学技术大学;2010年
6 魏建香;学科交叉知识发现及其可视化研究[D];南京大学;2010年
7 高瞻;网格任务调度中服务质量保证相关问题研究[D];北京交通大学;2010年
8 尹可挺;Internet环境中基于QoS的Web服务组合研究[D];浙江大学;2010年
9 张寅;个性化技术及其在数字图书馆中应用的研究[D];浙江大学;2009年
10 陈伟;基于时序文本挖掘的新闻内容理解与推荐技术研究[D];浙江大学;2010年
中国硕士学位论文全文数据库 前10条
1 吕媛媛;基于本体的物流信息集成系统的研究[D];山东科技大学;2010年
2 孙丽婷;基于位置感知与兴趣分组的混合式P2P架构研究[D];山东科技大学;2010年
3 浮德海;基于ORACLE的数字化车间资源管理平台研究[D];长春理工大学;2010年
4 聂剑锋;基于QoS的Web服务选择研究[D];浙江理工大学;2010年
5 李振;网络舆情预测关键技术研究[D];郑州大学;2010年
6 张磊;基于无线传感器网络的实验管理系统的设计与实现[D];郑州大学;2010年
7 吴珺;数据挖掘技术在彩票销售数据分析中的应用研究[D];郑州大学;2010年
8 梁大圣;空间数据仓库的设计与构建[D];山东农业大学;2010年
9 宋超臣;基于推荐网络的服务搜索技术研究[D];哈尔滨工程大学;2010年
10 曾祥莉;ETL在经济普查信息发布系统中的应用研究[D];哈尔滨工程大学;2010年
【同被引文献】
中国期刊全文数据库 前10条
1 符保龙;;RBF网络在农业病虫害预测中的应用研究[J];安徽农业科学;2008年01期
2 顾静秋;;农业专家系统的知识获取、表示与推理[J];办公自动化;2005年01期
3 张丽翠,范亚芹,金成植;面向移动agent的逻辑分布网络管理与控制系统[J];吉林大学学报(信息科学版);2004年06期
4 陈涛;;云计算理论及技术研究[J];重庆交通大学学报(社会科学版);2009年04期
5 王海波,仲秋雁;基于数据挖掘的客户关系管理体系结构研究[J];大连理工大学学报(社会科学版);2004年02期
6 黄志红;;基于层次聚类的k均值算法研究[J];电脑开发与应用;2009年07期
7 蔡键;王树梅;;基于Google的云计算实例分析[J];电脑知识与技术;2009年25期
8 胡晓宏;沈贺嵩;;嵌入式移动数据库系统中的数据查询[J];单片机与嵌入式系统应用;2009年03期
9 包小源,吴泠;移动环境中数据分析与挖掘新技术的研究[J];电信科学;2005年01期
10 李惠;丁革建;;智能手机操作系统概述[J];电脑与电信;2009年03期
中国重要会议论文全文数据库 前1条
1 任长伟;尚艳英;曹彦荣;;基于GIS与空间关联规则数据挖掘在森林病虫害预测中的应用初探[A];第四届海峡两岸GIS发展研讨会暨中国GIS协会第十届年会论文集[C];2006年
中国博士学位论文全文数据库 前7条
1 邵雄凯;移动数据库中若干问题的研究[D];华中科技大学;2004年
2 蒙肖莲;商业银行客户识别与保持模型研究[D];华中科技大学;2005年
3 孙建涛;Web挖掘中的降维和分类方法研究[D];清华大学;2005年
4 李成安;分布式环境下聚类分析新方法的研究[D];浙江大学;2006年
5 陈红涛;基于搜索日志的用户行为研究及应用[D];北京邮电大学;2008年
6 李强;动点聚类算法及其量子化研究[D];浙江大学;2009年
7 于小兵;基于数据仓库和移动Agent的智能电子商务研究与应用[D];武汉理工大学;2010年
中国硕士学位论文全文数据库 前10条
1 邢远凯;基于决策树和遗传算法的神经网络研究及应用[D];浙江大学;2010年
2 王磊;移动数据库中广播技术的研究[D];华东师范大学;2003年
3 范斌;基于Web服务的分布式数据挖掘系统研究[D];武汉理工大学;2004年
4 施颖男;移动计算中的规则提取与规则更新研究[D];东华大学;2004年
5 徐嘉莉;基于多移动代理系统的个性化数据挖掘系统的研究[D];电子科技大学;2004年
6 汪洋;基于嵌入式移动数据库的数据挖掘[D];电子科技大学;2004年
7 赵怿甦;数据挖掘在农业环境中的应用[D];天津大学;2004年
8 李振华;基于工作流理论的企业级数据挖掘系统设计[D];吉林大学;2006年
9 陈钢;数据挖掘技术在移动通讯领域的应用研究[D];北京邮电大学;2007年
10 王飞;面向电子商务的web数据挖掘的研究与设计[D];四川大学;2006年
【二级引证文献】
中国期刊全文数据库 前3条
1 刘丽娟;刘仲鹏;;数据挖掘技术在农业数据挖掘平台中的应用研究[J];福建电脑;2012年02期
2 刘天垒;刘世洪;崔运鹏;;基于B/S结构的农业数据挖掘系统的研究[J];农机化研究;2011年11期
3 刘凯;余乐;;数据挖掘技术在兰花离体繁殖中的应用研究[J];信息技术与信息化;2012年04期
中国硕士学位论文全文数据库 前6条
1 龚健;数据挖掘技术在农业信息服务中的应用研究[D];安徽农业大学;2010年
2 刘天垒;基于Web的农业数据挖掘系统的研究与实现[D];中国农业科学院;2011年
3 黄惠敏;基于移动Agent的数据挖掘技术研究[D];重庆交通大学;2011年
4 罗凤娥;基于Web的农业数据挖掘平台技术研究[D];湖南农业大学;2010年
5 马建卫;林下栽培石蒜生长研究[D];南京林业大学;2012年
6 万福成;SSH技术在藏语/汉语远程教育系统中的应用研究[D];西北民族大学;2012年
【二级参考文献】
中国期刊全文数据库 前10条
1 张红云,石阳,马垣;数据挖掘中聚类算法比较研究[J];鞍山钢铁学院学报;2001年05期
2 张红云,马垣;数据挖掘与决策支持系统的关系[J];鞍山师范学院学报;2001年03期
3 薛伟,刘旭东,葛声,林学练;Web服务运行管理平台安全结构的研究与实现[J];北京航空航天大学学报;2003年10期
4 印勇;决策支持分析新技术——数据挖掘[J];重庆邮电学院学报(自然科学版);2001年S1期
5 吕安民,林宗坚,李成名;数据挖掘和知识发现的技术方法[J];测绘科学;2000年04期
6 郑建丹,张广泉;软件体系结构描述语言ADL[J];重庆师范学院学报(自然科学版);2000年04期
7 张晓辉,何耀东,万家华,赵宏;关联规则发现的一种改进算法[J];东北大学学报;2001年04期
8 沈苏彬,顾冠群;网络体系结构与网络难题的解决方案[J];东南大学学报;1999年05期
9 周腾;数据挖掘:数据仓库构架的拓展[J];电脑与信息技术;2001年02期
10 Sahil Gambhir ,Michael W.Muchmore;Web服务:颠覆性的创造力[J];电子商务;2002年08期
中国博士学位论文全文数据库 前1条
1 李长云;基于体系结构的软件动态演化研究[D];浙江大学;2005年
【相似文献】
中国期刊全文数据库 前10条
1 徐龙玺,吴文武;基于Web的文本数据挖掘的研究[J];山东省农业管理干部学院学报;2005年04期
2 罗菲菲;刘贵全;安景琪;张婷慧;;一种分层聚类方法及其应用研究[J];成都理工大学学报(自然科学版);2005年06期
3 谢文阁;梅红岩;李欣;周月鹏;;基于兴趣度的关联规则在选课分析中的应用[J];内蒙古大学学报(自然科学版);2009年02期
4 李远生;;关联规则挖掘算法在汽轮机监测中的应用[J];广东电力;2006年05期
5 曲守宁;徐德军;吴同;王钦;;兴趣度在选课指导系统中的研究与应用[J];计算机工程与应用;2006年27期
6 吕金兰;;数据挖掘技术在网络化教学中的应用[J];福建电脑;2007年02期
7 王金龙;耿雪玉;梁俊卿;;面向企业信用评估的分布式隐私保护数据挖掘[J];计算机工程与应用;2008年35期
8 董彩云;吕秀荣;;数据挖掘技术在个性化学习指导中的应用[J];山东广播电视大学学报;2010年01期
9 王前辉,刘绍清,钱莎莎;基于数据挖掘的SP企业后继发展策略研究[J];广州大学学报(自然科学版);2005年04期
10 曲守宁;徐德军;吴同;王钦;;兴趣度在基于关联分析的选课指导系统中的研究与应用[J];计算机应用研究;2007年02期
中国重要会议论文全文数据库 前10条
1 马洪杰;曲晓飞;;数据挖掘技术和过程的特点[A];面向21世纪的科技进步与社会经济发展(上册)[C];1999年
2 戈欣;吴晓芬;许建荣;;数据挖掘技术在放射科医疗管理中的潜在作用[A];2009中华医学会影像技术分会第十七次全国学术大会论文集[C];2009年
3 魏元珍;杨沂凤;;数据挖掘技术及其在数字图书馆中的应用[A];网络信息资源的搜集与应用——全国高校社科信息资料研究会第十次年会论文集[C];2004年
4 肖健;沈彩霞;;浅谈数据挖掘技术现状[A];广西计算机学会2008年年会论文集[C];2008年
5 巩耀亮;邱晓东;孙丽君;李树强;;数据挖掘技术在企业竞争情报系统中的应用研究[A];信息时代——科技情报研究学术论文集(第三辑)[C];2008年
6 王洪锋;;数据挖掘在客户关系管理中的应用研究[A];河南省通信学会2005年学术年会论文集[C];2005年
7 杨利军;勾学荣;;数据挖掘在移动客户流失预测中的研究和应用[A];2008年中国高校通信类院系学术研讨会论文集(上册)[C];2009年
8 姚小磊;彭清华;;数据挖掘技术在中医眼科应用的设想[A];中华中医药学会第七次眼科学术交流会论文汇编[C];2008年
9 张婧;;数据挖掘技术在进销存系统中的应用[A];2006北京地区高校研究生学术交流会——通信与信息技术会议论文集(下)[C];2006年
10 孙义明;曾继东;;数据挖掘技术及其应用[A];全国计算机安全学术交流会论文集(第二十二卷)[C];2007年
中国重要报纸全文数据库 前10条
1 本报记者 周源;共享IT架构选购之道[N];网络世界;2010年
2 本报记者 邹大斌;QNX:微内核架构奠定安全基础[N];计算机世界;2011年
3 《网络世界》记者 于翔;混合交付:云只是途径之一[N];网络世界;2011年
4 田红 记者 胥茜;论文无创新 一票能否决[N];中国教育报;2005年
5 记者 欧阳春艳;全国百篇优秀博士学位论文评选揭晓[N];长江日报;2005年
6 本报记者 赵谨娜;IBM X架构:技术为本 用户为先[N];中国计算机报;2001年
7 记者 于新春;业内人士呼吁建立新型市场架构[N];国际商报;2001年
8 王握文周珞晶 吴丹;11篇全国优秀博士学位论文的启示[N];科技日报;2008年
9 本报特约通讯员  汤宏;播撒创新的种子[N];解放军报;2006年
10 学位办;研究生院奖励优秀博士学位论文[N];中国社会科学院院报;2008年
中国博士学位论文全文数据库 前10条
1 余小高;电子商务环境中分布式数据挖掘的研究[D];武汉理工大学;2007年
2 庞淑英;三江并流带旅游地质景观数据挖掘及旅游价值评价研究[D];昆明理工大学;2008年
3 王玉峰;变电站瞬态电磁环境及微机保护系统EMC研究[D];大连理工大学;2007年
4 许增福;DL环境下的信息资源管理及知识发现研究[D];哈尔滨工程大学;2005年
5 潘海天;数据挖掘技术在聚合过程建模与控制的应用研究[D];浙江大学;2003年
6 程其云;基于数据挖掘的电力短期负荷预测模型及方法的研究[D];重庆大学;2004年
7 束志恒;化学化工数据挖掘技术的研究[D];浙江大学;2005年
8 赵晨;过程控制中的数据挖掘技术研究及其智能控制策略探讨[D];浙江大学;2005年
9 高清东;复杂供矿条件矿山技术指标整体动态优化系统及应用[D];北京科技大学;2005年
10 孙蕾;医学图像智能挖掘关键技术研究[D];西北大学;2005年
中国硕士学位论文全文数据库 前10条
1 王少华;数据挖掘中关联规则算法的研究[D];华北电力大学(河北);2008年
2 赵林明;基于数据仓库的信用卡数据挖掘研究[D];山东科技大学;2005年
3 杨国英;基于B/S模式的高校仪器设备管理信息系统的设计与实现[D];北京化工大学;2005年
4 张爱红;基于Web服务的共建共享型数字图书馆研究[D];四川大学;2005年
5 阙宇峻;面向系统芯片的软硬件协同设计平台VXP(Virtual Executable Platform)的设计[D];华东师范大学;2006年
6 陈骏武;基于数据挖掘技术的电信客户关系管理研究[D];湖南大学;2005年
7 房静;面向CRM的数据挖掘在电力市场营销中的应用[D];天津大学;2004年
8 李明;J2EE核心模式及其在低压配电信息系统中的应用研究[D];华中科技大学;2005年
9 张涛;软件开发过程的工作流管理系统[D];天津大学;2005年
10 罗国甫;数据挖掘在银行客户经理考核系统中的应用[D];同济大学;2006年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026