收藏本站
《武汉理工大学》 2005年
收藏 | 手机打开
二维码
手机客户端打开本文

以网格技术为基础的数据挖掘技术在分布式的选择性信息汇集过程中的应用研究

朱前线  
【摘要】:随着网格技术的产生与发展,基于网格环境下的应用研究已经越来越多。网格技术作为第三代网络技术,是目前受到密切关注的研究领域,具有非常重大的科研和应用前景。国内外的学术界和商业组织都正在积极开发利用网格技术的应用程序。 目前,网络信息资源不断膨胀,网络信息的搜索挖掘已经成为非常关键的基础技术之一。而随着网格技术的不断发展,在未来的网格环境下的资源将比现在更为丰富,更加多样。因此,探索和开发基于网格环境下的更有效的搜索挖掘方法与应用将具有非常重要的意义。 本文作者从当前的搜索挖掘技术入手,结合最新的网格技术研究成果,在目前的网格技术标准的基础上,通过一定的理论分析,研究并设计了基于网格环境下的资源搜索挖掘系统。 本系统的设计使用linux操作系统平台,在整体结构上采用层次结构,每一层提供不同的功能。它包括三个主要的层:网格服务容器层(globus container),数据挖掘服务层(grid spider service)和存储层(storage)。该系统采用目前广泛使用的网格标准实现GT3工具,它是一个开放源码的网格的基础平台,基于开放结构、开放服务资源和软件库,并支持网格和网格应用。以它作为网格服务容器,在这个层次之上,构建数据挖掘服务。该服务可以同时部署在多个服务器上,共同完成服务请求。最终,将搜索挖掘的数据通过网络存储在存储层的相应区域内。存储层作为服务的一个存储区,可以是数据库、网络文件系统或分布式文件系统。我们使用的是MySql数据库。 本论文在对网格技术研究的基础之上,通过初步实现资源搜索挖掘网格服务,为网格技术在局域网环境下的应用和推广开拓了更广阔的前景,并为数据挖掘技术在网格环境下的应用奠定了基础。
【学位授予单位】:武汉理工大学
【学位级别】:硕士
【学位授予年份】:2005
【分类号】:TP311.13

【引证文献】
中国硕士学位论文全文数据库 前2条
1 王龙超;空间数据网格概念体系研究[D];长安大学;2006年
2 朱玉丽;基于网格技术的主题爬虫算法优化的研究与实现[D];沈阳工业大学;2007年
【共引文献】
中国期刊全文数据库 前10条
1 范进;;产业结构对产业集群影响力的实证分析[J];安徽广播电视大学学报;2006年04期
2 于立红;杜芸;;数据挖掘中数据预处理方法与技术[J];安徽电子信息职业技术学院学报;2009年04期
3 舒坚;郑诚;陈振;;基于关联分类方法的Web使用挖掘研究[J];安徽大学学报(自然科学版);2006年02期
4 李芳芳;;数据仓库技术在远程教育中的应用[J];安徽科技;2007年01期
5 唐超礼;魏圆圆;;基于数据挖掘的植保预测系统[J];安徽农业科学;2008年12期
6 刘秋生;吴小倩;;基于数据挖掘的固定资产投资效益评价[J];安徽农业科学;2011年11期
7 韦伟;唐凤霞;;我国教育领域中数据挖掘研究论文的计量分析[J];安庆师范学院学报(社会科学版);2011年08期
8 张友志;钱萌;程玉胜;;基于关联规则web日志挖掘方法的研究[J];安庆师范学院学报(自然科学版);2006年01期
9 崔柔刚,温阳东;数据挖掘技术在医院信息管理中的应用[J];安徽水利水电职业技术学院学报;2004年01期
10 吴焕瑞,张红霞;数据库技术的新发展与新特点[J];保定师范专科学校学报;2004年02期
中国重要会议论文全文数据库 前10条
1 杨青;刘晔;张东旭;刘畅;;快速查找最优初始聚类数K的改进K-means算法[A];中国自动化学会控制理论专业委员会A卷[C];2011年
2 薛鲁华;张楠;;聚类分析在Web数据挖掘中的应用[A];北京市第十三次统计科学讨论会论文选编[C];2006年
3 杨雯怡;郑康锋;杨义先;;一种自适应的网络安全防护方案[A];中国电子学会第十五届信息论学术年会暨第一届全国网络编码学术年会论文集(上册)[C];2008年
4 吴觅昊;戴昌裕;;基于数据仓库的军事无线电管理统计分析技术应用[A];中国电子学会第十六届信息论学术年会论文集[C];2009年
5 汤薇;曾艳;;构建校园网搜索引擎必要性分析[A];广西计算机学会2008年年会论文集[C];2008年
6 冯永玖;童小华;刘妙龙;;基于PowerDesigner的公路工程地理信息平台数据库建模[A];华东地区第十次测绘学术交流大会论文集[C];2007年
7 张宇;;基于XML的Web数据自动挖掘[A];科技创新与节能减排——吉林省第五届科学技术学术年会论文集(上册)[C];2008年
8 郭琪瑶;;计算数据分析在学生管理决策中的模式应用[A];江苏省教育学会2006年年会论文集(综合二专辑)[C];2006年
9 张秋彤;;数据挖掘与高校图书馆个性化信息服务[A];第九届中国不确定系统年会、第五届中国智能计算大会、第十三届中国青年信息与管理学者大会论文集[C];2011年
10 丁信宙;仇环;苏晓庆;;基于云理论的缺损数据推理和预测[A];山东省测绘学术年会论文集[C];2006年
中国博士学位论文全文数据库 前10条
1 于翔;基于网格的数据流聚类方法研究[D];哈尔滨工程大学;2010年
2 祁瑞华;不完整数据分类知识发现算法研究[D];大连理工大学;2011年
3 郜峦;基于文献分析的“肺与大肠相表里”证治规律及其关系研究[D];北京中医药大学;2011年
4 卢又燃;放射科随访数据库建立与粗糙集方法辅助诊断胶质瘤分级的应用分析[D];复旦大学;2009年
5 田俊华;基于本体知识库的教学资源自动采集技术研究[D];南京师范大学;2011年
6 金海浩;五行相生间接补法古代应用规律研究[D];南京中医药大学;2011年
7 杨瑞龙;基于短语特征的Web文档聚类方法研究[D];重庆大学;2010年
8 任炳昱;高拱坝施工实时控制理论与关键技术研究[D];天津大学;2010年
9 韩建光;企业财务困境预测动态建模研究[D];哈尔滨工业大学;2011年
10 陆宁;基于BIM技术的施工企业信息资源利用系统研究[D];清华大学;2010年
中国硕士学位论文全文数据库 前10条
1 程宾;基于用户兴趣模型的元搜索引擎的研究[D];山东科技大学;2010年
2 贾莉莉;跳扩散模型下几种奇异期权的保险精算定价研究[D];山东科技大学;2010年
3 徐财应;基于Lucene的搜索引擎技术的研究与改进[D];长春理工大学;2010年
4 曾祥莉;ETL在经济普查信息发布系统中的应用研究[D];哈尔滨工程大学;2010年
5 李伟光;基于BP神经网络的数据库模式匹配方法研究[D];哈尔滨工程大学;2010年
6 汪永伟;搜索引擎中网页排序算法的研究与实现[D];哈尔滨工程大学;2010年
7 秦宏宇;网络舆情热点发现相关技术研究[D];哈尔滨工程大学;2010年
8 李晓光;数据挖掘技术在高校招生和教务管理中的应用[D];哈尔滨工程大学;2010年
9 张进;我国施工劳动生产率管理研究[D];大连理工大学;2010年
10 李仁良;决策树算法在临床诊断中的应用研究[D];辽宁工程技术大学;2009年
【同被引文献】
中国期刊全文数据库 前10条
1 宋智礼,余生晨,刘凡美,薛阳;应用网格技术实现校园网资源共享模型的研究[J];北方工业大学学报;2004年01期
2 沈波,张宏科;一种新的P2P网络代理协议[J];北方交通大学学报;2004年03期
3 刘怡文,李伟琴,韦卫;信息网格安全体系结构的研究[J];北京航空航天大学学报;2003年07期
4 邵振峰,李德仁;基于网格计算环境下的空间信息多级格网研究[J];地理信息世界;2005年02期
5 罗志清,郝力,李琦,安真臻;空间数据基础设施概念[J];测绘通报;2004年09期
6 于卓,吴志华;数字城市规划的空间数据基础探讨[J];测绘信息与工程;2004年01期
7 潘宝玉,骆跃进;网格技术在空间信息科学中的应用[J];地矿测绘;2004年03期
8 朱良峰,吴信才,刘修国;GIS中矢量多边形网格化问题研究[J];地理与地理信息科学;2004年01期
9 郭权,王希诚,卢桂艳;网格数据传输问题的一个优化算法[J];大连理工大学学报;2005年03期
10 孙会峰;许德刚;;基于WEB服务的中间件在异构系统集成中的应用[J];电脑开发与应用;2006年03期
中国博士学位论文全文数据库 前3条
1 陈定权;自动主题搜索的应用研究[D];中国科学院研究生院(文献情报中心);2003年
2 李庆虎;基于P2P架构的网格文件系统研究[D];清华大学;2004年
3 张志兵;空间数据挖掘关键技术研究[D];华中科技大学;2004年
中国硕士学位论文全文数据库 前10条
1 武琳;网络环境下信息检索语言研究[D];郑州大学;2003年
2 戴振中;基于OGSA的网格计算核心技术研究[D];华东师范大学;2004年
3 吴杰;空间数据库管理系统及其Oracle实现[D];中南大学;2004年
4 于雷易;基于空间数据网格的空间数据共享技术研究[D];武汉大学;2004年
5 刘召芹;城市空间数据分布式管理技术研究[D];山东科技大学;2004年
6 陈兴宇;地理信息系统中空间数据处理算法的研究[D];哈尔滨工程大学;2004年
7 蒲静;网格环境下有关数据复制及容错的研究[D];西南石油学院;2004年
8 黄斌;数据网格系统中数据统一访问和管理的研究与实现[D];国防科学技术大学;2003年
9 付伟;数据网格中元信息服务系统的设计与实现[D];国防科学技术大学;2003年
10 张毅;构建面向网格的空间数据库引擎[D];解放军信息工程大学;2004年
【二级引证文献】
中国期刊全文数据库 前3条
1 尹江;尹治本;黄洪;;网络爬虫效率瓶颈的分析与解决方案[J];计算机应用;2008年05期
2 吴小惠;;分布式网络爬虫系统的任务调度策略改进[J];上饶师范学院学报;2010年03期
3 武君胜;张涛;崔德刚;陶亚楠;;复合材料铺层优化图形化过程中的几个关键技术[J];西北工业大学学报;2010年04期
中国博士学位论文全文数据库 前1条
1 姜建华;数据网格几个关键技术的研究[D];吉林大学;2010年
中国硕士学位论文全文数据库 前5条
1 尹江;基于文档分类及超链接优选策略主题蜘蛛的研究与实现[D];西南交通大学;2008年
2 石潇;GIS中矢量多边形栅格化的算法优化及误差分析[D];山东科技大学;2008年
3 陈瑜芳;主题爬虫系统的研究[D];武汉理工大学;2010年
4 江晖;数字南昌地理信息公共服务平台的设计与实现[D];东华理工大学;2012年
5 董晨曦;基于网站内容框架的聚焦爬虫算法的优化和实现[D];北京交通大学;2012年
【相似文献】
中国期刊全文数据库 前10条
1 羊牧;周激流;胡艳梅;;网格环境下多媒体关联规则数据挖掘方法研究[J];现代图书情报技术;2007年07期
2 郑世明;苗壮;赵波;赵志宁;;基于网格的聚类挖掘算法[J];军械工程学院学报;2011年03期
3 陈京民;闫朝阳;;网格技术在文本分类系统中的应用研究[J];计算机时代;2007年12期
4 崔学海;;校园网中的网格技术[J];赤峰学院学报(自然科学版);2009年07期
5 归伟夏;苏一丹;梁斌梅;;电子商务中网格技术的应用[J];电脑开发与应用;2006年06期
6 张旭;李凡;刘燕;;应用网格技术构建数字林业支撑平台及其Web服务规范的制定[J];林业科学;2006年S1期
7 周伟龙;;关于数字化城市管理若干问题的探讨[J];电脑与电信;2007年12期
8 袁贞;;基于网格的图书资源共享平台研究[J];浙江高校图书情报工作;2009年05期
9 袁贞;;基于网格的图书资源共享平台的研究[J];图书馆学刊;2010年01期
10 刘英梅;于杰;王冬翌;;E-Science下的网格资源整合[J];现代情报;2008年08期
中国重要会议论文全文数据库 前10条
1 孙来福;王朋娇;;网格在网络教育资源管理中的应用[A];基于信息技术的教学新模式研究[C];2006年
2 张绍华;丁志刚;宗宇伟;顾宁;;网格工作流动态调度算法研究[A];第二十三届中国数据库学术会议论文集(技术报告篇)[C];2006年
3 邓有奇;郑鸣;周乃春;吴晓军;;对接网格技术在粘性流场数值计算中的应用[A];第四届《海峡两岸计算流体力学学术研讨会》论文集[C];2003年
4 罗名海;;浅议网格技术对基础地理信息的影响[A];2006年测绘新技术应用交流会论文集[C];2006年
5 常远利;李始江;常征;;军事信息网格:实现一体化联合作战的技术基础[A];提高全民科学素质、建设创新型国家——2006中国科协年会论文集(下册)[C];2006年
6 王钢;;基于网格技术的防汛信息平台研究[A];中国水利学会2008学术年会论文集(下册)[C];2008年
7 姜麟;孔繁德;;基于网格技术的有限元计算与仿真[A];第二十七届中国控制会议论文集[C];2008年
8 路明祥;宣锴;;农业信息资源共享服务体系建设势在必行[A];中国农业信息科技创新与学科发展大会论文汇编[C];2007年
9 李绯;王维国;罗泽;阎保平;;集成网格服务的中国虚拟天文台工作流系统研究与设计[A];2006年全国开放式分布与并行计算机学术会议论文集(三)[C];2006年
10 谢能付;王丹;钟娟;张捷;;基于网格技术的农业信息共享系统研究[A];中国农业信息科技创新与学科发展大会论文汇编[C];2007年
中国重要报纸全文数据库 前10条
1 徐洸;网格技术与作战指挥[N];解放军报;2004年
2 辛铭;网格,网络的升华[N];金融时报;2006年
3 ;Platform使网格技术进入主流[N];计算机世界;2005年
4 马胜伟 本报特约记者  王辉东;网格技术将改变战斗力生成模式[N];解放军报;2006年
5 ;网格技术走向规范化[N];网络世界;2004年
6 温有奎 赖伯年;网格技术将推动知识管理革命[N];科技日报;2003年
7 ;热点技术二:通过网格技术构建[N];中国计算机报;2004年
8 邓侃;网格技术:掀起互联网的第三次浪潮?[N];中国计算机报;2002年
9 ;欧洲科学家拟用网格技术建造超级计算机[N];人民邮电;2004年
10 中国科学院计算技术研究所 徐志伟;因特网之后是什么?[N];计算机世界;2001年
中国博士学位论文全文数据库 前10条
1 施晓晗;高质量大规模网格形变技术[D];浙江大学;2009年
2 黄静;基于网格技术的虚拟地震会商系统研究[D];中国地震局地球物理研究所;2005年
3 孙丽;工艺知识管理及其若干关键技术研究[D];大连交通大学;2005年
4 黄静;基于网络技术的虚拟地震会商系统研究[D];中国地震局地球物理研究所;2005年
5 胡志坤;复杂有色金属熔炼过程操作模式智能优化方法研究[D];中南大学;2005年
6 刘革平;基于数据挖掘的远程学习评价研究[D];西南师范大学;2005年
7 刘寨华;基于临床数据分析的病毒性心肌炎证候演变规律研究[D];黑龙江中医药大学;2006年
8 王川;基因芯片数据管理及数据挖掘[D];中国科学院研究生院(上海生命科学研究院);2004年
9 王涛;挖掘序列模式和结构化模式的精简集[D];华中科技大学;2006年
10 高磊;P2P工作流系统中的资源搜索及负载均衡优化研究[D];山东大学;2010年
中国硕士学位论文全文数据库 前10条
1 朱前线;以网格技术为基础的数据挖掘技术在分布式的选择性信息汇集过程中的应用研究[D];武汉理工大学;2005年
2 彭凝多;数据挖掘应用及优化研究[D];电子科技大学;2009年
3 孟凡松;网格安全认证模型研究[D];武汉理工大学;2005年
4 李钧;网格环境下数据库系统的研究[D];首都经济贸易大学;2006年
5 郎小燕;网格技术在电力信息资源整合中的应用研究[D];华北电力大学(北京);2006年
6 王小根;基于移动Agent的网格资源发现和调度的研究[D];江南大学;2005年
7 朱敏;基于网格的教育资源管理研究及模型设计[D];曲阜师范大学;2006年
8 王恒;DartGridV3语义数据库网格的设计与核心模块实现[D];浙江大学;2006年
9 王坤;基于网格的资源调度的研究[D];西安电子科技大学;2007年
10 黄雷;面向战场信息系统的信息共享技术研究[D];西北工业大学;2007年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026