收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

基于P2P框架的数据库网格中若干关键技术的研究

王广奇  
【摘要】: 随着信息技术的发展,各行业的信息量呈爆炸性增长,其中包括众多公共有效的数据库资源。地理上广泛分布的用户都希望能够按需透明地访问和使用这些丰富的数据资源。如高能物理、生物计算等科学研究领域、电子商务领域和深层Web数据查询领域等。数据网格是基于广域网对海量、分布异构的数据资源进行管理、访问和共享的系统。数据库网格概念是随着公有数据库资源的丰富而提出的,是以数据库为主要资源的一种数据网格系统,可为上述应用提供良好的支持。一方面,利用网格环境的高效处理能力实现海量数据的有效整合,有效地利用已有众多的数据库资源;同时也可以利用数据库管理系统高效的数据管理能力,为网格内实现数据库资源的有效管理、分布数据的优化集成以及海量数据的分析处理等提供强有力的支持。为此,本文针对目前支持数据库网格的若干关键技术进行研究,主要包括基于P2P模型的网格体系结构、P2P支持框架、资源管理、数据动态集成、资源副本管理、数据概要等进行深入研究。 目前有关数据库网格的研究和开发还处于起步阶段。几年来,最具有代表性的工作是隶属于全球网格论坛(GGF:Global Grid Forum)的DAIS工作组(Database Access and Integration Services Working Group)制定的网格环境下访问数据库的协议和中间件,以及针对特定应用数据库进行处理的网格系统。已有工作大多是针对特定领域,基于静态环境构建的数据库网格系统,很少有如何适应网格环境内数据库资源的不确定性的相关讨论,也没有看到有关完善的支持动态数据集成的数据库网格的报道。虽然网格环境下针对数据库的处理技术同已有的多数据库、并行数据库以及分布式数据库的处理技术有很多相容的方面,但由于网格环境内数据资源的不确定性(动态性),已有支持技术不足以支持构建具有不确定性的数据库网格环境。这些不确定性给数据库网格中数据资源管理、资源查询处理、数据集成、事务调度、海量数据分析等带来了新的挑战。 本文基于OGSA-DAI(Open Grid Service Architecture-Database Access and Integration)规范,采用面向服务的思想,基于P2P模型,研究构建一个面向多领域的、支持动态数据集成的数据库网格系统的若干关键技术。目的是在网格环境下,借用网格的高效处理能力,为分布、自治、异构的数据库资源的有效管理、动态数据集成和分析处理等提供一个良好的使能环境,透明地为用户按需提供服务。 在支持数据库网格的框架结构方面,针对集中的资源管理方法具有一定的局限性,呈现出了Peer to Peer(P2P)体系结构。P2P方式,可避免单点失败,并具有可扩展性好等特点。为支持多领域的资源管理,在Chord结构基础上,提出了一种适用于数据库网格的P2P框架结构-MultiChord,可有效支持多领域的资源管理。 在模式集成和查询处理方面,针对数据库网格内资源的自治、异构特性,定义全局模式本体,并提出了一种基于本体的查询处理策略,提高查询效率,实现异构查询。将查询处理分为全局查询和局部查询处理两部分。在全局查询处理阶段,基于本体实现语义转换、查询重写和生成查询执行计划。由局部查询处理解决数据层冲突和查询的语义扩展。 在执行优化方面,为有效地减少数据传输代价,提出了一种基于关键字过滤的执行优化策略,并基于“能者多劳”的思想,动态协调数据资源的传输量,有效地提高了数据网格内的数据资源的获取效率。 在副本管理方面,针对P2P系统中节点可随时加入和退出的动态特性,为保证基于P2P模型的数据网格系统的健壮性,提出了一种基于多根节点多点维护的副本管理策略,可有效地保证数据网格系统的健壮性,提高了资源的获取效率。 在数据概要方面,为有效地从海量数据的查询结果信息中获取最多的知识,提出了一种基于聚类分析的分布式的数据概要策略。数据集成层保证合成的数据满足用户的模式需求,聚类分析层将概要数据展示给用户,以便于直观的数据分析。 最后,在提出的关键技术基础上,设计并实现了一个支持多领域的、面向数据库资源动态集成的数据库网格系统DS-Grid。基于DAI将数据资源包装为Grid Services,基于JAXT构建MultiChord框架,采用XML数据库管理系统Shunsaku为XML数据资源仓,主要编程语言为Java。该系统是国家863项目子项目“面向CIMS领域的支持企业业务柔性集成的服务网格技术的研究“的一个子系统,经过测试评价,具有较高的效率,很好地达到了预期目标。


知网文化
【相似文献】
中国期刊全文数据库 前20条
1 乐浩洪;姜汉忠;;用P2P流媒体技术加强电视覆盖[J];广播电视信息;2006年09期
2 胡伟莉;黄华文;丁成忠;;普通高校网络继续教育管理信息化的研究[J];产业与科技论坛;2007年01期
3 赵志升;罗德林;杨志东;;P2P技术与流媒体发展新趋势[J];河北北方学院学报(自然科学版);2007年01期
4 陈天罡;;流媒体与内容分发[J];通信与信息技术;2007年02期
5 陈天罡;;P2P应用及商务模式[J];通信与信息技术;2007年03期
6 陈涛;;P2P-SIP可管理媒体系统信令流程的一些研究[J];中国新通信;2007年17期
7 赵贵昉;李真;张学杰;;P2P网络资源共享中基于信誉的访问控制[J];云南大学学报(自然科学版);2007年S2期
8 龚立群;王雅新;;基于P2P的Web服务合成中的关键问题[J];微计算机信息;2008年12期
9 周华;魏耀武;;网络流媒体技术中P2P模式与C/S模式的比较研究[J];贵州大学学报(自然科学版);2008年02期
10 盛家川;;P2P系统中激励机制的研究[J];科技广场;2008年01期
11 庚志伟;尹四清;;基于P2P模式的电子白板的研究[J];电脑开发与应用;2008年06期
12 徐翔;;P2P技术相关的信息安全问题研究[J];电脑知识与技术;2008年34期
13 孟祥宏;;基于P2P的电子政务视频会议系统的研究[J];现代情报;2008年12期
14 王清水;;校园网络流量的分析和控制[J];消费导刊;2009年05期
15 张洁;王亚芳;王妍;Xiaogang Peng;Zhen Ji;Zongwei Luo;Edward C.Wong;C.J.Tan;;基于p2p技术的RFID网络数据清理模型[J];硅谷;2009年09期
16 覃宗炎;;P2P网络中流媒体直播系统设计[J];电脑知识与技术;2009年14期
17 王祖荣;刘清波;;P2P路由算法Tapestry及其改进[J];微计算机信息;2009年36期
18 孙晋;李悦;何晓艳;;如何制定合理的校园网流量控制方案[J];电脑知识与技术;2010年15期
19 姜国华,顾君忠;一种P2P系统索引结构生成算法[J];计算机工程与应用;2004年02期
20 田勇,李立新,徐开勇,李福林;基于INTEL网络处理器的系列硬件平台—FIDS[J];电子产品世界;2004年05期
中国重要会议论文全文数据库 前10条
1 袁野;王国仁;张莹;;P2P环境下度量空间中的相似查询处理[A];第二十五届中国数据库学术会议论文集(二)[C];2008年
2 李钧;王新;;P2P存储网络中的冗余维持[A];第15届全国信息存储技术学术会议论文集[C];2008年
3 徐陈锋;奚宏生;江琦;殷保群;;一类分层非结构化P2P系统的随机优化[A];第二十六届中国控制会议论文集[C];2007年
4 唐晨;孙立峰;杨士强;;基于减小切换延迟的P2P流媒体服务器带宽分配研究[A];第六届和谐人机环境联合学术会议(HHME2010)、第19届全国多媒体学术会议(NCMT2010)、第6届全国人机交互学术会议(CHCI2010)、第5届全国普适计算学术会议(PCC2010)论文集[C];2010年
5 张建标;张涛;;一种基于流量行为的P2P协议识别方法[A];CCF NCSC 2011——第二届中国计算机学会服务计算学术会议论文集[C];2011年
6 杨艳春;孟祥武;;P2P网络服务环境中的节点相似性度量研究[A];CCF NCSC 2011——第二届中国计算机学会服务计算学术会议论文集[C];2011年
7 张娜娜;;P2P流量识别方法研究[A];江苏省电子学会2010年学术年会论文集[C];2010年
8 蔡文渊;夏添;徐林昊;钱卫宁;周水庚;周傲英;;P2P环境下的视图选择[A];第二十届全国数据库学术会议论文集(技术报告篇)[C];2003年
9 丁婕;古永红;陈冬宇;;交易信任、心理感知与出借意愿——P2P在线借贷平台的出借意愿影响因素分析[A];第五届(2010)中国管理学年会——信息管理分会场论文集[C];2010年
10 苟红玲;孙卫喜;;P2P对等网络信任模型研究[A];2011高等职业教育电子信息类专业学术暨教学研讨会论文集[C];2011年
中国博士学位论文全文数据库 前10条
1 王广奇;基于P2P框架的数据库网格中若干关键技术的研究[D];东北大学;2008年
2 刘佳琦;移动P2P覆盖网拓扑结构及节点合作保障机制研究[D];中南大学;2012年
3 陈一帅;P2P流媒体系统能力研究[D];北京交通大学;2010年
4 郑伟平;可控P2P流媒体分发关键技术研究[D];华南理工大学;2010年
5 任祖杰;非合作性环境下的P2P搜索技术研究[D];浙江大学;2010年
6 郭良敏;P2P文件共享系统中的副本技术研究[D];中国科学技术大学;2011年
7 张小松;P2P蠕虫行为模型及遏制方法研究[D];电子科技大学;2011年
8 危婷;P2P流媒体系统的测量分析和建模研究[D];北京交通大学;2012年
9 权义宁;基于L-模糊集的P2P信任模型及应用研究[D];西安电子科技大学;2009年
10 冯景瑜;开放式P2P网络环境下的信任管理技术研究[D];西安电子科技大学;2011年
中国硕士学位论文全文数据库 前10条
1 李宁;基于分布式环境下的P2P信任模型研究[D];电子科技大学;2010年
2 潘雍;基于喷泉码的P2P文件共享系统研究[D];西安电子科技大学;2010年
3 刘红刚;P2P模糊信任模型中的隶属度预测和权重分配研究[D];西安电子科技大学;2009年
4 肖玮;基于混合P2P网络的应用层组播系统研究与实现[D];中南大学;2010年
5 刘倩;基于感知风险的P2P信任模型研究[D];河北大学;2009年
6 雷禹;P2P网络终端系统的设计与实现[D];华中科技大学;2009年
7 田新军;基于P2P技术的视频会议系统[D];电子科技大学;2009年
8 楚永;P2P服务提供者版权侵权责任研究[D];吉林大学;2010年
9 李薇;非结构化P2P网络搜索算法研究[D];西安理工大学;2010年
10 潘正军;基于激励的P2P非结构化自我优化搜索算法研究[D];太原理工大学;2010年
中国重要报纸全文数据库 前10条
1 记者 朱周;昆明P2P信贷探秘[N];昆明日报;2011年
2 本报记者 陈嘉颂;P2P:生存还是死亡[N];电脑报;2002年
3 本报记者 李彦赤;国内P2P信贷热潮再探[N];中国城乡金融报;2011年
4 农总行农户金融部 黄迈;P2P小额信贷机制创新及面临问题[N];中国城乡金融报;2009年
5 本报记者 杨庆广;P2P破解移动互联网流量激增难题[N];中国电子报;2009年
6 马莉 撰稿;P2P突破传统网络模式新鲜出炉[N];国际经贸消息;2000年
7 何晶;企业网络应重视P2P流量监控[N];人民邮电;2009年
8 本报记者 王丽娟;P2P信贷试水农村金融“蓝海”[N];中国经济时报;2009年
9 主持人 王汉;P2P网络信贷:如何稳健成长[N];中国城乡金融报;2009年
10 陈代寿;P2P引发企业网革命[N];中国计算机报;2002年
中国知网广告投放
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978