收藏本站
《北京邮电大学》 2012年
收藏 | 手机打开
二维码
手机客户端打开本文

云计算环境下动态资源管理关键技术研究

李冰  
【摘要】:云计算中的资源管理关键技术根据用户的需求并通过监控系统的各项参数指标对系统资源进行动态规划、调度与调整,是影响云计算系统性能的核心要素之一。但是当前云计算特别是基于Hadoop架构的云计算系统在该方面仍然存在着一些不足。首先是存储资源调度缺乏灵活性的问题。由于用户对不同数据的需求也不尽相同,这样一来会使得某些数据文件成为“热点”。因此在云计算存储资源调度过程中对这些数据文件一视同仁是不合理的,需要一种区分不同数据需求的动态存储资源调度机制。第二,元数据管理在云存储中是一个关键问题。当前元数据管理机制多为单中心节点的主从架构,仅有的一些多节点元数据管理方式在元数据划分、持久化以及故障恢复等方面均存在不足。第三由于云计算环境提供的资源规格与用户所需要的资源规格不一致,因此可能产生一定量的碎片资源,如果能够对它们采取相应的组合及调度机制,系统资源利用率将能够得到进一步提高。根据以上不足之处本文有如下三方面的创新: 针对由于请求激增导致当前文件副本数目难以满足需求的文件热点问题,提出了一种基于Hadoop分布式文件系统的云计算存储资源副本动态调度机制,包括副本数量动态调整机制和动态副本选择算法两部分,以提高系统的稳定性和文件访问吞吐率。实验结果显示,在一定的存储资源、网络负载的开销下,该改进方案明显降低了系统响应用户请求的时延。 针对元数据管理方面的问题,本文提出了一种分布式的管理机制。该机制能够根据不同名字节点的处理能力将元数据分布到它们之中,并提供一种高效的元数据查询方法,从而为系统提供了良好的可靠性和可用性。此外该机制还采用基于组的日志副本机制及负载均衡策略来保证系统容错性和伸缩性。实验结果显示,采用该元数据管理机制的多名字节点系统在处理元数据操作请求时性能较原生系统有很大的提升 针对系统碎片资源问题,本文基于资源之间的耦合强度以及业务类型对碎片资源组合的需求,提出了一种云计算环境下基于Chord查询改进算法、具有QoS保障的资源调度机制。仿真结果显示该机制能够有效地提高系统碎片资源利用率。
【学位授予单位】:北京邮电大学
【学位级别】:博士
【学位授予年份】:2012
【分类号】:TP315

【参考文献】
中国期刊全文数据库 前1条
1 郑洪源;周良;吴家祺;;WEB服务器集群系统中负载平衡的设计与实现[J];南京航空航天大学学报;2006年03期
【共引文献】
中国期刊全文数据库 前10条
1 赵睿;;浅论短信的艺术特征[J];安徽文学(下半月);2008年04期
2 夏燕;;试论受众对电影艺术“人物形象”接受的审美规律——从《泰坦尼克号》切入[J];安徽文学(下半月);2008年08期
3 周茂丽;;文艺无定法[J];北京工业大学学报(社会科学版);2009年03期
4 黄会林;人性美与艺术美——关于2001年中国电影的审视[J];北京师范大学学报(人文社会科学版);2002年01期
5 赵歌;;竞技跳水的美学和符号学释义[J];北京体育大学学报;2011年09期
6 蒋芝英;;高校思想政治教育困境及调试对策:基于审美的思考[J];教育与教学研究;2011年05期
7 谭保斌;;人体美的文化思考[J];重庆科技学院学报(社会科学版);2009年12期
8 黄健;;论名士风度对梁羽生武侠小说的影响[J];重庆邮电大学学报(社会科学版);2012年04期
9 赵巧利;;《锦瑟》的美学意蕴[J];大家;2010年02期
10 刘可文;;试论恐怖电影的审美价值[J];当代文坛;2012年03期
中国重要会议论文全文数据库 前1条
1 刘智;肖巍巍;;构建NLB技术的MSCS服务器集群网络结构的设计与实现——解决高负载选课系统前台网络阻塞与后台实时数据处理[A];广西计算机学会2012年学术年会论文集[C];2012年
中国博士学位论文全文数据库 前10条
1 罗绂文;李泽厚“情本体”思想研究[D];西南大学;2011年
2 江冬梅;生命·艺术·直觉[D];西南大学;2011年
3 曲明成;数据网格QoS保障与资源优化关键技术研究[D];哈尔滨工业大学;2011年
4 李家成;关怀生命[D];华东师范大学;2002年
5 张金梅;幼儿园戏剧综合活动研究[D];南京师范大学;2003年
6 李哲;生态城市美学的理论建构与应用性前景研究[D];天津大学;2005年
7 袁洁玲;探源动画之“魅”[D];华东师范大学;2008年
8 何劲鹏;学校体育课程体系生命化探究[D];东北师范大学;2008年
9 马正应;退溪美学思想研究[D];山东大学;2008年
10 隋丽;现代生态审美意识的生成与文本建构[D];辽宁大学;2008年
中国硕士学位论文全文数据库 前10条
1 贾磊;平面构成要素在陶瓷装饰中的运用研究[D];景德镇陶瓷学院;2011年
2 宋瑞;论短信文化的媒体态势研究[D];西南大学;2011年
3 林梅;灾难电影的现代性叙事研究[D];陕西师范大学;2011年
4 王万发;生命、生态与形式之美的和谐交响[D];陕西师范大学;2011年
5 彭蓓;试论许地山的文化选择[D];湖南师范大学;2011年
6 金鑫;生态美学视域下中国生态主题电视纪录片研究[D];辽宁大学;2011年
7 上官兆莉;论中国军事题材电视剧英雄形象的嬗变及传播价值[D];湘潭大学;2011年
8 王培敏;康德“实用人类学”思想研究[D];广西师范大学;2011年
9 邓欢;消费社会境遇中广告审美文化的批判与建构[D];武汉纺织大学;2011年
10 陈瑶;论民间原生态文化的美学价值[D];武汉纺织大学;2011年
【相似文献】
中国期刊全文数据库 前10条
1 马新明;许鑫;席磊;张浩;熊淑萍;;基于元数据的农田信息存储、管理和共享[J];农业工程学报;2010年11期
2 丁贤;;一种双向元数据管理系统[J];电脑知识与技术;2011年13期
3 滕连泽,刘洪斌,武伟;地理空间元数据管理的研究[J];农业网络信息;2005年08期
4 刘洋;毕红军;路静;;ETL系统的研究与实现[J];内蒙古科技与经济;2008年20期
5 黄如花;刘贵玉;;开放存取资源元数据管理的对策[J];情报理论与实践;2009年10期
6 屠跃明;;档案数字化信息元数据管理的探索[J];档案与建设;2011年06期
7 李兴 ,李庆烽;集装箱检测系统的数据获取关键技术研究[J];中国原子能科学研究院年报;2003年00期
8 辜寄蓉;苗放;王成善;;基于元数据的信息共享机制研究[J];物探化探计算技术;2006年01期
9 管丽娟;;数据ETL软件中元数据模型设计与管理[J];电脑知识与技术(学术交流);2007年08期
10 高国伟;王延章;王宁;;基于元数据管理模型的电子政务公文系统应用研究[J];现代图书情报技术;2008年06期
中国重要会议论文全文数据库 前10条
1 乌云霄;王蕴实;吕召彪;;LTE/HSPA SON关键技术研究[A];2011全国无线及移动通信学术大会论文集[C];2011年
2 张大华;罗志明;王铁军;李凡;杨义彬;;云计算平台关键技术研究[A];2011电力通信管理暨智能电网通信技术论坛论文集[C];2011年
3 赵良才;景旭文;;基于Web零件协同设计制造集成关键技术研究[A];制造业与未来中国——2002年中国机械工程学会年会论文集[C];2002年
4 秦忠;;KX—R145型堆码机器人的关键技术研究[A];2002年十一省、区、市机械工程学术年会暨云南省机械工程学会第六届学术年会论文集[C];2002年
5 蔡春源;巢俊杰;杨慧;;基于Ajax技术的Web专题图层的关键技术研究[A];中国地理信息系统协会第四次会员代表大会暨第十一届年会论文集[C];2007年
6 王威信;邓达华;;基于STL的CAD/CAE集成关键技术研究[A];中国图象图形学会第十届全国图像图形学术会议(CIG’2001)和第一届全国虚拟现实技术研讨会(CVR’2001)论文集[C];2001年
7 刘群;冯丹;;基于层次结构的元数据动态管理方法的研究[A];第15届全国信息存储技术学术会议论文集[C];2008年
8 苟凌怡;熊光楞;陈斌元;柴旭东;杨流辉;陈晓波;;支持虚拟样机的协同仿真平台关键技术研究[A];二○○一年中国系统仿真学会学术年会论文集[C];2001年
9 纪翠玲;毕建涛;杨帮会;钟大伟;王星星;缪云海;;中国可持续发展信息共享与网络服务平台建设[A];第四届海峡两岸GIS发展研讨会暨中国GIS协会第十届年会论文集[C];2006年
10 蔡九菊;;钢铁厂节能减排及余热回收利用若干关键技术研究与发展[A];2008全国能源与热工学术年会论文集[C];2008年
中国重要报纸全文数据库 前10条
1 记者:胡唯元;发酵工程:撑起生物技术产品半壁江山[N];科技日报;2006年
2 记者蒋建科;我国加强食品安全关键技术研究[N];人民日报;2002年
3 石花;危化品安全技术研究首获国家支持[N];经理日报;2006年
4 ;全方位监控:铸就禽肉出口安全通道[N];科技日报;2006年
5 丁洪美;“竹质工程材料制造关键技术研究与示范”项目获国家科技进步奖一等奖[N];中国绿色时报;2007年
6 张延颖;煤泥分选关键技术研究在葛泉矿获成功[N];科技日报;2008年
7 记者 颜园园;国家千万资金支持藏医药现代化关键技术研究[N];经济参考报;2008年
8 记者 樊丹;生物工程技术应用于传统中药获重大突破[N];中国中医药报;2008年
9 范南虹;我省5项目获国家科技支撑[N];海南日报;2008年
10 张辉祖;我国深水建港技术冲刺世界领先水平[N];中国经济导报;2008年
中国博士学位论文全文数据库 前10条
1 李冰;云计算环境下动态资源管理关键技术研究[D];北京邮电大学;2012年
2 王娟;对象存储系统中元数据管理研究[D];华中科技大学;2010年
3 熊慕舟;基于网格计算的分布式数据管理关键技术研究[D];华中科技大学;2010年
4 王凯东;宽带卫星网络关键技术研究[D];西安电子科技大学;2005年
5 陈平;数据挖掘网格若干关键技术研究[D];北京邮电大学;2007年
6 周桂贤;E-HUB模式制造资源管理系统集成的关键技术研究[D];西南交通大学;2010年
7 刘群;基于可扩展对象的海量存储系统研究[D];华中科技大学;2006年
8 巩大力;城市交通智能监控系统关键技术研究[D];长安大学;2009年
9 赵晨阳;个性化旅游信息服务系统的基础理论与关键技术研究[D];兰州大学;2012年
10 张强;小型AUV水下导航系统关键技术研究[D];哈尔滨工程大学;2011年
中国硕士学位论文全文数据库 前10条
1 田亚坤;基于对象存储系统中元数据管理方法的研究[D];哈尔滨工程大学;2010年
2 闫晓静;数据库网格服务系统的研究与设计[D];西安电子科技大学;2007年
3 付强;Windows客户端文件系统元数据管理研究[D];华中科技大学;2007年
4 周震天;科技评价元数据管理系统设计与应用[D];湖南大学;2010年
5 方圆;基于对象存储元数据管理策略的研究与实现[D];解放军信息工程大学;2012年
6 田涛;广西北部湾科学数据共享平台元数据管理系统研究与实现[D];广西师范学院;2012年
7 陈宬;私有云存储系统元数据管理模块的设计与实现[D];电子科技大学;2012年
8 何玉涛;云存储中的元数据管理方法研究与实现[D];北京邮电大学;2012年
9 洪娟;达梦联机分析服务器元数据管理[D];华中科技大学;2004年
10 王荃;NEXT系统中元数据管理与索引技术研究[D];东北大学;2005年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026