收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

面向云环境数据中心的高效资源调度机制研究

孙鑫  
【摘要】:随着信息产业的快速发展以及互联网的广泛普及,数据中心作为信息服务提供平台发挥了重要的基石作用。IT的蓬勃发展使得网络和业务应用越来越多地向拥有大量服务器和存储集群的大型数据中心转移,因而数据中心的规模正经历着迅速地扩张。快速发展的数据中心正面临着诸多问题,其中急剧攀升的基础设施资源的需求与数据中心单一昂贵的资源提供方式之间的矛盾,使传统数据中心高成本、低效率、高能耗成为其中最严峻的挑战之一。因此,数据中心对提高资源利用率的迫切需求,促使人们寻求新的方式以建设下一代数据中心。 为实现资源的高效共享,以应对大数据高速增长势头而产生的云计算,凭借其更加灵活高效、低成本的运行方式成为下一代数据中心重要的发展趋势。面向云环境的数据中心,旨在基于大规模资源整合,实现高效、灵活地一致性计算与管理,以供应链方式提供共享的基础设施、信息与应用等IT服务。其中资源调度作为下一代数据中心部署大规模应用的重要保障,关系到数据中心的运营成本、整体性能以及可持续发展能力。特别是,当虚拟化成为云计算主要支撑技术后,资源虚拟化对数据中心的资源复用、关联、动态管理等方面都提出了新的挑战。这就需要研究者推动一系列创新技术去实现云计算的按需提供、弹性可扩展等特性。因此,本文重点关注面向云环境数据中心的高效资源调度。针对已有工作存在的不足,本文对基础设施资源调度技术展开了深入研究,主要包括以下三个方面: (1)研究了基于多维协同聚合的虚拟机调度机制,以缓解云环境下由于数据中心虚拟化资源的一致共享和多租户应用异构性之间的矛盾,所带来的服务器内部多种资源间分配不均衡问题。本文提出了基于服务器聚合的多维协同调度方法,以提高面向云环境数据中心的基础设施资源利用率。我们首先将该问题映射为多维协同的可变向量装箱模型(MCVP),随后提出一种基于多维资源协同聚合的虚拟机调度算法(MCCA)。该算法利用分组遗传框架在群体编码等方面的特性来满足模型的群体优化属性需求,采用模糊逻辑方法设计了多维协同的搜索控制函数,并对核心算子进行基于概率选择和多属性决策的优化,以提高算法效率及求解质量。实验结果表明该算法对均衡多维资源,从而提高资源综合利用率具有一定优势。 (2)研究了通信关联感知的多层应用映射策略,以解决由数据中心网络资源不合理使用所导致的网络压力增大问题。数据中心网络资源有限且具有一定的层次关系,其调度方法关系到数据中心的整体性能和可扩展性等。数据中心网络资源消耗与两类通信关系相关,即虚拟机之间的通信模式和服务器间的拓扑形态。本文提出合理关联两类通信关系的映射策略优化思想,通过将较大通信流量映射在低复用链路上,来提高网络资源的效用,降低网络负载,从而有助于扩展数据中心的承载能力。我们将该问题映射为扩展的二次分配问题(Quadratic Assignment Problem, QAP),并提出一种考虑多层应用可用性映射冲突的双阶段优化算法(DOPA),在合理的时间内获得满足模型目标的近似最优解。实验结果表明该算法实现了优化数据中心网络资源效用,降低网络压力以提高可扩展性的目标。 (3)研究了面向并发序列的虚拟机迁移机制,以满足大规模资源共享的灵活性和时序高效需求。云环境数据中心的资源高聚合度,使大量虚拟机的并发迁移操作产生迁移序列约束,同时热迁移的延迟对大规模调度带来了更多挑战。本文采用基于流(flow-based)模型对并发序列的虚拟机迁移场景进行抽象,给出了VMM层面对整体调度延迟的评估方法。通过降低dirty page生成速率和动态调节迁移带宽,我们提出了基于" min-max "原则的面向并发序列虚拟机自适应迁移调度算法(SAAM)。仿真结果表明,SAAM算法不仅能够降低单一虚拟机迁移操作的延迟,而且能够根据flow-based模型的技术特点和并发序列的约束,优化并发迁移场景的整体调度延迟开销,论证了该算法在单一虚拟机和并发虚拟机迁移序列场景下,对热迁移延迟指标的优化作用。


知网文化
【相似文献】
中国期刊全文数据库 前20条
1 秦丽;;天狮集团 数据中心搬迁倒计时[J];信息方略;2010年12期
2 ;技术+规划=成功——惠普亚特兰大数据中心整合[J];每周电脑报;1999年48期
3 ;24×7成功法则——简述263首都在线数据中心建设[J];每周电脑报;2000年50期
4 胡维浩;浅谈数据中心的安全运行管理[J];华南金融电脑;2002年10期
5 ;让你的机架式设备不再“发高烧”[J];数码世界;2005年03期
6 N博士;数据中心要降温更要节能[J];中国计算机用户;2005年42期
7 N博士;;机房布设需长远规划[J];中国计算机用户;2006年30期
8 王志欣;;编好一个“篮子”[J];软件世界;2006年22期
9 宿建光;;把握企业计算未来 HP颠覆IT经济[J];通信世界;2006年45期
10 宿建光;;Radware帮助数据中心实现“节能环保”[J];通信世界;2007年13期
11 ;把好UPS“扩容”关[J];中国计算机用户;2007年33期
12 ;新一代数据中心呼之欲出 惠普刀片服务器锋芒毕露[J];电力信息化;2007年06期
13 ;虚拟化技术节能数据中心[J];每周电脑报;2007年36期
14 赵军;龚慧钦;;银行数据中心UPS系统的配置与维护管理[J];中国金融电脑;2007年10期
15 商尔从;张永强;;数据中心架构的研究与实践——中山大学数据中心建设探索[J];中国教育网络;2007年12期
16 ;绿色动力 生生不息——构建绿色数据中心[J];通信世界;2008年14期
17 ;改善数据中心能效的十大准则[J];微电脑世界;2008年04期
18 丁常彦;;惠普刀片成就新一代数据中心[J];中国计算机用户;2008年17期
19 ;“如何构建下一代数据中心”之二 数据中心光纤的应用方向是高密度模块化[J];智能建筑与城市信息;2008年09期
20 徐超;;IT服务终极考验:数据中心搬迁来临[J];通信世界;2008年44期
中国重要会议论文全文数据库 前10条
1 谢信耐;;以信息化促进体院管理改革——构建数据中心的设想[A];第七届全国体育科学大会论文摘要汇编(二)[C];2004年
2 丁豪;;数据中心高可靠性供电方案研究[A];土木建筑学术文库(第15卷)[C];2011年
3 王永明;李兴林;;船舶远程识别与跟踪系统的发展与应用[A];第五届卫星通信新业务新技术学术年会暨卫星通信系统网间互联互通与接口标准研讨会论文集[C];2009年
4 王崙;;行业统一数据中心在吉林烟草的实践[A];华北、东北地区2007年度烟草学术交流研讨会论文集[C];2007年
5 ;美国Airflow数据中心专用空调机[A];全国暖通空调制冷1996年学术年会资料集[C];1996年
6 邓莉;;浅谈数据中心的信息安全管理策略[A];网络安全技术的开发应用学术会议论文集[C];2002年
7 王新峰;;浅谈数据中心建设和商务智能(BI)的开发与实施[A];河南省烟草学会2008年学术交流获奖论文集(上)[C];2008年
8 孙壮志;;基于信息集成的数据中心的实现[A];中国烟草行业信息化研讨会论文集[C];2004年
9 刘圣庆;;提高数据中心机房安全可靠探讨[A];通信电源新技术论坛——2008通信电源学术研讨会论文集[C];2008年
10 王其英;;通信行业数据机房建设新概念[A];中国石油石化工程技术和物装手册(第二分册)[C];2003年
中国博士学位论文全文数据库 前10条
1 孙鑫;面向云环境数据中心的高效资源调度机制研究[D];北京邮电大学;2012年
2 陈辉;基于虚拟化环境的数据中心节能管理技术研究[D];北京邮电大学;2012年
3 赵威;电网数据中心的数据安全问题研究[D];燕山大学;2011年
4 王智明;云数据中心资源调度机制研究[D];北京邮电大学;2012年
5 刘晓茜;云计算数据中心结构及其调度机制研究[D];中国科学技术大学;2011年
6 梅智胜;我国传统药物知识保护研究[D];中国中医科学院;2007年
7 刘航;WMSNs在云计算中心节能减排中的关键技术研究[D];大连理工大学;2011年
8 邵远征;网络环境下对地观测数据的发现和标准化处理[D];武汉大学;2011年
9 陈秀忠;面向云计算的基础网络提供技术研究[D];北京邮电大学;2011年
10 钟鼎坤;行星际中小尺度结构的综合研究[D];中国科学院研究生院(空间科学与应用研究中心);2007年
中国硕士学位论文全文数据库 前10条
1 后国超;基于Web的医疗数据交换中心的设计与实现[D];大连理工大学;2004年
2 魏金强;多维分析技术在教务管理系统中的应用与研究[D];北方工业大学;2006年
3 何煜翔;银行数据中心灾难恢复系统研究与实践[D];上海交通大学;2007年
4 夏东盛;高职数字化校园的设计与实现[D];华东师范大学;2008年
5 朱应国;基于VRRP高可靠性数据中心的应用研究与实践[D];江南大学;2009年
6 董凤江;烟草贸易数据中心系统研究[D];上海交通大学;2008年
7 谢红涛;电力企业数据中心的架构设计研究[D];复旦大学;2009年
8 李宇平;AVIDM系统中若干问题的研究[D];上海交通大学;2008年
9 李凯;银行数据集中环境下数据中心网络的设计与实现[D];北京邮电大学;2006年
10 刘方亚;数据仓库在江西烟草数据中心系统中的应用[D];南昌大学;2007年
中国重要报纸全文数据库 前10条
1 ;数据中心在变化[N];计算机世界;2004年
2 郑燃;数据中心绿色蜕变[N];政府采购信息报;2008年
3 马磊;绿色数据中心不能光说不练[N];政府采购信息报;2008年
4 本报记者 刘洪宇;嘉实基金打造高端数据中心[N];中国计算机报;2008年
5 本报记者 吴玉征;万和证券数据中心节能故事[N];计算机世界;2009年
6 电脑商报记者 祁萌;数据中心面临的挑战依然存在[N];电脑商报;2010年
7 本报记者 于翔;数据中心向云扩展[N];网络世界;2010年
8 本报记者 胡英;新一代数据中心引发交换机变革[N];计算机世界;2010年
9 本报记者 郭涛;数据中心的“瘦身”良方[N];中国计算机报;2008年
10 张静;构建新一代数据中心中国数据中心用户大会召开[N];中国计算机报;2008年
中国知网广告投放
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978