收藏本站
《北京邮电大学》 2012年
收藏 | 手机打开
二维码
手机客户端打开本文

云数据中心资源调度机制研究

王智明  
【摘要】:近年来,随着互联网技术的飞速发展和虚拟化技术的普遍应用,云计算已经成为研究热点,用户可以从云中按需获得服务。云数据中心是在云计算环境下,由硬件和软件组成的松耦合资源共享架构。现有云数据中心在以下三方面存在不足之处:1.由于现有云数据中心没有实现充分有效的全局双向选择交易,因此导致了它没有满足大多数云市场参与者的交易需求并且它的大多数云资源提供者收益偏低。2.由于现有云数据中心没有充分考虑多维云资源的调度,因此其多维云资源利用率偏低。3.由于现有云数据中心没有充分考虑云任务间的通信能耗,因此它的能耗偏高。为了解决上述问题,本文提出了一种新颖的云数据中心资源调度机制。该机制基于可以满足大多数云市场交易者交易需求的改进双向拍卖竞价调度策略,利用融合了具有启发式优化能力的粒子群算法、遗传算法和蚁群算法的多维云资源高效调度方法,并通过虚拟机迁移方式实现了在提供原有系统性能的前提下关闭闲置的处理机的融合调度方案。通过大量的实验验证,该机制具有云资源提供者高收益、多维云资源高利用率和云数据中心低能耗的优点。本文主要研究成果如下: 1.基于双向拍卖理论的竞价调度策略。现有云数据中心没有实现充分有效的全局双向选择交易,大多数云市场参与者的交易请求并未得到满足,云资源提供者的收益偏低且存在严重的云市场交易不均衡问题。针对已有研究成果中云市场交易不均衡的局限性,本文通过分析云数据中心资源竞价调度问题中客观存在的灵活性和动态性特点,提出了融合双向拍卖理论、粒子群优化算法和遗传优化算法的竞价调度策略。该调度策略可以满足大多数云市场交易者的交易需求,并提高了云资源提供者的收益。本文借助于CloudSim实验体系架构验证了基于双向拍卖理论的竞价调度策略的可行性,与现有的调度策略相比,本调度策略使得云资源提供者收益增长率达到45%且交易量增长率达到37.1%。 2.基于整数马尔可夫理论的多维云资源高效调度方法。现有云数据中心没有真正的实现多维云资源调度,多维云资源(计算、存储和带宽)的资源利用率偏低且存在严重的碎片资源浪费问题。针对已有研究成果中多维碎片资源利用率偏低的局限性,本文通过总结影响多维云资源调度方法的因素,并以参数的形式反映其影响,提出了基于整数马尔可夫理论并结合改进的遗传算法和并行蚁群算法的计算、存储和带宽资源高效调度方法。该调度方法实现了多维云资源调度,并提高了多维碎片资源利用率。本文借助于CloudSim实验体系架构验证了基于整数马尔可夫理论的多维云资源高效调度方法的有效性,与现有的调度方法相比,本调度方法能够使得多维云资源利用率的增长率达到50.31%。 3.基于云任务的低能耗融合调度方案。随着云数据中心的规模不断扩大,云任务间的通信能耗不断提高,云数据中心的能量消耗偏高问题日益严重。针对已有研究成果并没有充分考虑云任务间通信能耗较高的局限性,本文对低能耗调度方案的内在规律进行抽象,提出了结合资源融合原理、粒子群和禁忌算法并融合调度计算、存储和带宽资源的低能耗融合调度方案。该调度方案充分考虑了云任务间的通信带宽能量消耗,并降低了云数据中心的能量消耗。本文借助于CloudSim实验体系架构验证了该方案的稳定性,与现有的调度方案相比,本调度方案能够使得云数据中心能耗下降率达到60.81%。
【学位授予单位】:北京邮电大学
【学位级别】:博士
【学位授予年份】:2012
【分类号】:TP308

【引证文献】
中国期刊全文数据库 前3条
1 蒋昆;冯娟;王暾;杨艳华;李想;苏玉成;;我院数据中心向“双活”云数据中心转型[J];中国医疗设备;2015年12期
2 凌霄娥;李克潮;;云计算关键技术与云图书馆研究[J];农业图书情报学刊;2015年05期
3 王守初;;云数据中心资源调度机制研究[J];网络安全技术与应用;2014年03期
中国博士学位论文全文数据库 前2条
1 敬超;面向云数据中心的高效能调度及资源管理研究[D];上海交通大学;2014年
2 乐冠;面向服务系统的自适应资源管理技术研究[D];北京邮电大学;2013年
中国硕士学位论文全文数据库 前10条
1 关鹤童;基于混沌粒子群鸡群融合优化算法的云任务调度应用与实现[D];吉林大学;2016年
2 曲晓雅;负载感知的虚拟机初始化放置和迁移时机判决机制的研究[D];北京交通大学;2016年
3 杨应长;面向区域云的远程分布式资源传输技术研究[D];华南理工大学;2015年
4 孙文晓;遥感专题产品生产中业务流程控制与资源调度设计与实现[D];燕山大学;2015年
5 郭培;云环境下资源调度算法研究[D];河南大学;2015年
6 姚雨;基于透明加解密的云数据安全保护系统[D];东南大学;2015年
7 张垚;电力公司数据中心综合查询分析平台的设计与实现[D];电子科技大学;2015年
8 朱健荣;云计算环境下虚拟资源管理技术的研究[D];南京航空航天大学;2015年
9 任莹;典型用能系统能耗建模仿真技术研究[D];华北电力大学;2015年
10 杜治娟;弥散云资源感知与调度方法研究与实现[D];河北经贸大学;2014年
【同被引文献】
中国期刊全文数据库 前10条
1 赵浩宇;;区域医疗信息化平台数据交换方案设计[J];中国医疗设备;2014年09期
2 李宏伟;肖伟;;存储虚拟化技术在双活数据中心中的应用[J];邮电设计技术;2013年09期
3 邓维;刘方明;金海;李丹;;云计算数据中心的新能源应用:研究现状与趋势[J];计算机学报;2013年03期
4 张扬;郭森;季平;;基于SAP ERP信息系统的双活数据中心研究[J];电力信息化;2013年01期
5 张小庆;贺忠堂;李春林;张恒喜;钱琼芬;;云计算系统中数据中心的节能算法研究[J];计算机应用研究;2013年04期
6 林伟伟;齐德昱;;云计算资源调度研究综述[J];计算机科学;2012年10期
7 邓玉辉;;云基础设施下的体系结构、挑战与机遇[J];小型微型计算机系统;2012年08期
8 赵以爽;肖伟;;IaaS云计算数据中心设计探讨[J];邮电设计技术;2012年07期
9 杨健;汪海航;王剑;俞定国;;云计算安全问题研究综述[J];小型微型计算机系统;2012年03期
10 黄瑛;石文昌;;云基础设施安全性研究综述[J];计算机科学;2011年07期
中国博士学位论文全文数据库 前5条
1 马飞;云数据中心中虚拟机放置和实时迁移研究[D];北京交通大学;2013年
2 王智明;云数据中心资源调度机制研究[D];北京邮电大学;2012年
3 孙鑫;面向云环境数据中心的高效资源调度机制研究[D];北京邮电大学;2012年
4 刘晓茜;云计算数据中心结构及其调度机制研究[D];中国科学技术大学;2011年
5 李东升;基于对等模式的资源定位技术研究[D];国防科学技术大学;2005年
中国硕士学位论文全文数据库 前10条
1 周焱霞;云数据中心虚拟机放置问题研究[D];中国科学技术大学;2015年
2 彭国刊;一个基于RTSP协议的自适应流媒体传输系统[D];华南理工大学;2014年
3 齐昕;风电场运行数据采集和监控系统的研究与应用[D];华北电力大学;2014年
4 王慧;基于Petri网的遥感产品生产模型研究与应用[D];河南大学;2014年
5 张恺;基于UDP的可靠文件传输协议的设计与实现[D];西安电子科技大学;2014年
6 葛亮;智能变电站在线监测系统测试平台的设计与实现[D];华北电力大学;2014年
7 刘晓建;电力设备状态信息并行数据挖掘方法研究[D];华北电力大学;2014年
8 郭亦兴;数据中心电源系统分析与节能探讨[D];长安大学;2013年
9 谢其扬;云数据中心基于超图的存储优化节能算法研究[D];北京交通大学;2013年
10 齐文艳;面向能耗优化的数据中心资源动态调度模型与方法[D];哈尔滨工业大学;2013年
【二级引证文献】
中国博士学位论文全文数据库 前1条
1 程超;面向物联网的定位系统链路选择与分配[D];吉林大学;2014年
中国硕士学位论文全文数据库 前1条
1 赵树超;基于人工蜂群算法的Hadoop调度算法研究与改进[D];河北经贸大学;2016年
【相似文献】
中国期刊全文数据库 前10条
1 江南;数据中心如何应付管理挑战[J];互联网周刊;2001年40期
2 ;简化管理挑战——惠普推实用数据中心解决方案[J];每周电脑报;2001年67期
3 李庆莉;去数据中心看一看——中国银行华北信息中心计划处处长云恩善谈数据中心运行、管理[J];中国金融电脑;2002年12期
4 马天蔚;;数据中心按需造[J];每周电脑报;2002年25期
5 戚丽,蒋东兴,武海平,冯珂;校园数据中心建设与管理方法的探索[J];教育信息化;2002年S1期
6 何俊山;您企业的数据中心2003了吗?[J];微电脑世界;2003年17期
7 ;挖潜数据中心[J];金融电子化;2004年07期
8 王琨月;;数据中心业务就绪[J];每周电脑报;2004年21期
9 包东智;新热点:创建下一代数据中心[J];上海信息化;2005年10期
10 ;把握数据中心建设五大看点[J];中国计算机用户;2005年10期
中国重要会议论文全文数据库 前10条
1 姚贇;;欧洲数据中心节能新技术[A];通信电源新技术论坛2011通信电源学术研讨会论文集[C];2011年
2 郭英鹏;;云计算环境下的数据中心网络发展初探[A];广东通信2010青年论坛优秀论文集[C];2010年
3 杨伟强;赵冰;牛风喜;邢建厂;;莱钢数据中心高可用性网络的研究与应用[A];第七届工业仪表与自动化学术会议论文集[C];2006年
4 郭捷夫;;基于云计算模型的绿色IT数据中心构建方案研究[A];2011年通信与信息技术新进展——第八届中国通信学会学术年会论文集[C];2011年
5 张赪军;黄红梅;白小霞;朱靖;;构建企业级虚拟数据中心[A];第六届全国信号和智能信息处理与应用学术会议论文集[C];2012年
6 关亚东;;财经传媒数据中心的发展趋势[A];中国新闻技术工作者联合会2013年学术年会、五届五次理事会暨第六届“王选新闻科学技术奖”和优秀论文奖颁奖大会论文集(广电篇)[C];2013年
7 沈洁;王浩;;云计算数据中心的节能结构及评测[A];2013年中国通信学会信息通信网络技术委员会年会论文集[C];2013年
8 刘涛;;论数据中心在烟草商业企业的应用[A];中国烟草行业信息化研讨会论文集[C];2004年
9 谢信耐;;以信息化促进体院管理改革——构建数据中心的设想[A];第七届全国体育科学大会论文摘要汇编(二)[C];2004年
10 罗彤;吴蕾;江宝东;;环保信息数据中心建设中的几个关键技术初探[A];2007中国环境科学学会学术年会优秀论文集(下卷)[C];2007年
中国重要报纸全文数据库 前10条
1 ;数据中心在变化[N];计算机世界;2004年
2 本报通讯员 曹军;项俊波对数据中心未来建设提出五项要求[N];中国城乡金融报;2007年
3 潘竑;绿色创新工程:应对数据中心能效挑战[N];金融时报;2007年
4 ;企业级数据中心:向数据运营服务中心演进[N];金融时报;2007年
5 王悦承;惠普:下一代数据中心应分三步走[N];中国计算机报;2006年
6 ;为数据中心能耗账单减负[N];中国计算机报;2007年
7 刘学习;数据中心趋势是高效和节能[N];计算机世界;2006年
8 讯源 编译;数据中心遭遇电力危机[N];计算机世界;2006年
9 杨霞清;“下一代数据中心”结束信息孤岛[N];计算机世界;2006年
10 杨青峰;数据中心走向运营服务[N];计算机世界;2007年
中国博士学位论文全文数据库 前10条
1 阮顺领;基于虚拟架构的模块化数据中心节能管理研究[D];西安建筑科技大学;2015年
2 李阳阳;数据中心网络资源管理及调度技术研究[D];北京邮电大学;2015年
3 杨英仪;面向云存储副本复制的一致性关键技术研究[D];华南理工大学;2015年
4 张江涛;分布式云计算资源配置技术研究[D];哈尔滨工业大学;2016年
5 刘晓茜;云计算数据中心结构及其调度机制研究[D];中国科学技术大学;2011年
6 敬思远;面向绿色虚拟数据中心资源管理的若干关键技术研究[D];电子科技大学;2013年
7 陈辉;基于虚拟化环境的数据中心节能管理技术研究[D];北京邮电大学;2012年
8 张鹏;数据中心网络的流量管理和优化问题研究[D];北京邮电大学;2013年
9 王智明;云数据中心资源调度机制研究[D];北京邮电大学;2012年
10 孙鑫;面向云环境数据中心的高效资源调度机制研究[D];北京邮电大学;2012年
中国硕士学位论文全文数据库 前10条
1 李时枢;绿色IT在数据中心的应用研究[D];西南财经大学;2008年
2 栗民;J公司云计算数据中心运维管理研究[D];广东商学院;2013年
3 王泽青;中国大陆不同气候分区数据中心自然冷却模式的PUE分析[D];天津商业大学;2015年
4 刘龙;数据中心虚拟防火墙的设计与实现[D];山东大学;2015年
5 孙云涛;基于Hadoop的广电CDN数据中心系统设计与实现[D];山东大学;2014年
6 马倩琳;中关村软件园数据中心营销策略研究[D];对外经济贸易大学;2015年
7 刘元展;数据中心供配电系统可用性设计[D];哈尔滨工业大学;2015年
8 张润驰;面向数据中心网络的故障诊断算法[D];南京财经大学;2015年
9 张睿阳;数据中心的拥塞控制算法优化研究[D];浙江大学;2015年
10 左利鹏;数据中心的热流模拟和能耗优化[D];浙江大学;2015年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026