收藏本站
《南京邮电大学》 2018年
收藏 | 手机打开
二维码
手机客户端打开本文

OpenStack和Ceph结合的云存储设计与实现

周林  
【摘要】:随着人们对信息存储的需求不断增加,对存储便捷性要求也越来越高,传统的存储方式已经不能满足这些需求。众所周知,传统的存储方式大部分只能依靠单个节点来存储信息,不仅成本高,而且效率低;若单节点的物理磁盘损坏,数据便会全部丢失,无法找回;假设某些企业用户后来发展壮大,信息储量远远超过了现在的容量,则需要人工扩容,其效率也是极其低下的,硬盘的使用率也很低,存在有的盘已经装满数据,有的盘还是空的情况,若企业想将数据迁移到别的地方也非常地困难,需要花费大量的人力物力来完成数据转移工作。应该使用什么样的方式来存储企业的数据,并对它们进行便捷的管理,是当前的企业面临的燃眉之急。实习所在的机敏科技软件有限公司(南京机敏科技软件有限公司是业内第一家OpenStack桌面云厂商,提供企业级稳定高效可靠的云计算服务,具有极简化运维,多维度的安全防护,易扩容,易部署等特点)也面临同样的问题。本文通过分析国内外研究现状并结合公司需求,从云存储系统方案设计、系统底层设计、系统功能接口设计和实现、系统部署和调试四个方面进行研究和实现;论文的主要工作如下:首先,分析了云计算和OpenStack等相关技术,比较了Ceph和Swift的优缺点,提出了Ceph和OpenStack结合的两种方案,给出方案的设计架构,并比较了两种方案,分析了方案的可行性和复杂度,确定最终方案。然后,是云存储系统底层的设计和部署,底层设计的方案包括服务器的使用、网络节点的选择、Monitor节点和OSD节点的安排;底层部署则使用三台服务器新建Ceph的集群,需要给集群设置两个网络;包括公有网络和集群网络,使得集群能够健康的运行;其次,根据用户的需求设计指定的接口,分析接口的逻辑,并在Ceph集群基础上实现接口的功能,界面则在Horizon中进行二次开发,系统可以实现数据存储、下载等功能;不仅对外可以提供对象存储服务,当数据过多时候还能够动态有效的进行扩容,使数据存储变得更高效、更便捷。最后将系统部署到公司的服务器上,验证是否能够提供简单的对象存储功能,并对系统的性能进行测试。
【学位授予单位】:南京邮电大学
【学位级别】:硕士
【学位授予年份】:2018
【分类号】:TP333

手机知网App
【参考文献】
中国期刊全文数据库 前8条
1 张振刚;张小娟;;广州智慧城市建设的现状、问题与对策[J];科技管理研究;2015年16期
2 姜蕴莉;;云计算在高校中的应用分析[J];软件;2014年12期
3 宋宁;张志林;张聪;;基于云存储服务的云编辑功能实现探析——以谷歌云端硬盘(Google Drive)与微软云端硬盘(One Drive)云存储服务为例[J];中国编辑;2014年06期
4 曾平;;国内云计算研究现状与未来[J];电脑与信息技术;2014年01期
5 宋顺祥;姜莹;;基于Amazon S3兼容云存储平台的媒体文件存储与访问[J];信息通信技术;2013年01期
6 张怀南;杨成;;我国云计算教育应用的研究综述[J];中国远程教育;2013年01期
7 杨振贤;;基于云计算的安全数据存储研究与设计[J];信息安全与技术;2011年10期
8 罗军舟;金嘉晖;宋爱波;东方;;云计算:体系架构与关键技术[J];通信学报;2011年07期
中国硕士学位论文全文数据库 前4条
1 刘谭兴;分布式键值存储系统的设计与实现[D];西安电子科技大学;2015年
2 胡珊珊;面向云存储的非结构化数据存储研究与应用[D];广东工业大学;2014年
3 师绍秋;面向云计算的RESTful信息资源池的设计与实现[D];上海交通大学;2014年
4 周明;云计算中的数据安全相关问题的研究[D];南京邮电大学;2013年
【共引文献】
中国期刊全文数据库 前10条
1 仇明;;桌面云在高校实验教学中的应用研究[J];河北软件职业技术学院学报;2017年04期
2 关庆娟;杨燕梅;;基于虚拟化技术的分级资源分配策略研究[J];电脑知识与技术;2015年34期
3 屠卫;;基于Google的云计算技术[J];成组技术与生产现代化;2015年04期
4 刘琦;;网络安全事件应急处置与管理平台的设计与实现[J];电脑知识与技术;2015年26期
5 庄焕;;云计算辅助教学调查分析[J];电脑知识与技术;2015年26期
6 夏润亮;冯兴凯;何明民;吴虎统;;基于模型标准化的水利数值模拟云服务平台研究[J];水利信息化;2015年06期
7 陈敏;;基于开源技术的云平台大数据系统的应用研究[J];通讯世界;2015年24期
8 邓蓉;陆涛;胡建华;;云环境下基于jQuery与JSON数据传递方法设计[J];现代计算机(专业版);2015年36期
9 冯向科;邓莹;;OpenStack平台部署改进方法研究[J];软件导刊;2015年12期
10 罗树;沈记全;;基于优化AHP的虚拟机部署与调度策略[J];计算机工程与设计;2015年12期
中国硕士学位论文全文数据库 前10条
1 周林;OpenStack和Ceph结合的云存储设计与实现[D];南京邮电大学;2018年
2 邢冉;基于云存储的资源管理系统的设计与实现[D];河北科技大学;2018年
3 高志栋;基于Ceph的分布式存储在数据中心的设计与实现[D];兰州大学;2018年
4 高娟;基于大数据的勘探生产门户信息推荐系统研究[D];西安石油大学;2017年
5 刘昊;基于文件分割的云存储文件保密研究[D];贵州大学;2017年
6 杨灏;基于信任中继的量子密钥分配网络的路由算法研究[D];北京邮电大学;2017年
7 贾红英;物联网平台的异构数据的融合与存储[D];北京邮电大学;2017年
8 王晴;电力企业非结构化数据管理平台的研究与设计[D];吉林大学;2016年
9 崔文斌;小麦病害图像的存储与识别技术的研究[D];山东农业大学;2016年
10 凌升杭;基于Ceph分布式存储系统的安全访问控制设计和实现[D];东南大学;2016年
【二级参考文献】
中国期刊全文数据库 前10条
1 姜福成;;云计算的基础结构设计和云应用服务[J];软件;2014年07期
2 谭林海;;基于云计算的教学资源管理模型设计[J];软件;2014年06期
3 丁养志;;浅析虚拟化技术在云计算中的运用[J];软件;2014年03期
4 李华清;;云计算技术及应用服务模式探讨[J];软件;2014年02期
5 王晓艳;;基于云计算的数据中心建设探讨[J];软件;2014年02期
6 苏红旗;刘官树;;一种基于内存共享的高效进程间通信机制[J];新型工业化;2014年02期
7 董艳丽;;云计算在高职高专院校数字化校园建设中的应用[J];计算机光盘软件与应用;2014年04期
8 李晓坤;邵娜;;云计算虚拟化与SAN存储大集中集成研究[J];软件;2014年01期
9 吴绘萍;;云计算数据安全技术探讨[J];软件;2014年01期
10 韦明;;基于云计算的组织知识管理探究[J];软件;2014年01期
中国硕士学位论文全文数据库 前7条
1 曾泉匀;基于Redis的分布式消息服务的设计与实现[D];北京邮电大学;2014年
2 邢屹;大规模键值分布式存储系统的设计与实现[D];电子科技大学;2013年
3 朱振;基于MySQL复制改进的多主复制数据库扩展实现[D];上海交通大学;2013年
4 宣振国;基于Mysql的数据库集群设计与实现[D];北京邮电大学;2013年
5 刘腾;MySQL复制技术的研究与改进[D];浙江大学;2011年
6 黄晓云;基于HDFS的云存储服务系统研究[D];大连海事大学;2010年
7 张先哲;分布式系统中的负载平衡检测与优化策略研究[D];河南大学;2009年
【相似文献】
中国期刊全文数据库 前10条
1 郭御风;李琼;罗莉;;一种基于定制高性能互连的对象存储系统[J];计算机工程与科学;2011年05期
2 刘群;冯丹;王芳;;一种高性能对象存储系统[J];计算机工程;2008年15期
3 冯丹;张羚;覃灵军;;基于对象存储系统的服务质量框架研究[J];计算机应用研究;2007年01期
4 周功业;雷伟;陈进才;;基于对象存储系统中的热点数据平衡策略[J];华中科技大学学报(自然科学版);2007年12期
5 陶伟,麦中凡;基于虚存映射的对象存储系统的设计与实现[J];计算机学报;1997年06期
6 胡豆豆;罗飞;张园;;对象存储系统的自动化管理技术[J];电信科学;2017年11期
7 祝晓东;郁松年;易松;;对象存储系统的镜像快速复制研究[J];计算机工程与设计;2011年07期
8 宋健;刘川意;鞠大鹏;汪东升;;基于对象存储系统中多维服务质量保证的设计与实现[J];计算机工程与设计;2008年03期
9 王慧丽;冯丹;覃灵军;;基于对象存储系统中属性管理的研究与实现[J];计算机应用研究;2007年11期
10 张强善;严正香;徐澍;;基于云环境下高可靠性对象存储系统的数据组织研究[J];吉林建筑工程学院学报;2014年05期
中国重要会议论文全文数据库 前5条
1 单颖;姚念民;赵建明;;基于对象存储系统体系结构的研究[A];第15届全国信息存储技术学术会议论文集[C];2008年
2 肖亮;谢长生;魏沁祺;李馨;;基于属性控制的对象存储系统[A];2008'中国信息技术与应用学术论坛论文集(二)[C];2008年
3 陶伟;麦中凡;;MIDS引擎的对象存储系统[A];数据库研究与进展95——第十三届全国数据库学术会议论文集[C];1995年
4 朱立谷;孙志伟;任勇;张雷;彭建峰;杨柳;阳小珊;李强;;基于内容的对象存储技术的研究[A];第15届全国信息存储技术学术会议论文集[C];2008年
5 高媛;庄严;朱坎;郑振楣;石树刚;;os的虚存技术与双缓冲机制相结合—Sambase中对象存储系统的新奉献[A];数据库研究与进展95——第十三届全国数据库学术会议论文集[C];1995年
中国重要报纸全文数据库 前2条
1 国防科学技术大学计算机学院 吴庆波 董勇 周恩强;对象存储不给高性能计算添堵[N];中国计算机报;2005年
2 中兴通讯;云存储铺就海量数据之路[N];通信产业报;2011年
中国博士学位论文全文数据库 前8条
1 谭支鹏;对象存储系统副本管理研究[D];华中科技大学;2008年
2 陈俊健;面向对象存储系统安全技术研究[D];华中科技大学;2011年
3 罗益辉;海量对象存储系统数据组织算法的研究[D];华中科技大学;2006年
4 曾令仿;基于对象的网络存储智能处理方法研究[D];华中科技大学;2006年
5 吴晨涛;对象存储系统中热点数据的研究[D];华中科技大学;2010年
6 姚荻;对象存储安全关键技术研究[D];华中科技大学;2011年
7 牛中盈;并行文件系统安全性研究[D];华中科技大学;2010年
8 肖亮;基于服务质量的对象存储优化研究[D];华中科技大学;2009年
中国硕士学位论文全文数据库 前10条
1 常栋;云计算环境下基于HDFS的对象存储系统的研究[D];东北大学;2015年
2 周林;OpenStack和Ceph结合的云存储设计与实现[D];南京邮电大学;2018年
3 朱尧;对象存储系统安全检测技术的研究[D];华中科技大学;2009年
4 戴毅;基于对象存储系统负载均衡技术研究[D];华中科技大学;2007年
5 张伟;对象存储系统中数据通道的设计与实现[D];华中科技大学;2008年
6 卢锦;对象存储系统中数据私密性保护与共享[D];华中科技大学;2012年
7 田亚坤;基于对象存储系统中元数据管理方法的研究[D];哈尔滨工程大学;2010年
8 衣国垒;基于中心节点架构的大规模数据对象存储系统[D];清华大学;2013年
9 李鹏;对象存储系统中身份认证机制的设计与实现[D];华中科技大学;2011年
10 黎明;基于对等网的广域对象存储系统研究[D];清华大学;2004年
中国知网广告投放
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026