收藏本站
《华中科技大学》 2008年
收藏 | 手机打开
二维码
手机客户端打开本文

iSCSI OSD存储系统端到端服务质量支持策略研究

苏勇  
【摘要】: 随着网络存储技术的发展,产生了将块级接口的存储区域网络技术和文件级接口的网络附属存储技术两者相结合的基于对象的网络存储技术。它具有高智能、高性能、高可靠性、跨平台以及安全的数据共享等特点。网络存储中存储服务质量支持的研究在国内外才开始不久,在广度和深度上还无法适应日益严峻的存储需求,而且也没形成一个有效的体系结构。因此提供存储服务质量支持的研究是网络存储研究领域中一个非常重要的研究方向。 iSCSI OSD(Obiect Storage Device)是一种对iSCSI协议进行OSD协议扩展的基于对象的网络存储系统。在对iSCSI OSD体系结构分析研究的基础上,采用闭合排队网络模型方法对其进行了性能区间分析,建立了数据访问的吞吐量和响应时间的最大值和最小值的性能区间模型公式,作为存储系统对客户端的存储服务质量需求的合理性判断。 研究提出一种在iSCSI OSD中端到端服务质量支持策略,其通过四个方面提供服务质量支持,分别是对象服务质量属性扩展的支持、网络带宽动态分配的服务质量支持、存储端缓冲区动态分配的服务质量支持和存储端I/O调度的服务质量支持四个方面组成。对象属性的服务质量支持是通过对OSD协议的对象属性进行了Bandwidth、ResponseTime和IOPS三个服务质量属性的扩展定义实现;研究设计了服务质量支持的网络动态带宽分配,其通过根据网络传输中各协议开销和存储带宽服务质量需求来计算数据访问所需的网络带宽,然后进行动态网络带宽分配;研究设计了服务质量支持的存储端缓冲区分配,其通过分析研究缓存命中率与响应时间的关系,存储端通过动态缓存分配实现对不同客户端响应时间服务质量需求的支持;存储端采用了层次I/O调度的服务质量支持,分别为对象I/O调度的服务质量支持和磁盘I/O调度服务质量支持。对象I/O调度的服务质量支持包括对象I/O预处理,建立QoS(Quality of Service)Queue及QoS Queue中基于响应时间服务质量需求计算I/O请求的Deadline;磁盘I/O调度采用了一种同时对存储带宽和响应时间服务质量需求支持的I/O调度策略。 在iSCSI OSD存储系统中分离了数据和元数据的管理,元数据由元数据服务器集群管理,而且元数据的访问量占整个存储系统的数据访问量的50%~80%,因此元数据服务系统是个潜在的访问瓶颈,只有提供负载均衡的元数据访问服务,才能提高整个存储系统的性能,这对存储系统的响应时间服务质量需求的支持也是一个基本保证。研究分析了传统的元数据服务系统的管理模式,并且对传统的双元数据服务器系统的可靠性进行了理论分析。研究设计出一种基于两次哈希的元数据映射管理,其元数据放置策略的思想是利用哈希表中发生冲突的记录会顺次相邻存放的特点将对象有关的元数据实现在桶中相邻存放,并且通过理论证明其具有较低的查找和删除开销。研究设计了一种异构环境下基于线性链式的MDS集群的负载均衡策略,通过对元数据服务器集群的响应时间的理论分析以及模拟性能测试,表明该策略保证了元数据服务器集群的负载均衡。 通过分析研究OSD仿真器的设计原理构造仿真测试平台,然后分别测试了基于服务质量支持的缓存分配策略,OSD设备I/O调度的服务质量支持及iSCSI OSD端到端服务质量支持,测试结果表明各服务质量支持策略的实际测量值与服务质量预期值的误差均小于9%,因此表明实现了对服务质量保证的支持。
【学位授予单位】:华中科技大学
【学位级别】:博士
【学位授予年份】:2008
【分类号】:TP333

手机知网App
【引证文献】
中国博士学位论文全文数据库 前1条
1 曾文英;面向移动环境的数据存储管理方法关键技术研究[D];华南理工大学;2011年
【共引文献】
中国重要会议论文全文数据库 前2条
1 梁达;王涛;郑为东;杨柳;;浅析P2P网络存储[A];广西计算机学会2004年学术年会论文集[C];2004年
2 梁达;王涛;郑为东;杨柳;;浅析P2P网络存储[A];广西计算机学会——2004年学术年会论文集[C];2004年
中国博士学位论文全文数据库 前10条
1 郭良敏;P2P文件共享系统中的副本技术研究[D];中国科学技术大学;2011年
2 常光辉;大规模分布式可信监控系统研究[D];重庆大学;2011年
3 王建新;基于非精确网络状态信息QoS路由优化算法研究[D];中南大学;2001年
4 方建超;网络QoS及性能评价中若干问题的建模与分析[D];上海大学;2004年
5 寇玮华;基于并行分层式链路分布式数据更新的协议及副本复制研究[D];西南交通大学;2004年
6 曾碧卿;分布式计算中并行I/O调度策略研究[D];中南大学;2005年
7 刘业;适应自组织管理模式的P2P网络技术的研究[D];东南大学;2006年
8 纪雯;基于无线网络的多媒体通信关键技术研究[D];西北工业大学;2006年
9 刘卫平;网络存储中的数据容错与容灾技术研究[D];西北工业大学;2006年
10 刘群;基于可扩展对象的海量存储系统研究[D];华中科技大学;2006年
中国硕士学位论文全文数据库 前10条
1 王春力;基于P2P的网络音频捕获与多路混音算法研究[D];山东科技大学;2010年
2 李培亮;城市治安动态视频监控系统设计[D];中国海洋大学;2010年
3 苗玉霞;结构化对等网络的搜索机制研究[D];中国海洋大学;2009年
4 张伟;基于分布式存储的移动GIS技术与应用研究[D];解放军信息工程大学;2010年
5 柏宏斌;基于B/S架构的信息管理系统理论研究[D];电子科技大学;2010年
6 郭诚;面向联网审计的前置机软件系统的设计与实现[D];电子科技大学;2010年
7 史富波;基于HLA仿真集成平台数据管理的研究与实现[D];西安电子科技大学;2009年
8 苏晓亚;对等网络多维数据搜索技术的研究[D];西安电子科技大学;2009年
9 郭遂峰;基于.NET的视频点播后台管理系统的设计与实现[D];郑州大学;2011年
10 裴延吉;日照联通IP远程联网视频监控海关项目设计及实施研究评估[D];中国海洋大学;2011年
【同被引文献】
中国博士学位论文全文数据库 前6条
1 孔华锋;基于主动网络技术的存储网络关键技术的研究[D];华中科技大学;2004年
2 孙伟峰;基于802.11无线—有线结合网络的QoS研究[D];中国科学技术大学;2007年
3 覃灵军;基于对象的主动存储关键技术研究[D];华中科技大学;2006年
4 郭毅峰;无线网络中保障QoS关键技术的研究[D];北京邮电大学;2008年
5 肖亮;基于服务质量的对象存储优化研究[D];华中科技大学;2009年
6 陆承涛;存储系统性能管理问题的研究[D];华中科技大学;2010年
中国硕士学位论文全文数据库 前5条
1 庞敏;一种移动数据库系统的提前提交并发控制策略[D];华中师范大学;2008年
2 李漪;基于对象存储系统的结构设计及QoS策略研究[D];华中科技大学;2007年
3 夏惠芬;基于合作博弈的安全存储区域网性能优化机制的研究[D];江苏大学;2008年
4 周瑛瑛;支持环境变量感知的存储系统研究[D];大连海事大学;2009年
5 田昌;对象存储系统多级QoS机制研究[D];华中科技大学;2008年
【二级引证文献】
中国博士学位论文全文数据库 前1条
1 梁茹冰;移动计算环境下语义缓存技术研究及应用[D];华南理工大学;2012年
【相似文献】
中国期刊全文数据库 前10条
1 易慧;杨泽新;;网络存储系统的可生存性研究[J];软件导刊;2007年13期
2 刘寿强;网络存储系统自身安全性浅析[J];计算机安全;2003年11期
3 曹士炳;;网络存储系统:DAS,NAS和SAN[J];石油工业计算机应用;2003年04期
4 侯集体;数字图书馆网络存储系统的构建及案例分析[J];情报科学;2005年10期
5 王海涛;宋丽华;;区分服务模型在移动环境中的应用研究[J];数字通信世界;2005年12期
6 赵高丽;宋军平;;基于ASP.NET的网络存储系统的设计与实现[J];电脑知识与技术(学术交流);2006年02期
7 徐晔;毕艳忠;方贵明;;社区宽带综合业务网服务质量保证的研究[J];计算机应用研究;2006年07期
8 陈季安;邢果;戚文芽;;一种基于SIP协议的VoIP服务质量保证[J];电子技术应用;2007年04期
9 田敏;刘占军;李云;陈前斌;;一种基于节点度数的Ad Hoc网络稳定路由协议[J];重庆邮电大学学报(自然科学版);2007年05期
10 吴因;;高校图书馆服务质量保证[J];中国科教创新导刊;2010年08期
中国重要会议论文全文数据库 前10条
1 刘群;冯丹;;基于层次结构的元数据动态管理方法的研究[A];第15届全国信息存储技术学术会议论文集[C];2008年
2 陈涛;肖侬;刘芳;;大规模网络存储系统的数据布局策略研究[A];第15届全国信息存储技术学术会议论文集[C];2008年
3 王蜀安;张铭;王爱华;杨冬青;;构建基于OAI协议的可互操作数字图书馆元数据服务[A];第十九届全国数据库学术会议论文集(技术报告篇)[C];2002年
4 钟锦台;;具有服务质量保证的组网方案研究[A];中国通信学会信息通信网络技术委员会2003年年会论文集[C];2003年
5 刘芳;陈涛;肖侬;;大规模网络存储系统中面向可靠性的数据布局算法[A];第15届全国信息存储技术学术会议论文集[C];2008年
6 张铭;杨冬青;王蜀安;邓志鸿;唐世渭;;支持元数据和服务的可互操作数字图书馆框架[A];第二十届全国数据库学术会议论文集(研究报告篇)[C];2003年
7 高岩;孟承运;王振涛;刘晓光;王刚;;基于SMI-S的网络存储系统实时监控与管理系统的实现[A];2010年第16届全国信息存储技术大会(IST2010)论文集[C];2010年
8 骆清铭;;华中科技大学生物医学光子学研究进展[A];第八届全国激光生物学学术会议暨《激光生物学》创刊十周年庆祝会会议指南及论文摘要[C];2002年
9 单广荣;于洪志;戴玉刚;曹晖;;藏文古籍保护技术的体系结构与元数据方案建设[A];民族语言文字信息技术研究——第十一届全国民族语言文字信息学术研讨会论文集[C];2007年
10 ;前言[A];第九届全国冷冻干燥学术交流会论文集[C];2008年
中国重要报纸全文数据库 前10条
1 通讯员 何新华 裴新颜;情系土家[N];长江日报;2005年
2 江华柯;华中科技大学“盘点”无形资产[N];光明日报;2001年
3 肖坤;实现5000亿次的突破[N];中国电脑教育报;2007年
4 耿俊伟覃璇 本报记者 赵凤华;华中科大:十年“学研产”创新生力军[N];科技日报;2007年
5 记者 刘伟兵;东莞康达与华中科大开展全面产学研究合作[N];民营经济报;2008年
6 周前进耿俊伟;让“基于问题的学习方法”教学更规范[N];健康报;2008年
7 记者 刘锋;华中科大苏州研究院落户苏州科技城[N];科技日报;2007年
8 本报记者 张真弼 通讯员 周前进;高扬创新的旗帜[N];中国教育报;2003年
9 张诚;心血管内科的学科带头人[N];科技日报;2004年
10 华中科技大学 供稿;传播学本科教育研讨会在华中科技大学召开[N];中华新闻报;2007年
中国博士学位论文全文数据库 前10条
1 苏勇;iSCSI OSD存储系统端到端服务质量支持策略研究[D];华中科技大学;2008年
2 肖亮;基于服务质量的对象存储优化研究[D];华中科技大学;2009年
3 王娟;对象存储系统中元数据管理研究[D];华中科技大学;2010年
4 詹玲;面向应用的对象存储设备的数据组织研究[D];华中科技大学;2009年
5 刘群;基于可扩展对象的海量存储系统研究[D];华中科技大学;2006年
6 陈兰香;网络存储中保障数据安全的高效方法研究[D];华中科技大学;2009年
7 侯昉;海量网络存储系统中的多级缓存技术研究[D];华南理工大学;2011年
8 陈俭喜;基于虚拟接口的网络存储系统研究[D];华中科技大学;2006年
9 刘朝斌;虚拟网络存储系统关键技术研究及其性能评价[D];华中科技大学;2004年
10 曾令仿;基于对象的网络存储智能处理方法研究[D];华中科技大学;2006年
中国硕士学位论文全文数据库 前10条
1 胡永奎;对象存储设备中文件系统的设计与实现[D];解放军信息工程大学;2010年
2 刘汉波;对象存储系统的I/O处理与缓存研究[D];华中科技大学;2007年
3 李漪;基于对象存储系统的结构设计及QoS策略研究[D];华中科技大学;2007年
4 姚小乐;新加坡框架下的元数据服务研究[D];华东师范大学;2010年
5 杨金莹;科技资源数据库元数据注册与使用[D];石家庄铁道学院;2009年
6 许鑫;基于元数据的农田信息存储、管理和共享研究[D];河南农业大学;2011年
7 刘文博;水土保持元数据及关键技术研究[D];北京林业大学;2012年
8 张钰森;高性能计算集群文件系统的优化技术研究[D];国防科学技术大学;2010年
9 李丽娜;机载网络存储系统性能优化的设计与实现[D];上海交通大学;2010年
10 朱海涛;嵌入式网络存储系统的设计与应用[D];大连理工大学;2010年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026