收藏本站
《华中科技大学》 2006年
收藏 | 手机打开
二维码
手机客户端打开本文

基于虚拟接口的网络存储系统研究

陈俭喜  
【摘要】: 计算机与互联网技术日新月异,人类社会信息化进程逐步深入,数据密集型应用不断涌现,存储需求也因此不断扩大,存储系统面临着严峻的挑战。存储系统不仅要具有较高的访问速度,同时还要能够合理地利用所有异构的存储资源,具有高可靠性和可扩展性。因此,利用高速网络通道组建网络存储系统并且在存储技术上寻求创新与突破是迎接这一挑战的最佳策略。 虚拟接口体系结构(Virtual Interface Architecture,VIA)是轻量级通信协议的工业标准,它具有通信开销小,传输带宽高等很多固有优点。特别是它缩短了传统的I/O路径,较好地解决了以FC(Fibre Channel)为基础的存储网络互操作性问题,而且提供了远程DMA(Direct Memory Access)传输机制,可以实现直接存储访问。因此,将VIA应用于网络存储系统中,构建基于虚拟接口存储网络系统VISA(Virtual Interface Storage Architecture)可以有效地缓解网络存储系统中的传输瓶颈,解决存储网络的兼容性和互操作性,节省存储开支。VISA系统中存储资源由存储节点提供,被元数据服务器管理调度,位于VISA内部的用户可以直接使用这些存储资源,远程用户可以通过iSCSI连接进行远程存储访问。 VISA系统利用VIA作为数据通信传输协议,而已有的VIA实现要么因为使用专用的特殊网络设备,不仅兼容性不好,而且造价昂贵,要么因为抹煞了VIA的固有优点而造成性能不高。为了克服这些缺陷,进一步提高VISA系统的性能并保持其良好的兼容性和互操作性,设计了适合于存储的VI网络适配器VI-NIC(Virtual Interface Network Interface Card)。它采用以太网作为传输媒介,通过SOC(System On Chip)的方式在适配器端实现VIA协议功能,从而降低了主机的通信开销,提高了数据传输性能,并且保持了良好的兼容性和低价格。 异构存储资源的管理与存储资源利用率不高是存储系统需要解决的另一难题。为此在VISA系统中实现了两级存储虚拟化,第一级存储虚拟化是由存储节点将异构的存储设备虚拟为具有统一访问界面的存储实体,第二级存储虚拟化则是通过存储资源的动态分配与块地址的动态映射实现块级存储虚拟化。第一级存储虚拟化实现了对异构存储资源的统一管理与访问,块级存储虚拟化则既提高了存储资源的利用率,节约了存储成本,又可以通过优化的存储资源分配与块地址映射策略提高存储访问性能。 在VISA系统中,存储资源分配与块地址映射策略是影响系统性能的一个关键因素,因此设计并分析了三种不同的分配与映射算法。布局优先的资源分配与块地址映射算法仅考虑数据的分布与布局,可以实现对数据读取性能的优化;负载优先的资源分配与块地址映射算法则仅考虑了存储节点的负载对存取性能的影响,可以优化写请求的响应时间。综合二者的优点,综合的资源分配与块地址映射算法既考虑到存储节点的当前负载情况,又兼顾数据分布与布局的均匀性,实现了对VISA系统读/写性能的全面优化。 缓存一直都是优化系统性能的一项重要技术,而决定其性能的关键因素则包括数据块的替换策略和数据块的放置策略两个方面。根据网络存储系统的特性和VISA系统的缓存分布特征,提出了访问即可淘汰的第二级缓存替换策略和基于存储地址空间连续性和局部性的智能预取策略。它们在几乎不增加系统开销的情况下可以有效地改善VISA系统的存储访问性能。
【学位授予单位】:华中科技大学
【学位级别】:博士
【学位授予年份】:2006
【分类号】:TP333

免费申请
【相似文献】
中国期刊全文数据库 前10条
1 张;;基于NAS和SAN的数字图书馆网络存储系统的研究[J];信息技术;2011年06期
2 易胜兰;;大学网络环境下的网络存储系统的设计[J];工业设计;2011年05期
3 邢文生;;现代数据中心网络存储量猛增 新一代网络存储系统渐成主流[J];通信世界;2011年30期
4 葛雄资;冯丹;陆承涛;金超;;绿色网络存储系统的动力学分析模型[J];计算机科学;2011年08期
5 李正荣;;电视台全台网的高可用性研究[J];现代电视技术;2011年07期
6 张志强;;湖北师范学院图书馆自动化、网络化、数字化建设与发展[J];内蒙古科技与经济;2011年11期
7 钟正茂;;浅论企业中无盘系统的应用 构架及其未来发展[J];科技致富向导;2011年27期
8 ;[J];;年期
9 ;[J];;年期
10 ;[J];;年期
中国重要会议论文全文数据库 前8条
1 刘芳;陈涛;肖侬;;大规模网络存储系统中面向可靠性的数据布局算法[A];第15届全国信息存储技术学术会议论文集[C];2008年
2 陈涛;肖侬;刘芳;;大规模网络存储系统的数据布局策略研究[A];第15届全国信息存储技术学术会议论文集[C];2008年
3 高岩;孟承运;王振涛;刘晓光;王刚;;基于SMI-S的网络存储系统实时监控与管理系统的实现[A];2010年第16届全国信息存储技术大会(IST2010)论文集[C];2010年
4 赵靖;邓倩妮;;Segment Storage System:基于P2P的网络存储服务(英文)[A];2006年全国开放式分布与并行计算机学术会议论文集(三)[C];2006年
5 程耀东;汪璐;黄秋兰;郑伟;;高性能海量存储系统研究[A];第十五届全国核电子学与核探测技术学术年会论文集[C];2010年
6 司成祥;孟晓烜;许鲁;;基于性能隔离的缓存优化技术研究[A];2010年第16届全国信息存储技术大会(IST2010)论文集[C];2010年
7 李钧;王新;;P2P存储网络中的冗余维持[A];第15届全国信息存储技术学术会议论文集[C];2008年
8 麻元兴;林伟俊;;浅谈PACS的预防性维护[A];2011年浙江省医学会医学工程学分会第九届学术年会论文汇编[C];2011年
中国重要报纸全文数据库 前10条
1 ;构筑自动网络存储系统[N];人民邮电;2003年
2 柯文;享受无忧存储[N];计算机世界;2003年
3 晓琪;企业再发展的平台[N];金融时报;2003年
4 ;企业进一步发展的平台[N];中国计算机报;2003年
5 计算机世界市场研究中心;存储“蛋糕”有多大?[N];计算机世界;2001年
6 ;EMC Centera网络存储系统[N];计算机世界;2005年
7 特约撰稿 林冰;EMC四大优势构筑自动网络存储系统[N];通信信息报;2003年
8 ;“多特征”的网络存储系统[N];中国计算机报;2001年
9 本报记者 钱炜;奥运助推我网络存储发展[N];科技日报;2005年
10 本报记者  林雨;EMC雄兵布局中小企市场[N];民营经济报;2006年
中国博士学位论文全文数据库 前10条
1 陈俭喜;基于虚拟接口的网络存储系统研究[D];华中科技大学;2006年
2 刘朝斌;虚拟网络存储系统关键技术研究及其性能评价[D];华中科技大学;2004年
3 杨德志;分布式文件系统可扩展元数据服务关键问题研究[D];中国科学院研究生院(计算技术研究所);2008年
4 张薇;信息存储系统可生存性理论与关键技术研究[D];西安电子科技大学;2008年
5 陈兰香;网络存储中保障数据安全的高效方法研究[D];华中科技大学;2009年
6 刘卫平;网络存储中的数据容错与容灾技术研究[D];西北工业大学;2006年
7 向东;iSCSI-SAN网络异构存储系统管理策略的研究[D];华中科技大学;2004年
8 罗益辉;海量对象存储系统数据组织算法的研究[D];华中科技大学;2006年
9 苏勇;iSCSI OSD存储系统端到端服务质量支持策略研究[D];华中科技大学;2008年
10 肖亮;基于服务质量的对象存储优化研究[D];华中科技大学;2009年
中国硕士学位论文全文数据库 前10条
1 李丽娜;机载网络存储系统性能优化的设计与实现[D];上海交通大学;2010年
2 朱海涛;嵌入式网络存储系统的设计与应用[D];大连理工大学;2010年
3 姜泽雄;纠删码在网络存储系统中的实现与可靠性仿真[D];电子科技大学;2010年
4 鲁毅;基于VI协议的高性能网络存储系统研究与实现[D];华中科技大学;2004年
5 陈超;智能网络存储系统(INSS)客户端技术研究[D];华南理工大学;2011年
6 许劲斌;P2P网络存储系统的数据可靠性研究[D];哈尔滨工程大学;2011年
7 蔡咏才;智能网络存储系统后台服务器软件架构的研究与设计[D];华南理工大学;2010年
8 林伟兵;智能网络存储系统(INSS)存储虚拟化技术研究[D];华南理工大学;2011年
9 蔡洪;智能网络存储系统(INSS)中负载均衡技术的研究[D];华南理工大学;2011年
10 陈蹊;智能网络存储系统(INSS)中存储节点技术研究[D];华南理工大学;2011年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026