收藏本站
《南开大学》 2002年
收藏 | 手机打开
二维码
手机客户端打开本文

二级网络条纹数据布局及其相关问题的研究

刘晓光  
【摘要】: 一个理想的存储系统应该是一个同时具备大容量、高性能、高可靠、可扩展和零管理等特征的存储系统。设计和实现理想存储系统是存储领域所有研究工作的最终目标。具体来说,目前国内外相关研究工作的重点是从存储系统的数据布局和体系结构两个方面出发,向理想存储系统的标准靠近。本文的工作也是围绕着这两个方面展开的。 冗余磁盘阵列(RAID)是当前应用最广泛的存储系统。但是,RAID系统距离理想存储系统的标准仍然存在很大的距离。具体表现在:在数据布局方面,RAID仍然是单容错布局,不能适应大容量存储系统对可靠性的要求。在体系结构方面,RAID系统的集中式结构限制了它的性能、可靠性和可扩展性的提高。本文的工作是在充分调研和借鉴国内外相关工作成果的基础上完成的。本文提出了二级网络条纹(TNS: Two-Level Networked Stripe)多容错数据布局方法。与其它多容错数据布局相比,TNS数据布局具有下列优点:可靠性高,并且可以根据实际应用需要提高系统可靠性;采用两级校验单元散布的设计,提高了系统降级状态下的性能;系统配置灵活,实现简单、方便。 根据TNS数据布局的特点,本文提出了基于Linux PC Cluster结构的存储系统体系结构的设计方案——网络存储集群(NSS: Network Storage Cluster)系统。与其它系统设计相比,NSS系统的特点在于:可靠性高,可以容许多种组件同时故障,还可以实现数据容灾;采用层次型的软硬件组织结构,配置灵活方便;基于设备级实现,对上层应用是透明的,并且具有可扩展性。 在NSS系统的基础上,针对多媒体点播服务的特点,本文提出了存储系统条纹单元的两级粒度方式。它融合了现有的粗粒度和细粒度方式的优点,具有并发性能好,负载均衡,可靠性高,可扩展等特点,是一种适合于大规模点播服务器的较好的存储系统条纹的粒度方式。
【学位授予单位】:南开大学
【学位级别】:博士
【学位授予年份】:2002
【分类号】:TP333

手机知网App
【引证文献】
中国博士学位论文全文数据库 前1条
1 刘卫平;网络存储中的数据容错与容灾技术研究[D];西北工业大学;2006年
中国硕士学位论文全文数据库 前1条
1 董建刚;基于iSCSI协议的网络存储技术及数据布局研究[D];西安电子科技大学;2009年
【参考文献】
中国期刊全文数据库 前1条
1 Johann Wolf sberger,张心正,许京军,M.ElLab ban,黄晖,唐柏权;双波长全息存储中的扇形噪音抑制(英文)[J];红外与毫米波学报;2001年01期
【共引文献】
中国期刊全文数据库 前10条
1 刘书香;建立基于SAN技术的存储网络[J];北京工业职业技术学院学报;2005年01期
2 杨民峰;朱元忠;;存储管理框架综述[J];北京工业职业技术学院学报;2007年04期
3 谭毓安,曹元大;冗余SCSI路径驱动程序的设计与实现[J];北京理工大学学报;2002年05期
4 颜海兴,郭放,唐鹤权;网络存储系统在校园网上的应用[J];东华大学学报(自然科学版);2004年06期
5 周祥昆,于剑;数字图书馆网络存储系统的研究与设计[J];电脑与信息技术;2005年02期
6 刘霖;赵跃龙;李成艺;;一种新的存储解决方案——IND系统存储[J];电脑与信息技术;2006年05期
7 刘霖;彭英;赵跃龙;;基于存储网的海量存储共享方案[J];电脑与信息技术;2007年06期
8 曲宝;解红涛;田枫;;基于驱动程序开放性虚拟存储系统的设计与实现[J];大庆石油学院学报;2006年05期
9 许杰星,盛功平,吕昭前;加快高校图书馆现代化建设步伐,努力为教学科研服务[J];大学图书情报学刊;2003年04期
10 胡天翔;;网络存储技术在企业中的发展及应用[J];电子与封装;2006年10期
中国重要会议论文全文数据库 前2条
1 程耀东;汪璐;黄秋兰;郑伟;;高性能海量存储系统研究[A];第十五届全国核电子学与核探测技术学术年会论文集[C];2010年
2 李晋;刘晓洁;李涛;赵奎;焦乐;;IP网络存储技术解析[A];2008'中国信息技术与应用学术论坛论文集(二)[C];2008年
中国博士学位论文全文数据库 前10条
1 罗东健;大规模存储系统高可靠性关键技术研究[D];华中科技大学;2011年
2 孙照焱;基于生物免疫机制的附网存储关键技术研究[D];清华大学;2004年
3 孔华锋;基于主动网络技术的存储网络关键技术的研究[D];华中科技大学;2004年
4 王涛;基于对等结构的分布式存储技术研究[D];电子科技大学;2006年
5 王刚;网络磁盘阵列结构和数据布局研究[D];南开大学;2002年
6 张晓;基于存储区域网络的数据可靠性技术研究[D];西北工业大学;2006年
7 李钟华;网络协同入侵响应与自主事故快速恢复技术研究[D];西北工业大学;2006年
8 李超;面向海量数字资源管理的FC-SAN性能分析与监测[D];清华大学;2006年
9 罗迅;海量多级光集成存储中的虚拟镜像系统优化方法的研究[D];清华大学;2006年
10 刘卫平;网络存储中的数据容错与容灾技术研究[D];西北工业大学;2006年
中国硕士学位论文全文数据库 前10条
1 宣亮亮;基于PC机和FPGA的光纤通道接口适配器的研究与实现[D];南昌航空大学;2010年
2 彭亮亮;基于IPv6的校园网络存储再生性的研究[D];西安电子科技大学;2010年
3 苏智华;广播电台媒体资料库系统的设计与建设[D];西安电子科技大学;2009年
4 胡泉波;基于FC的磁盘阵列的研究与设计[D];电子科技大学;2011年
5 邱振财;基于Linux的数据备份与恢复系统的设计和实现[D];电子科技大学;2011年
6 杜溢墨;闪存存储系统中的RAID机制研究[D];国防科学技术大学;2010年
7 张钰森;高性能计算集群文件系统的优化技术研究[D];国防科学技术大学;2010年
8 胡宁;云存储系统数据持久存储机制的研究[D];华中科技大学;2011年
9 陈之晗;电视制播网中网络存储性能的优化设计[D];黑龙江大学;2010年
10 田灼;双机容错热备份系统研究与实现[D];哈尔滨理工大学;2003年
【同被引文献】
中国期刊全文数据库 前10条
1 罗益辉,谢长生;统一存储网的研究和设计[J];湖北大学学报(自然科学版);2004年04期
2 谢长生,傅湘林,韩德志,任劲;一种基于iSCSI的SAN的研究与实现[J];计算机研究与发展;2003年05期
3 杨朝红,宫云战,桑伟前,刘海燕,李庆艳;基于主从异步复制技术的容灾实时系统研究与实现[J];计算机研究与发展;2003年07期
4 谢长生,李晓钰,刘小龙;统一存储网中的虚拟存储技术研究[J];计算机工程与应用;2003年34期
5 董欢庆,李战怀,林伟,王明钟;Linux平台远程逻辑卷复制系统的设计[J];计算机工程与应用;2004年18期
6 王刚,李中,刘晓光,刘璟;异构磁盘阵列RAID5结构数据布局研究[J];计算机工程与应用;2004年29期
7 刘卫平;蔡皖东;;一种基于iSCSI的网络RAID设计与实现[J];计算机工程与应用;2006年14期
8 刘卫平;蔡皖东;;一种基于日志的异步远程镜像协议的设计[J];计算机科学;2006年10期
9 刘卫平;蔡皖东;;基于IPSec的分级安全iSCSI技术研究[J];计算机工程;2006年09期
10 徐非,杨广文,鞠大鹏;基于Peer-to-Peer的分布式存储系统的设计[J];软件学报;2004年02期
中国博士学位论文全文数据库 前4条
1 刘朝斌;虚拟网络存储系统关键技术研究及其性能评价[D];华中科技大学;2004年
2 孔华锋;基于主动网络技术的存储网络关键技术的研究[D];华中科技大学;2004年
3 刘劲松;关于存储系统性能的测试、仿真与评价的研究[D];华中科技大学;2004年
4 王刚;网络磁盘阵列结构和数据布局研究[D];南开大学;2002年
中国硕士学位论文全文数据库 前2条
1 廖竣锴;基于Internet的容灾系统的设计与实现[D];四川大学;2004年
2 王彦龙;Linux平台数据容灾系统的研究与实现[D];西北工业大学;2005年
【二级引证文献】
中国期刊全文数据库 前4条
1 黄振华;;基于云计算的虚拟化存储技术研究[J];硅谷;2012年20期
2 吕从东;;基于透明加解密的iSCSI安全存储系统设计与实现[J];保密科学技术;2013年07期
3 王文慧;林传彬;冯宗凡;邱淑媛;;SAN技术在油田勘探开发一体化的应用[J];数字技术与应用;2010年05期
4 项菲;刘川意;方滨兴;王春露;钟睿明;;新的基于云计算环境的数据容灾策略[J];通信学报;2013年06期
中国博士学位论文全文数据库 前3条
1 国林;基于层次模型的数据容灾技术研究[D];哈尔滨工程大学;2010年
2 王灿;基于在线重复数据消除的海量数据处理关键技术研究[D];电子科技大学;2012年
3 周云霞;智能网络磁盘存储关键技术研究[D];中南大学;2011年
中国硕士学位论文全文数据库 前10条
1 耿秀军;RAID控制卡PCI扩展ROM的设计与实现[D];电子科技大学;2011年
2 吴雨彬;一个高可用性容灾系统的设计与实现[D];复旦大学;2011年
3 刘慧娟;iSCSI协议的安全性研究[D];华中科技大学;2009年
4 孙程;基于纠删码的分布式存储系统的设计与实现[D];电子科技大学;2010年
5 王世才;基于SAN存储系统阵列间交互模块的设计与实现[D];电子科技大学;2010年
6 刘伟;网络容灾与动态重构系统设计与仿真[D];电子科技大学;2010年
7 姜泽雄;纠删码在网络存储系统中的实现与可靠性仿真[D];电子科技大学;2010年
8 陈宝纯;基于纠删码与HDFS的云文件系统[D];吉林大学;2012年
9 丁文;基于IP-SAN的智能固态缓存网络存储系统的研究[D];南京林业大学;2012年
10 唐亮;基于SCSI的虚拟磁带在备份系统中的实现和应用[D];电子科技大学;2012年
【相似文献】
中国期刊全文数据库 前10条
1 张询;速度快容量大的新型存储系统[J];世界电子元器件;1997年09期
2 杨春燕;用SAN构筑现代企业信息存储系统的优势[J];内蒙古电力技术;2002年S1期
3 ;专家观点[J];中国计算机用户;2006年43期
4 ;HDS AMS 2000系列的创新之道[J];通信世界;2009年08期
5 金文新;;大型高校图书馆计算机网络集成系统建设[J];情报科学;2009年04期
6 李静;;浅谈HIS系统对服务器和存储设备的要求及设计方案[J];信息与电脑(理论版);2009年11期
7 刘刚;张海涛;李瑞东;张强;;一种基于模块化设计的NAS集群存储系统[J];微计算机信息;2011年05期
8 于耳;;建立面向应用的存储系统[J];中国教育网络;2011年06期
9 ;数字视频存储系统[J];光学精密工程;1977年06期
10 张明明;;为信息传输设备保驾护航——访EMC公司中国区产品经理马永亨先生[J];上海微型计算机;1998年Z1期
中国重要会议论文全文数据库 前10条
1 赵志刚;;存储系统在企业信息化中的应用[A];2005年安徽通信论文集[C];2006年
2 朱平;朱建涛;高剑刚;蒋金虎;;高性能计算存储关键技术研究[A];2010年第16届全国信息存储技术大会(IST2010)论文集[C];2010年
3 周博;宿绍莹;陈曾平;;基于CPCI总线的宽带雷达数据传输存储系统设计[A];全国第二届信号处理与应用学术会议专刊[C];2008年
4 周功业;周江;陈希;陈进才;;寄生存储原理及实现机制[A];第15届全国信息存储技术学术会议论文集[C];2008年
5 汪黎;章文嵩;杨学军;;Cfslight:一个新型的轻量级对象存储集群文件系统[A];2006年全国开放式分布与并行计算学术会议论文集(一)[C];2006年
6 聂明;;构建海量存储系统 提升媒体竞争力[A];中国新闻技术工作者联合会2008年学术年会论文集(下)[C];2008年
7 王克敏;张玺;胡江凯;王毅涛;;NWP资料归档方法及其存储系统的应用[A];中国气象学会2006年年会“中尺度天气动力学、数值模拟和预测”分会场论文集[C];2006年
8 刘湛明;吴柳坚;;数字电视台的建设[A];2007第二届全国广播电视技术论文集2(下)[C];2007年
9 罗香玉;李传佑;汪芸;;纠删码容错组的布局策略研究[A];第18届全国多媒体学术会议(NCMT2009)、第5届全国人机交互学术会议(CHCI2009)、第5届全国普适计算学术会议(PCC2009)论文集[C];2009年
10 林茂;张峰;许涛;塔依尔;刘磊;;构建石油地震勘探开发需求的PC集群存储系统[A];第十届全国信息技术化工应用年会论文集[C];2005年
中国重要报纸全文数据库 前10条
1 朗飞;IBM“冰立方”就像搭积木[N];中国计算机报;2006年
2 郭涛;MediaGrid既不是SAN也不是NAS[N];中国计算机报;2007年
3 本报记者  张峰;知己知彼建存储(上)[N];网络世界;2006年
4 森林;NAS资源存储系统[N];中国电脑教育报;2002年
5 Hifn(汉帆)杭州信息技术有限公司 马剑杰;自动精简配置:提升存储利用率有绝招[N];中国计算机报;2009年
6 ;IBM收购存储解决方案公司[N];计算机世界;2007年
7 本报记者 徐恒;面临机遇 中国新型存储业合作求创新[N];中国电子报;2011年
8 李想 徐晋;福州电业局研发个人文件安全存储系统[N];中国电力报;2006年
9 ;HDS推出企业入门级存储系统[N];计算机世界;2005年
10 ;戴尔EMC打造新一代高容量存储系统[N];人民邮电;2004年
中国博士学位论文全文数据库 前10条
1 陆承涛;存储系统性能管理问题的研究[D];华中科技大学;2010年
2 聂雪军;内容感知存储系统中信息信息生命周期管理关键技术研究[D];华中科技大学;2011年
3 罗东健;大规模存储系统高可靠性关键技术研究[D];华中科技大学;2011年
4 聂雪军;内容感知存储系统中信息生命周期管理关键技术研究[D];华中科技大学;2010年
5 王玉林;多节点容错存储系统的数据与缓存组织研究[D];电子科技大学;2010年
6 王鹏;低密度奇偶校验码应用于存储系统的关键技术研究[D];华中科技大学;2013年
7 施展;基于本体的存储系统管理研究[D];华中科技大学;2011年
8 黄继鹏;高速高可靠小型数字视频存储系统的设计与实现[D];中国科学院研究生院(长春光学精密机械与物理研究所);2012年
9 刘科;内容感知存储系统中的信息检索关键技术研究[D];华中科技大学;2012年
10 姜明华;基于冗余智能存储通道的存储系统关键技术研究[D];华中科技大学;2011年
中国硕士学位论文全文数据库 前10条
1 陆正武;面向流媒体应用存储系统的研究与实现[D];华中科技大学;2004年
2 杜睿;基于IP-SAN技术的石化企业数据集中存储系统的设计与实现[D];华东理工大学;2010年
3 金强;基于HBase的RDF存储系统的研究与设计[D];浙江大学;2011年
4 余智敏;数字化图书馆的数据存储技术的研究[D];武汉理工大学;2006年
5 陶博舟;磁盘阵列快照系统的设计与实现[D];华中科技大学;2007年
6 张小艳;基于嵌入式技术的USB存储系统的设计与实现[D];内蒙古大学;2011年
7 蒋亚群;基于DLX体系结构的微处理器核的设计与实现[D];中国人民解放军国防科学技术大学;2002年
8 亓伟;关系数据库存储子系统研究与实现[D];清华大学;2005年
9 宋迎迎;数字馆藏评价指标体系研究[D];郑州大学;2006年
10 袁晓铭;磁盘阵列系统的快照技术研究[D];华中科技大学;2007年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026