收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

分级存储系统中元数据管理的设计与实现

刘志宽  
【摘要】: 数字信息的飞速增长使得信息存储管理的复杂性不断增加,分级存储管理(Hierarchy Storage Management简称HSM)作为存储领域一个重要的角色受到了越来越多的关注。HSM通过对信息的分类和价值评价,合理地将数据信息存储于整个存储系统中的适当位置,并在信息从创建到销毁的整个生命周期中提供最优的管理服务。其中高适用性的系统结构、高效的管理策略以及透明的动态存储访问成为大规模数据管理系统的重大挑战。为此,本文分析了HSM的体系结构和设计方法,设计并实现了SAN存储网络下的威视分级管理系统(WISHSM),同时通过对文件重解析、数据迁移、数据回迁、策略缓存以及数据库性能的优化等关键技术的研究和实现,使WISHSM具备了很高的适用性和性能,实现了高效的数据信息管理的目标。 本文重点论述了元数据管理的设计与实现。WISHSM针对数据分类和信息价值评价的配置设计了分级存储管理中需要的应用元数据,文件系统监测采集和统计应用元数据信息,并根据文件操作(如创建,修改,删除等),对这些信息进行更新和维护。采集的元数据信息通过应用服务器代理模块发送给元数据服务器,最后由元数据管理模块保存在数据库当中,提供给数据迁移服务使用。通过压力性能测试,证明该实现可以达到实际需要。通过性能测试,策略缓存技术使系统的策略执行性能提高了一个数量级。另外针对原策略缓存初始化性能低下的问题,采用策略元数据池(Policy Metadata Container)进行优化,在WISHSM上策略缓存的初始化时间降低了16~20倍。


知网文化
【相似文献】
中国期刊全文数据库 前20条
1 吕帅;刘光明;徐凯;刘欣;;海量信息分级存储数据迁移策略研究[J];计算机工程与科学;2009年S1期
2 曹标;数据迁移管理系统的发展[J];现代电视技术;2003年03期
3 曾雷杰;张延园;李战怀;赵晓南;;一种SAN上的数据迁移算法设计与实现[J];计算机工程;2009年04期
4 王婧韫;数据迁移的一般原则[J];电脑开发与应用;2000年04期
5 黄文宇,谢勇;企业级金融数据中心的数据迁移和灾难备份[J];金卡工程;2003年09期
6 孔芳,徐汀荣;数据迁移工具的设计研究[J];计算机应用与软件;2005年02期
7 钱菁,黄光明;异构数据库间数据迁移的实现方法[J];微型电脑应用;2002年03期
8 袁莉芬;Oracle中批量数据迁移的实现方案[J];湘潭师范学院学报(自然科学版);2005年01期
9 冯泳,张延园;数据迁移在SAN中性能优化的研究和应用[J];计算机工程;2005年07期
10 吕开宇;;数据迁移技术在房产产权交易系统中的应用[J];网络与信息;2009年08期
11 张红女;;更换DOMINO邮件服务器[J];信息与电脑(理论版);2010年04期
12 陈羲;高冰生;郭冰;;黄河数据中心海量数据存储方案应用研究[J];科技资讯;2009年36期
13 陈伟,丁秋林,谢强;交互式数据迁移系统及其相似检测效率优化[J];华南理工大学学报(自然科学版);2004年02期
14 王向辉;;基于元模型的通用数据抽取技术实现[J];电脑编程技巧与维护;2011年06期
15 刘铁民;VSE/ESA环境下SQL/DS数据库的数据迁移方案[J];中国金融电脑;1999年01期
16 ;易安信(EMC)扩展业内最全的数据迁移解决方案[J];计算机与网络;2005年15期
17 范春荣;;油田异构数据库之间数据格式的转换[J];中国新技术新产品;2011年07期
18 何鹏;顾洪洋;;数据迁移全攻略[J];微电脑世界;2006年03期
19 陈伟;王昊;陈丹萍;;一种基于交互式数据迁移技术的数据采集方法[J];计算机工程;2006年09期
20 李永良;数据迁移:在新旧系统中切换[J];中国计算机用户;2003年Z2期
中国重要会议论文全文数据库 前10条
1 赵晓南;李战怀;曾雷杰;张晓;;分级存储管理技术研究[A];2010年第16届全国信息存储技术大会(IST2010)论文集[C];2010年
2 赵培翔;张铭;杨冬青;唐世渭;;数字化文档元数据的自动提取[A];第二十届全国数据库学术会议论文集(研究报告篇)[C];2003年
3 范小军;马赛潇;苏炜;刘秋生;;海洋测绘信息数字平台数据迁移技术设计[A];第二十一届海洋测绘综合性学术研讨会论文集[C];2009年
4 沈卫超;陈虹;夏芳;宋磊;;元数据管理系统的设计与实现[A];第15届全国信息存储技术学术会议论文集[C];2008年
5 翟永;宋雪生;;遥感数据成果的分级存储管理[A];第十五届全国遥感技术学术交流会论文摘要集[C];2005年
6 赵钦;周丹;;政府办公自动化信息系统数据迁移的解决方案[A];广西计算机学会2008年年会论文集[C];2008年
7 陈胜鹏;邱文;;基于元数据的空间地理信息管理系统整合的研究与实现[A];中国测绘学会第九次全国会员代表大会暨学会成立50周年纪念大会论文集[C];2009年
8 张峰;塔依尔;许涛;;自动带库存储管理软件在地震资料处理中的应用[A];第六届全国计算机应用联合学术会议论文集[C];2002年
9 高峰;;实时气象资料数据库分系统[A];信息技术在气象领域的开发应用论文集(二)[C];2006年
10 刘静秋;;Informix数据迁移方法探讨[A];2007中国科协年会——通信与信息发展高层论坛论文集[C];2007年
中国博士学位论文全文数据库 前10条
1 刘艳;进化存储系统中的逻辑和物理进化研究[D];华中科技大学;2006年
2 杨峰;分布式并行索引研究[D];电子科技大学;2003年
3 万继光;集群多媒体存储系统的数据组织研究[D];华中科技大学;2007年
4 李旭;系统级数据保护技术研究[D];华中科技大学;2008年
5 罗益辉;海量对象存储系统数据组织算法的研究[D];华中科技大学;2006年
6 李怀阳;进化存储系统数据组织模式研究[D];华中科技大学;2006年
7 杨德志;分布式文件系统可扩展元数据服务关键问题研究[D];中国科学院研究生院(计算技术研究所);2008年
8 刘旭;基于图剖分和图排序的负载平衡算法研究[D];中国工程物理研究院;2008年
9 南凯;面向关系型数据共享的数据网格中间件研究[D];中国科学院研究生院(计算技术研究所);2006年
10 王晓蕊;华北克拉通地球化学科学数据的管理及应用研究[D];中国地质大学;2008年
中国硕士学位论文全文数据库 前10条
1 刘志宽;分级存储系统中元数据管理的设计与实现[D];大连海事大学;2008年
2 方扬;信息生命周期管理系统中信息分级管理技术的研究与实现[D];北京邮电大学;2009年
3 延娅妮;基于RDF语义元数据的构件动态组装系统[D];北京邮电大学;2008年
4 任广治;基于元数据的气象信息共享平台的设计与实现[D];山东大学;2008年
5 李方伟;基于元数据的教育资源非结构化数据组织管理[D];内蒙古大学;2008年
6 郭健;科技期刊开放存取的研究与实现[D];吉林大学;2007年
7 李武;面向现代服务业的大规模分布式文件存储系统设计和实现[D];浙江大学;2008年
8 刘高岭;海洋信息元数据目录服务系统的设计与实现[D];中国海洋大学;2008年
9 卢佳;基于元数据的构件软件回归测试技术[D];大连海事大学;2009年
10 韩雨;基于构件软件集成测试的研究和应用[D];西安建筑科技大学;2009年
中国重要报纸全文数据库 前10条
1 ;DMM实现异构迁移[N];网络世界;2006年
2 张小西;避免数据迁移延期[N];网络世界;2007年
3 ;集中完成备份与数据迁移[N];计算机世界;2003年
4 致远;当数据迁移遇到ERP升级[N];财会信报;2005年
5 记者 饶慧敏 通讯员 周锦顺;广东局顺利完成第一阶段数据迁移[N];中国国门时报;2005年
6 胡建光 吴 鸣;深圳检验检疫局成功实现数据迁移[N];中国国门时报;2004年
7 黄文宇 谢勇;企业级数据中心的数据迁移与灾难备份[N];金融时报;2003年
8 ;数据迁移“完美风暴”[N];网络世界;2003年
9 本报记者 郭平;为“静态”数据安新“家”[N];计算机世界;2003年
10 郭涛;数据迁移 保证医疗数据安全可用[N];中国计算机报;2003年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978