收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

空间信息服务云存储与管理机制的初步研究

刘尹  
【摘要】:所谓云服务,是指利用计算机硬件技术、软件技术、信息安全技术、网络技术、空间信息技术、通信技术、虚拟化技术、集群技术和存储技术以及并行计算等技术,将大量分布在网络中的各种资源联合起来进行统一管理和调度,构成一个庞大的资源池以按需、易扩展的方式向用户提供服务。云服务有很多分类,根据云的服务方式不同,可以将其划分为公有云、私有云和混合云三类。按照体系结构可以划分为SaaS、PaaS和IaaS三种模型。除此之外,根据用户的使用可以将云服务划分为文件云、设备云和应用云三类。 目前市面上云服务很多,但是与空间信息相结合的云服务很少。空间信息是指用来描述空间地理位置、空间实体分布特征及时间空间特性的信息。据不完全统计,在人类能获取的信息中,有超过80%的信息是与空间信息相关的信息。空间信息数据通常具有数据量大、种类繁多、结构复杂、专业性强、来源广泛和实时性强等特点。目前对于空间信息数据的存储和管理方面存在不足,缺乏对空间信息数据的快速感知能力,缺乏对海量空间信息数据的存储和管理机制,缺乏对空间信息数据的备份和灾难恢复机制,因此,提供空间信息服务云具有重大的意义。 本文根据云服务现状,以G/S模式的理论体系、系统架构为理论依据,以相关课题和项目为依托,分析了空间信息数据的特点和空间信息服务云的的特点和需求,对比分析了主流的存储技术、并行计算技术和分布式计算技术,以当今既稳定又流行的开源分布式文件系统HDFS为基础,以分布式计算框架MapReduce为编程模型,研究了空间信息服务云的整体架构和内部的数据存储管理工作机制。本文主要取得了如下的成果: (1)研究了空间信息数据的特点,总结起来主要表现在海量、多源、异构和时空属性四个方面。 (2)研究了空间信息服务云的具体需求,并结合这些需求对比研究了各种存储技术,包括RAID技术、FastDFS文件系统、MooseFS文件系统以及HDFS的架构特点和应用领域,对比了并行计算技术MPI和分布式计算框架MapReduce,选择了适合空间信息数据特点,满足空间信息服务云需求的HDFS文件系统和MapReduce编程框架为基础架构和编程模型。 (3)研究了搭建空间信息服务云平台过程中预防主节点单点失效应该注意的问题和具体的配置方案。 (4)根据用户访问系统数据的频度,通过增加系统日志文件的方法,编写了MapReduce应用程序去处理数据区别冗余问题,既增加了系统的实用性又节约了系统的存储成本和管理资源。 (5)提出了一种具有空间信息数据特色的数据更新机制,是一种保留历史数据的增量更新机制。 (6)最后对整个系统进行了相应的测试,理论结合实际,实验验证理论,便于通过具体的实验数据和实验方法来改进理论。 并在此基础上做了以下创新: (1)提出了一种根据文件访问频度对数据进行区别冗余的机制。数据区别冗余是指根据数据的访问频度动态地去更改文件的冗余数,以求获得更好的文件访问性能和最省的磁盘空间。 (2)提出了一种保留历史数据的空间信息数据增量更新机制。数据增量更新机制是根据空间信息数据特点设计的,用户可以通过对比分析历史数据和最新数据了解空间特征的变化过程。


知网文化
【相似文献】
中国期刊全文数据库 前20条
1 ;方正数码APEC指路[J];每周电脑报;2001年63期
2 祝晓东,倪凯;移动用户应用服务系统中的GIS技术应用[J];微型电脑应用;2005年10期
3 李云浩;兰新华;陈淑婷;;空间信息服务集成共享研究[J];测绘标准化;2006年01期
4 吴长彬;闾国年;孙在宏;;面向空间信息服务的数字社区管理系统[J];测绘通报;2008年10期
5 刘纪平;陶坤旺;王亮;侯婧熠;;基于SOA的电子政务空间地理信息服务与实现[J];辽宁工程技术大学学报;2006年S1期
6 万林;;Ajax技术在空间信息网格门户中的应用研究[J];软件导刊;2008年11期
7 王强;王家耀;郭建忠;;基于Agent的空间信息服务组合研究[J];测绘科学技术学报;2009年01期
8 孙庆辉;王家耀;钟大伟;李少梅;;空间信息服务模式研究[J];武汉大学学报(信息科学版);2009年03期
9 黄晓斌;李琦;董宝青;;基于GeoAgent和Web服务的空间信息服务及应用集成体系[J];计算机科学;2004年09期
10 翟亮;唐新明;李霖;杨平;;空间信息网格的若干问题分析[J];测绘与空间地理信息;2005年06期
11 高劲松;陈思;刘东升;张文;;空间信息网格中的元数据模型机理研究[J];计算机科学;2005年09期
12 成建国;任福;;移动环境中空间信息服务模式研究[J];地理信息世界;2006年03期
13 刘纪平;刘钊;李玉祥;李青元;;电子政务空间数据交换方法[J];辽宁工程技术大学学报;2006年05期
14 林承达;孟令奎;彭溢;;基于无线网络空间信息服务调度研究[J];测绘科学;2007年03期
15 陈应东;王玉海;崔铁军;;基于BPEL的空间信息服务设计与实现[J];地理信息世界;2008年01期
16 章汉武;桂志鹏;吴华意;;网格环境下空间信息服务注册中心的设计与实现[J];武汉大学学报(信息科学版);2008年05期
17 谭玉敏;刘赛楠;江建金;;面向PPGIS的空间信息服务模型研究[J];地球信息科学;2008年05期
18 陈应东;崔铁军;卢战伟;;基于SOA的空间信息服务架构模式[J];地理信息世界;2008年06期
19 边馥苓;孟小亮;;空间信息服务在RFID物流管理系统中的应用研究[J];地理信息世界;2009年03期
20 陈建杰;杨树锋;李长江;;一种基于本体的空间信息Web服务实现方法[J];浙江大学学报(工学版);2006年03期
中国重要会议论文全文数据库 前10条
1 左怀玉;刘云翔;唐宇;陈荦;景宁;;一种分布式空间信息服务聚合方法[A];第二十四届中国数据库学术会议论文集(技术报告篇)[C];2007年
2 齐安文;张彦明;黄书鹏;;“2008北京奥运空间信息服务实时支持系统”关键技术研究[A];中国地理信息系统协会第八届年会论文集[C];2004年
3 陈英东;;空间信息服务拓扑关系的构建[A];第二届中国科学院博士后学术年会暨高新技术前沿与发展学术会议程序册[C];2010年
4 李慧敏;邬群勇;王钦敏;;Robot技术在空间信息服务搜索中的应用研究[A];中国地理信息系统协会第四次会员代表大会暨第十一届年会论文集[C];2007年
5 任福;杜清运;;空间基础信息平台建设模式探讨[A];《测绘通报》测绘科学前沿技术论坛摘要集[C];2008年
6 马宏斌;宋爽;;面向电子政务的空间信息服务研究[A];第四届海峡两岸GIS发展研讨会暨中国GIS协会第十届年会论文集[C];2006年
7 陶坤旺;刘纪平;;基于SOA的电子政务空间信息服务研究与实现[A];中国地理信息系统协会第九届年会论文集[C];2005年
8 李德仁;;论可量测实景影像的概念与应用——从4D产品到5D产品[A];中国测绘学会九届三次理事会暨2007年“信息化测绘论坛”学术年会论文集[C];2007年
9 陈应东;王玉海;崔铁军;;基于流程的空间信息服务模式[A];中国地理信息系统协会第四次会员代表大会暨第十一届年会论文集[C];2007年
10 戚铭尧;李家齐;;面向物流的空间信息服务研究[A];第四届海峡两岸GIS发展研讨会暨中国GIS协会第十届年会论文集[C];2006年
中国博士学位论文全文数据库 前10条
1 陈科;语义支持的空间信息服务组合关键技术研究[D];解放军信息工程大学;2012年
2 梁娟珠;空间信息服务链构建关键技术研究及应用[D];福州大学;2011年
3 王强;空间信息服务聚合的关键技术研究[D];解放军信息工程大学;2010年
4 谢斌;策略驱动的空间信息服务协同自组合关键技术研究[D];浙江大学;2010年
5 谭力;构建基于G/S模式的数字月球平台关键技术研究[D];成都理工大学;2011年
6 罗显刚;数字地球三维空间信息服务关键技术研究[D];中国地质大学;2010年
7 钟海东;基于地理本体的移动GIS空间信息服务研究[D];华东师范大学;2011年
8 姬伟;面向业务的空间信息服务应用开发体系链[D];中国地质大学;2010年
9 李志刚;空间信息技术在矿区可持续开发与管理中的应用研究[D];成都理工大学;2012年
10 张建兵;基于网格的空间信息服务关键技术研究[D];中国科学院研究生院(遥感应用研究所);2006年
中国硕士学位论文全文数据库 前10条
1 陈晓慧;空间信息服务管理平台的设计与实现[D];山东科技大学;2010年
2 努尔麦麦提·艾尔肯;空间信息服务聚合在标准农田管理中的应用研究[D];浙江大学;2013年
3 童凌飞;空间信息服务的语义表达机制研究[D];江西理工大学;2013年
4 周玉科;基于网格环境的空间信息服务集成[D];山东科技大学;2010年
5 郑新建;空间信息服务云支撑下的移动终端个性化信息汇聚技术研究[D];成都理工大学;2012年
6 姬世芳;基于空间信息服务的震后救灾物资调配系统的设计与实现[D];电子科技大学;2013年
7 刘尹;空间信息服务云存储与管理机制的初步研究[D];成都理工大学;2012年
8 邢珍珍;基于空间信息服务的地震防灾减灾集成系统设计与实现[D];电子科技大学;2013年
9 丁万明;承德市旅游空间信息服务系统设计与实现[D];电子科技大学;2012年
10 费鑫;四川省地震空间信息服务系统的设计与实现[D];电子科技大学;2012年
中国重要报纸全文数据库 前10条
1 张旭;首个应急空间信息服务中心成立[N];大众科技报;2009年
2 记者 张计友;我省加快发展空间信息服务业[N];河北经济日报;2003年
3 神州通信有限公司GIS部 廖志杰;空间信息服务的应用前景[N];通信产业报;2004年
4 李德仁邵振峰;影像城市地图:空间信息服务的新模式[N];中国测绘报;2008年
5 刘纪平;电子政务与空间信息服务[N];中国测绘报;2006年
6 记者 管晶晶;方正国际夯实IT服务全产业链布局[N];科技日报;2011年
7 李德仁;从4D产品到5D产品[N];中国测绘报;2007年
8 记者 洪瑛通讯员 李东;中国(云南)—东盟—南盟空间信息平台建设项目启动[N];中国测绘报;2008年
9 ;“需求至上,研用互动,融合创新,稳定持续”[N];科技日报;2008年
10 神州通信有限公司GIS部 廖志杰;构建中国空间信息服务网络平台系统(一)[N];通信产业报;2004年
中国知网广告投放
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978