收藏本站
《北京邮电大学》 2010年
收藏 | 手机打开
二维码
手机客户端打开本文

海量异构数据集成系统的设计与实现

王鸿蒙  
【摘要】: 随着当代资讯的不断发展,人们获得的信息量与数据量都有极大的增长,同时也使不同领域的信息量激增且共享要求不断提高。目前,已经存在很多针对数据集成的先进技术,取得了瞩目的成果。然而,如果涉及到存在大量分布松散的异构数据源,且这些数据源表达形式各异,尚没有成熟的技术或应用能够有效地解决该类别的海量异构数据集成问题。 本文以海量异构数据系统为研究对象,设计并实现了针对海量异构数据进行有效集成的高效数据集成系统MassDIS来解决上述问题。主要研究工作包括以下几个方面: 1.调查研究了国内外主要的数据集成方案,通过比较综述了主流数据集成方案的优缺点,并根据实际情况提出了解决本文所面临的具体问题的海量异构数据集成系统模型; 2.调研了开发本海量异构数据集成系统所涉及的关键技术,针对实际情况有选择的对本系统所采用的关键技术进行深入研究; 3.设计并实现了一种基于数据视图和人工神经网络的海量异构数据集成系统,该系统可以对终端用户提供统一的查询视图。 系统的运行结果显示,本文中描述的海量异构数据集成系统在数据处理效率,数据吞吐量,扩展性,安全性,准确性以及用户界面友好性等方面都达到了较高水平。基本解决了海量异构数据集成中遇到的诸多难题,为海量异构数据源及数据的快速共享提供了一种新颖的解决思路。
【学位授予单位】:北京邮电大学
【学位级别】:硕士
【学位授予年份】:2010
【分类号】:TP311.52

知网文化
【参考文献】
中国期刊全文数据库 前1条
1 李仁庆,李红星;基于神经网络技术的异构数据库集成查询[J];大连轻工业学院学报;2003年02期
【共引文献】
中国期刊全文数据库 前4条
1 何源,戴小鹏,张林峰;数据查询优化算法综述[J];计算机与现代化;2005年04期
2 马晓艳;曹宝香;;一种基于XML的数据集成方案及其关键技术[J];计算机与现代化;2006年03期
3 陈洋;罗四维;;异构数据库数据集成的研究与实现[J];计算机技术与发展;2006年07期
4 余永红;;基于XML中间件实现异构数据源集成研究[J];湖南理工学院学报(自然科学版);2006年03期
中国重要会议论文全文数据库 前2条
1 胡虹;王坚;凌卫青;朱艳萍;;汽轮发电机异构开发环境的数据库设计及系统实现[A];先进制造技术论坛暨第五届制造业自动化与信息化技术交流会论文集[C];2006年
2 江涛;刘东波;刘巍;;基于XML的异构数据集成中间件研究[A];促进企业信息化进程——第十届中国Java技术及应用大会文集[C];2007年
中国博士学位论文全文数据库 前2条
1 周园春;科学数据网格分布式查询框架及其关键技术研究[D];中国科学院研究生院(计算技术研究所);2006年
2 于宝琴;成套电器企业异构数据整合及其物流系统的研究[D];天津大学;2006年
中国硕士学位论文全文数据库 前10条
1 王珺吉;门户平台中的企业应用集成技术研究[D];西北工业大学;2006年
2 马晓艳;工作流管理系统中事务处理的研究与实现[D];曲阜师范大学;2006年
3 唐琪;企业信息集成与交换平台的设计与实现[D];浙江大学;2006年
4 甄建廷;基于CWM的ETL设计及其应用[D];北京邮电大学;2006年
5 高芳芳;软件项目管理中异构数据的集成方法研究[D];大连海事大学;2005年
6 房庆辉;面向单件小批生产系统的物资采购管理设计与实现[D];哈尔滨理工大学;2005年
7 程跟上;基于公共仓库模型的ETL系统的研究和应用[D];南京航空航天大学;2005年
8 李普聪;信息网格中信息一体化访问技术研究[D];华侨大学;2005年
9 赵寒;基于神经网络的异构数据库语义发现与匹配技术研究[D];西北工业大学;2004年
10 刘斌;基于J2EE的铁通运营支撑信息共享平台的研究[D];北京交通大学;2006年
【同被引文献】
中国期刊全文数据库 前10条
1 张正明,佟俐鹃;异构数据库集成的研究与实现[J];航空计算技术;2004年02期
2 万常选;DTD与Schema在电子商务应用中的比较研究[J];计算机应用研究;2002年09期
3 陈曦;王执铨;;决策支持系统理论与方法研究综述[J];控制与决策;2006年09期
4 曹晓静;张航;;决策支持系统的发展及其关键技术分析[J];计算机技术与发展;2006年11期
5 侯汉清;李华;;《中国分类主题词表》(第二版)评介[J];国家图书馆学刊;2006年02期
6 肖珑,陈凌,冯项云,冯英;中文元数据标准框架及其应用[J];大学图书馆学报;2001年05期
7 靳强勇,李冠宇,张俊;异构数据集成技术的发展和现状[J];计算机工程与应用;2002年11期
8 朱晓明,刘卫东,蔺为民;数据库连接中间件的研究[J];计算机工程与应用;2003年20期
9 袁宝良,张忠能,严学道;Microsoft.NET和J2EE架构开发技术分析[J];计算机工程;2004年S1期
10 马玉春,宋瀚涛;Web中文文本分词技术研究[J];计算机应用;2004年04期
中国博士学位论文全文数据库 前10条
1 连剑波;基于XML的地质数据集成及WebGIS发布研究[D];中国科学院研究生院(广州地球化学研究所);2006年
2 应晓敏;面向Internet个性化服务的用户建模技术研究[D];中国人民解放军国防科学技术大学;2003年
3 李瑞轩;异构信息集成中的查询处理与优化研究[D];华中科技大学;2004年
4 强保华;异构数据库语义集成技术研究[D];重庆大学;2005年
5 谢能付;基于语义Web技术的知识融合和同步方法研究[D];中国科学院研究生院(计算技术研究所);2006年
6 曾庆田;数学概念的知识获取与分析方法研究[D];中国科学院研究生院(计算技术研究所);2005年
7 张抗抗;基于语义Web Services的企业异构系统应用集成研究与实现[D];山东大学;2006年
8 崔运鹏;基于本体论的农业知识管理关键技术研究[D];中国农业科学院;2007年
9 戴鸿君;基于异构多核体系与组件化软件的嵌入式系统研究[D];浙江大学;2007年
10 李建国;实时异构系统的集成动态调度模型与算法研究[D];中南大学;2006年
中国硕士学位论文全文数据库 前7条
1 张方于;开放环境下企业决策支持平台的分析与设计[D];华中科技大学;2005年
2 李勇;智能检索中基于本体的个性化用户建模技术及应用[D];国防科学技术大学;2002年
3 丁建;分布式数据库的查询优化算法研究[D];上海师范大学;2005年
4 王佳;面向海量数据的多数据库UNION查询研究与实现[D];国防科学技术大学;2006年
5 饶翔;面向海量数据的多数据库并行查询关键技术研究与实现[D];国防科学技术大学;2006年
6 姚崇东;基于XML的多源异构数据集成的实现方法研究[D];哈尔滨工程大学;2007年
7 张萌萌;基于本体和XML的异构数据集成研究[D];山东师范大学;2008年
【二级参考文献】
中国期刊全文数据库 前10条
1 姚领众,宋瀚涛;一种启发式异构分布式数据库的查询优化方法[J];北京理工大学学报;1998年04期
2 孙茂松,邹嘉彦;汉语自动分词研究评述[J];当代语言学;2001年01期
3 胡佳妮,徐蔚然,郭军,邓伟洪;中文文本分类中的特征选择算法研究[J];光通信研究;2005年03期
4 赵立军,刘志勇,高庆狮;高效的任意路并行归并算法[J];中国科学E辑;1998年05期
5 胥桂仙,苏筱蔚,陈淑艳;中文文本挖掘中的无词典分词的算法及其应用[J];吉林工学院学报(自然科学版);2002年01期
6 付德宇;代成琴;;一个面向文本分类的中文特征词自动抽取方法[J];计算机工程与应用;2006年15期
7 翟伟斌;周振柳;蒋卓明;许榕生;;汉语分词词典设计[J];计算机工程与应用;2007年01期
8 杨雪梅;董逸生;王永利;钱江波;钱刚;;异构数据源集成中的模式映射技术[J];计算机科学;2006年07期
9 陈宏,曹健,梁旻;分布异构环境下的数据集成方法及应用[J];计算机工程;2005年05期
10 余腊生;李徐;;基于W eb服务的跨网络异构数据交换技术[J];计算机应用;2005年S1期
【相似文献】
中国期刊全文数据库 前10条
1 赵欢;陈熙;;在数字化校园中应用异构数据集成技术构建数据中心[J];中国教育信息化;2008年19期
2 刘智琦;刘琦;徐奕奕;;基于XML的异构数据集成方法研究[J];制造业自动化;2011年06期
3 叶蕾,郭玲,胡建华;基于XML的异构数据集成领域的应用研究[J];吉林师范大学学报(自然科学版);2003年03期
4 李宗花;吴克力;;旅游目的地营销系统(DMS)中异构数据集成中间件的设计[J];淮阴师范学院学报(自然科学版);2009年04期
5 杨金玺,柏文阳;基于XML异构数据访问中间件的设计与实现[J];微型机与应用;2005年08期
6 蒋辉;王会强;赵建国;赵晓顺;;XML和Web服务在农业专家系统集成中的应用[J];农机化研究;2008年07期
7 田丰;韩晓冰;;煤矿安全生产管理中异构数据集成研究[J];矿业安全与环保;2009年05期
8 谢雄程;刘之家;;异构数据集成技术中的“本体”建模方法研究[J];广西师范学院学报(自然科学版);2010年01期
9 邱阳;;基于XML的音乐数据库异构集成研究与实现[J];信息技术;2010年07期
10 于学斗;;基于CORBA的电子资源集成系统应用研究[J];中国教育信息化;2010年09期
中国重要会议论文全文数据库 前10条
1 何楚;韩伟红;;异构数据集成技术综述[A];2010通信理论与技术新发展——第十五届全国青年通信学术会议论文集(上册)[C];2010年
2 关冰兵;;基于网格技术的装备保障异构数据集成研究[A];第13届中国系统仿真技术及其应用学术年会论文集[C];2011年
3 余飞;胡庆武;;基于开源NASA World Wind的海量离散地形显示技术[A];第十七届中国遥感大会摘要集[C];2010年
4 付伟;肖侬;;网格环境下的海量科学数据自主复制管理[A];第二十届全国数据库学术会议论文集(研究报告篇)[C];2003年
5 牛丽萍;袁晓洁;于士涛;李志梁;窦志成;;异构数据集成中包装器Wrapper的设计[A];第二十一届中国数据库学术会议论文集(技术报告篇)[C];2004年
6 陈海波;侯建卫;;针对海量详单快速存储检索的实现方法[A];2011全国无线及移动通信学术大会论文集[C];2011年
7 陈海波;侯建卫;;针对海量详单快速存储检索的实现方法[A];2011年通信与信息技术新进展——第八届中国通信学会学术年会论文集[C];2011年
8 张黎;孙艳华;张延华;;随季节变化的海量网络数据预测方法[A];全国第4届信号和智能信息处理与应用学术会议论文集[C];2010年
9 祖为国;姚斌;;海量地形漫游中经典LOD算法的改进研究[A];广东省测绘学会第九次会员代表大会暨学术交流会论文集[C];2010年
10 张继红;陈小全;;海量交通安全数据的元数据管理研究[A];2010年第16届全国信息存储技术大会(IST2010)论文集[C];2010年
中国重要报纸全文数据库 前10条
1 本报记者 汤铭;IBM六大举措助海量产品再爆发[N];计算机世界;2011年
2 本报记者 武汉;海量处理构筑新电信[N];网络世界;2001年
3 本报记者 霍皓迪;海量时代是否到来?[N];通信产业报;2001年
4 ;着眼未来迎接海量处理时代[N];网络世界;2001年
5 本报记者 刘燕;中国电信数据网向光速海量迈进[N];中国经营报;2002年
6 黄绍平;硬盘打造海量MP3[N];中国电子报;2002年
7 本报记者 肖春江;海量存储 海量内涵[N];计算机世界;2000年
8 本报记者 汪云;佳杰拓展海量分销业务[N];计算机世界;2002年
9 本报记者 钟伟;虚拟图书馆:纳海量数字化信息[N];中国教育报;2001年
10 本报记者 王继晟;书山海量何为径 数字图书超时空[N];市场报;2001年
中国博士学位论文全文数据库 前10条
1 张智;相互作用组异构数据集成研究[D];北京协和医学院;2011年
2 杨正益;制造物联海量实时数据处理方法研究[D];重庆大学;2012年
3 尹华罡;基于海量时空数据的路线挖掘与检索[D];中国科学技术大学;2012年
4 田丰林;海量三维模型的交互绘制[D];浙江大学;2010年
5 张桂刚;海量规则并行处理研究[D];武汉大学;2009年
6 邵华;基于决策树的海量时序不均衡数据下预测系统的研究[D];东北大学;2005年
7 缪嘉嘉;异构数据映射技术研究[D];国防科学技术大学;2008年
8 李学东;基于WEB的地学数据集成与发布技术研究[D];中国地质大学(北京);2009年
9 侯昉;海量网络存储系统中的多级缓存技术研究[D];华南理工大学;2011年
10 邓振杰;提高海量磁记录系统性能的方法研究[D];河北工业大学;2010年
中国硕士学位论文全文数据库 前10条
1 王鸿蒙;海量异构数据集成系统的设计与实现[D];北京邮电大学;2010年
2 胡君;一种社交网异构数据集成方法的研究与实现[D];湖南大学;2009年
3 高国强;基于元语言的异构数据集成研究[D];山东大学;2010年
4 张嘉扬;异构数据集成技术在教育信息资源整合中的应用研究[D];东北师范大学;2010年
5 陶建林;基于本体的异构数据集成研究[D];浙江师范大学;2010年
6 贺永鑫;异构数据集成平台研究[D];中北大学;2010年
7 吕锐;市政公共设施应急系统异构数据集成研究[D];西安电子科技大学;2010年
8 宋伟;面向智能电网的异构数据集成方法研究与应用[D];华北电力大学;2011年
9 朱蓉蓉;异构数据集成和信息共享模式研究[D];西安科技大学;2010年
10 房立芳;基于本体的异构数据集成与融合方法研究[D];中国科学技术大学;2010年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026