收藏本站
《成都理工大学》 2004年
收藏 | 手机打开
二维码
手机客户端打开本文

数据仓库技术研究

王淼  
【摘要】: 二十世纪九十年代末,传统数据库管理系统的发展陷入低潮,残酷的市场竞争迫使全世界的数据库供应商寻找新的技术和经济增长点,其中一个热点是以Oracle9i为典型代表的对象—关系数据库技术,另一个热点就是以数据仓库技术为核心的商业智能(BI)。 在线分析处理(OLAP)和数据挖掘技术的不断成熟,为数据仓库应用市场的开拓打下了良好的基础。2000年以来,以数据仓库为基础的在线分析处理和数据挖掘应用在国内的金融、保险、证券、电信、税务等传统数据密集型行业有所发展。但是,由于中国信息化基础设备相对并不完善,数据来源系统的变通性和灵活性无法完全满足要求,致使当在已有数据仓库的基础上有新的需求或增值服务的提出时,源数据的提供成为整个系统持续发展的瓶颈。 将数据源的整理和上传工作重新依新需求设计并实现一次,不论在消耗的时间和人力成本上都是令人无法忍受的。本论文介绍了该电信公司经营分析数据仓库系统的开发与研究现状,分析了ETL规则的抽取策略和优化算法,讨论了数据仓库建模中的数据量估算和粒度选择,并针对上面的问题提出了利用复合主键和横表纵表之间的转换实现维表和事实表粒度向下细分的思想,即在不修改源数据提供系统的情况下,最大限度的利用已有的数据实现新的需求。本系统以UNIX(IBM AIX)操作系统为开发平台,使用PowerDesigner为建模工具,基于ORACLE9i的数据库存储,以DataStage进行ETL操作,以Cognos作为多维立方体生成及前端展示工具,对整个数据仓库系统的设计和研究做了深入的分析和详细的阐述,为数据仓库二期工作提出了理论上的帮助和建议。
【学位授予单位】:成都理工大学
【学位级别】:硕士
【学位授予年份】:2004
【分类号】:TP311.13

【引证文献】
中国硕士学位论文全文数据库 前2条
1 陈煌;构建基于SAP BW数据仓库的营销管理决策支持解决方案[D];厦门大学;2008年
2 王星海;山东统一银座数据仓库分析系统的设计与实现[D];山东大学;2009年
【参考文献】
中国期刊全文数据库 前7条
1 邓时颖,吕俊辉,郑会颂;基于数据仓库技术的电信企业客户分析[J];电信快报;2002年10期
2 谭汉松,刘涛;基于ODS的数据仓库研究与实现[J];信息技术;2003年03期
3 张英朝,邓苏,张维明;数据仓库元数据管理研究[J];计算机工程;2003年01期
4 王元珍,李靖;一种数据立方查询条件优化策略[J];计算机工程;2003年02期
5 王文彬,伍庆华,吴国平;基于移动行业的ETL方法及策略探讨[J];计算机工程;2003年02期
6 常新功,肖玉巍,金红;数据仓库的ETL策略[J];山西财经大学学报;2002年S1期
7 王元珍,李海波;基于OLE DB的数据抽取、转换和装入工具的设计与实现[J];小型微型计算机系统;2002年04期
【共引文献】
中国期刊全文数据库 前10条
1 杨中全;;数据仓库技术在消防领域中的应用[J];安防科技;2006年08期
2 干娟;;基于决策树算法的学生综合测评系统的设计[J];安徽电子信息职业技术学院学报;2011年04期
3 李玲玲;辛浩;;FCM算法及其有效性度量方法[J];安徽电子信息职业技术学院学报;2011年05期
4 陈涛;陈茂华;巩仔鹏;梁嵘;邓李蓉;胡月琴;;基于互联网的中医病案OLAP系统的开发与应用[J];安徽中医学院学报;2010年05期
5 郭有强;胡学钢;;基于项目增长法高效求解最大频繁项集[J];安徽科技学院学报;2006年06期
6 张友志;钱萌;程玉胜;;基于关联规则web日志挖掘方法的研究[J];安庆师范学院学报(自然科学版);2006年01期
7 郑春香;董甲东;;分类技术研究及在高校人才识别中的应用[J];安庆师范学院学报(自然科学版);2007年01期
8 曹丹阳;李晋宏;魏金强;张艳芳;;基于决策树的英语四级成绩分析[J];北方工业大学学报;2007年01期
9 钟雁;郭雨松;;数据挖掘技术在铁路货运客户细分中的应用[J];北京交通大学学报;2008年03期
10 黄江涛,刘自伟,黄晓芳;用于数据挖掘的多维数据可视化技术[J];兵工自动化;2005年03期
中国重要会议论文全文数据库 前10条
1 周炎涛;唐剑波;王家琴;;基于信息熵的改进TFIDF特征选择算法[A];第二十六届中国控制会议论文集[C];2007年
2 赵云鹏;石丽;刘莹;;基于数据挖掘的高校规模分析及应用研究[A];第九届全国信息获取与处理学术会议论文集Ⅰ[C];2011年
3 王皓;曹永锋;孙洪;;基于流域变换的聚类分析[A];第十二届全国信号处理学术年会(CCSP-2005)论文集[C];2005年
4 董向东;;电子平板测量环境下实现大比例尺地形图和地籍图一体化的探讨[A];中国测绘学会九届三次理事会暨2007年“信息化测绘论坛”学术年会论文集[C];2007年
5 吴栋;张京华;王玉成;胡伍生;;前兆信息模型在地震预测中的应用[A];数字测绘与GIS技术应用研讨交流会论文集[C];2008年
6 孟少朋;骆红云;李盛;;基于数据挖掘的汽车可靠性分析方法研究[A];2007年全国失效分析学术会议论文集[C];2007年
7 陈丽娟;杨欣;夏安邦;;热电厂MES系统数据仓库的设计与应用[A];2005年全国自动化新技术学术交流会论文集[C];2005年
8 张健沛;卢海红;;基于XML的数据仓库历史数据的查找与归档策略研究[A];2006北京地区高校研究生学术交流会——通信与信息技术会议论文集(下)[C];2006年
9 杨纪军;朱培栋;;关联规则挖掘技术在蜜罐系统中的应用[A];中国电子学会第十六届信息论学术年会论文集[C];2009年
10 朱攀;陈跃新;;Apriori算法在参保人信用度评价中的应用[A];2009年研究生学术交流会通信与信息技术论文集[C];2009年
中国博士学位论文全文数据库 前10条
1 王冬丽;基于可扩展的支持向量机分类算法及在信用评级中的应用[D];东华大学;2011年
2 张翔;文本挖掘技术研究及其在综合风险信息网络中的应用[D];西北大学;2011年
3 金海浩;五行相生间接补法古代应用规律研究[D];南京中医药大学;2011年
4 陈聆;地球化学矿致异常非线性分析方法研究[D];成都理工大学;2011年
5 孟京辉;经营单位级森林经营数据仓库研建及应用研究[D];中国林业科学研究院;2011年
6 任炳昱;高拱坝施工实时控制理论与关键技术研究[D];天津大学;2010年
7 何月顺;关联规则挖掘技术的研究及应用[D];南京航空航天大学;2010年
8 演克武;基于需求预测的机型指派和评价研究[D];南京航空航天大学;2010年
9 向先全;基于水信息技术的渤海湾水生态环境特性及模拟研究[D];天津大学;2011年
10 高骏;电力变压器故障诊断与状态综合评价研究[D];华中科技大学;2011年
中国硕士学位论文全文数据库 前10条
1 蔡浩;基于Web使用挖掘的协同过滤推荐算法研究[D];浙江理工大学;2010年
2 李翠;基于车辆自动识别的智能计重监控系统的研究与设计[D];郑州大学;2010年
3 刘春燕;教学网络DIDS数据分析方法的研究与改进[D];郑州大学;2010年
4 史文财;省级政务网安全检测系统的设计与实现[D];哈尔滨工程大学;2010年
5 曾祥莉;ETL在经济普查信息发布系统中的应用研究[D];哈尔滨工程大学;2010年
6 尹丽玲;基于人工免疫算法的Web文本挖掘研究[D];哈尔滨工程大学;2010年
7 李晓光;数据挖掘技术在高校招生和教务管理中的应用[D];哈尔滨工程大学;2010年
8 姜雪飞;基于SNMP的网络安全态势可视化技术[D];哈尔滨工程大学;2010年
9 周东海;基于记账凭证的高校教育成本数据挖掘研究[D];哈尔滨工程大学;2010年
10 李红;数据挖掘中特征选择与聚类算法研究[D];大连理工大学;2010年
【同被引文献】
中国期刊全文数据库 前10条
1 龙青云;胡巧多;;商务智能的架构体系和技术工具[J];电脑知识与技术(学术交流);2007年12期
2 孙杰;李森;庄萌;;数据仓库技术在高校教务管理中的应用[J];电脑知识与技术(学术交流);2007年22期
3 邓时颖,吕俊辉,郑会颂;基于数据仓库技术的电信企业客户分析[J];电信快报;2002年10期
4 王孝成;数据仓库中的数据模型技术[J];湖南工程学院学报(自然科学版);2002年03期
5 张昇;张洁;陈德祥;;数据仓库通用数据定制方法的研究[J];吉林省教育学院学报;2007年06期
6 刘立波;数据仓库技术的研究与应用[J];计算机工程与应用;2002年15期
7 郑洪源,周良;商业智能解决方案的研究与应用[J];计算机应用研究;2005年09期
8 范晔;黄征;顾锡康;;数据仓库技术及其在证券管理中的应用[J];科技经济市场;2007年05期
9 陈国民;;数据仓库特征、结构、实施方法与系统构建[J];科技信息;2007年01期
10 肖怡;信息时代企业营销管理的变革与创新[J];南方经济;2001年01期
中国重要报纸全文数据库 前1条
1 ;[N];计算机世界;2004年
中国硕士学位论文全文数据库 前3条
1 尚夏;数据仓库系统的理论研究与实现[D];西安电子科技大学;2005年
2 路智宁;对IC卡交易数据的挖掘和分析[D];广东工业大学;2005年
3 张起荣;基于数据仓库的销售数据的查询分析[D];重庆大学;2005年
【二级引证文献】
中国硕士学位论文全文数据库 前4条
1 孙琳;基于商务智能的电力财务预测系统的研究与实现[D];华北电力大学;2011年
2 魏亚丽;SAP Business One在中小企业实施过程中的风险因素研究[D];华南理工大学;2011年
3 吴占锋;面向多维分析即席报表组件的研究与实现[D];昆明理工大学;2012年
4 王夕萌;Teradata数据仓库在邮政金融客户管理系统中的设计与实现[D];北京交通大学;2013年
【二级参考文献】
中国期刊全文数据库 前4条
1 连立贵,金凤,蔡家楣;数据仓库中的数据提取[J];计算机工程;2001年09期
2 崔立新,苑森淼,赵春喜;约束性相联规则发现方法及算法[J];计算机学报;2000年02期
3 柳莺,赵艳红,钱旭,刘东红;数据仓库技术研究和应用探讨[J];计算机应用;2001年02期
4 李静,宋瀚涛;创建企业级数据仓库的关键技术[J];计算机应用研究;2001年05期
【相似文献】
中国期刊全文数据库 前10条
1 刘东波;数据仓库技术的现状与未来[J];微型机与应用;2000年07期
2 程保炜;数据仓库技术浅析[J];现代计算机;2000年01期
3 沈叶青;应用数据仓库技术建立市场营销决策支持系统的方案[J];中国信用卡;2000年06期
4 赵连胜;数据仓库技术与应用[J];阴山学刊;2000年06期
5 王愚,邵后印,陈勇孝,郎洪,段银田;数据仓库技术在税务征管业务中的应用[J];郑州工业大学学报;2000年04期
6 杨顺生;利用数据仓库技术提升商业银行的竞争力[J];信息系统工程;2000年09期
7 张夏林,方世明,汪新庆,刘刚;数据仓库技术在国土资源信息系统中的应用探讨[J];计算机工程;2001年09期
8 王泽明;浅谈数据仓库技术[J];计算机应用与软件;2001年01期
9 崔志明,陈建明,刘熠;分布式商业数据仓库技术的研究[J];微电子学与计算机;2001年02期
10 赵英莲,田友滨;数据仓库技术在统计中的应用[J];中国统计;2001年05期
中国重要会议论文全文数据库 前10条
1 嵇晓;王洪水;鲍玉斌;于戈;;数据仓库技术在宝钢的实践[A];第十九届全国数据库学术会议论文集(技术报告篇)[C];2002年
2 于秋滨;刘丽敏;杨晶;;数据仓库技术在病案管理中的应用[A];中国医院协会病案管理专业委员会第二十届学术会议论文集[C];2011年
3 陈洪锋;李铭钧;戴柠;;数据仓库技术浅析[A];广东省电机工程学会2003-2004年度优秀论文集[C];2005年
4 董晓;;浅析公路信息化工程中的数据仓库技术[A];全国城市公路学会第十六届(2007)学术年会论文集[C];2007年
5 王宏峰;;数据仓库技术在邮政量收系统中应用探讨[A];增强自主创新能力 促进吉林经济发展——启明杯·吉林省第四届科学技术学术年会论文集(上册)[C];2006年
6 徐明君;王鹏;;数据仓库技术在档案馆的应用探讨[A];源于实践 服务全局——兰台工作纵横[C];2008年
7 王虹;;数据仓库技术在企业计量中的应用[A];第七届(2009)中国钢铁年会论文集(下)[C];2009年
8 嵇晓;唐海东;牛向民;刘英林;;数据仓库技术在钢铁企业的应用[A];05'中国自动化产业高峰会议暨中国企业自动化和信息化建设论坛论文集[C];2005年
9 杨文川;黄涛;;数据仓库技术在统计行业应用的研究与实现[A];第十九届全国数据库学术会议论文集(技术报告篇)[C];2002年
10 许龙飞;熊君丽;麦新宇;麦钜明;;数据仓库技术在物流控制中的应用研究[A];第十九届全国数据库学术会议论文集(技术报告篇)[C];2002年
中国重要报纸全文数据库 前10条
1 中国人民银行河南邓州市支行 宋玉长 李本勇 王明华;数据仓库技术在银行的应用和发展(上)[N];网络世界;2002年
2 吴辉;数据仓库在企业管理中的应用[N];中国财经报;2002年
3 NCR Teradata数据仓库事业部 王闯舟;数据仓库技术及其在银行业的应用[N];网络世界;2003年
4 ;IBM数据仓库技术 助上海工行拓展业务[N];中国计算机报;2002年
5 单群一;税源普查 充实“仓库”[N];中国税务报;2004年
6 曲宏;实现证券集中交易的五大意义及四大风险[N];中国计算机报;2003年
7 秦志龙;需求论证很重要[N];政府采购信息报;2007年
8 ;Microsoft Commerce Server 2000 提供一流商务分析功能[N];中国高新技术产业导报;2001年
9 郭继智;丛连青;经营决策 电脑帮忙[N];中国城乡金融报;2003年
10 丁之;中地数码集团举行新产品发布会[N];中国测绘报;2009年
中国博士学位论文全文数据库 前1条
1 马刚;采用数据仓库技术实现贷款管理DSS[D];大连理工大学;2000年
中国硕士学位论文全文数据库 前10条
1 田东;数据仓库技术及其在钢铁企业中的应用[D];华东师范大学;2005年
2 商瑶;基于数据仓库技术的社区营销系统建设研究[D];吉林大学;2008年
3 李传明;基于数据仓库技术的公路稽征应用研究[D];厦门大学;2008年
4 杨美娜;基于数据仓库技术的高校图书馆建设研究[D];东北师范大学;2009年
5 樊武伟;数据仓库技术的吉林联通社区综合营销系统中的应用[D];吉林大学;2009年
6 万炜;基于数据仓库技术的市场分析系统设计与实现[D];清华大学;2004年
7 钱崇强;数据仓库技术在医院中的应用研究[D];天津大学;2005年
8 陆晓东;数据仓库技术在烟草生产管理中的应用研究[D];同济大学;2006年
9 薛惠芬;海洋环境数据仓库技术研究[D];中国海洋大学;2006年
10 茅明辉;利用数据仓库技术实现电信业务经营分析[D];南京理工大学;2004年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026