收藏本站
《北京交通大学》 2013年
收藏 | 手机打开
二维码
手机客户端打开本文

在线动态数据迁移下系统负载控制的设计与实现

苏睿  
【摘要】:随着现代信息化进程的迅猛发展,硬件设施的更新换代的时间日趋变短,企业信息系统替换的频率也变得越来越高。当旧的信息系统在面临升级和替换的问题时,旧系统中必然会有有价值的信息数据需要迁移到新的系统中。企业在替换过程中对信息系统也提出了更高的要求,希望旧的系统向新系统进行数据迁移的同时不能停止现有的固定日常事务。基于这个背景,产生了数据迁移框架这个项目。 数据迁移框架提供从源系统到目标系统进行信息数据传输,并在传输过程中解决数据迁移和源系统正常业务服务同时运作时容易产生的系统负载失衡问题。负载控制是数据迁移框架保证在线动态数据平稳迁移和源系统日常业务服务正常执行的关键功能,负载控制的质量好坏不仅仅决定了数据迁移项目能否正常交付使用,而且对后期用户进行二次开发时是否提供运行的有力支持产生影响。本人完成了如下工作:负载控制的算法选取、比较和实现;安装部署包的结构设计及调度脚本设计;数据迁移框架的测试验证。 本文在基于动态在线迁移的前提条件下,解决数据迁移过程中的系统负载问题。经过研究和比对,以优化和提高系统的负载性能为目标,通过控制数据迁移框架的传输速度来达到系统负载平衡的目的。如何有效、准确地在在线动态数据迁移下实施负载控制是本文的难点。本文的工作主要包括: (1)提出了数据迁移项目的系统构架和主要功能。 (2)在充分了解系统需求和设计框架的基础上,对负载控制的几个算法进行分析和比较,最终得出基于线程休眠机制的负载控制解决方案,解决了动态迁移过程中系统负载容易失衡的问题。 (3)最后通过设计测试用例从性能和功能上验证负载控制模式的合理性和可行性。测试结果证明了在在线动态数据迁移时实现了系统自身日常工作和数据传输的负载平衡。
【学位授予单位】:北京交通大学
【学位级别】:硕士
【学位授予年份】:2013
【分类号】:TP311.52

手机知网App
【参考文献】
中国期刊全文数据库 前10条
1 刘海英,冯文秀,杜晓通;管理信息系统升级过程中数据迁移的研究及实现[J];电力自动化设备;2005年05期
2 胡萌;赵卫东;王志成;韩下林;;线程池设计与动态优化[J];电脑知识与技术;2008年36期
3 罗昔军,马征;中间件在移动客户服务系统集中化改造中的应用[J];福建电脑;2005年11期
4 史军勇;齐艳珂;;Linux操作系统环境下CPU平均负载的研究[J];福建电脑;2009年06期
5 孟祥乾;叶允明;邓斌;;基于流水线负载平衡模型的并行爬虫研究[J];计算机工程;2009年02期
6 刘云生;王刚;王卫国;;实时线程池性能研究与动态优化[J];计算机工程与科学;2007年12期
7 王华,马亮,顾明;线程池技术研究与应用[J];计算机应用研究;2005年11期
8 裘晓燕;;基于中间件在企业信息系统中的应用[J];科技风;2009年12期
9 何龙;戴新发;伍华凤;昌玉芳;;一种基于CPU负载平均的负载均衡算法[J];计算机与数字工程;2012年08期
10 郑仕勇;周建峰;王新星;李碧青;;基于XML的社保数据迁移系统的设计与实现[J];软件导刊;2010年03期
【共引文献】
中国期刊全文数据库 前10条
1 杨小宇;杨斌;;Linux下一种多核网络服务器模型设计与实现[J];成都信息工程学院学报;2010年06期
2 胡萌;赵卫东;王志成;韩下林;;线程池设计与动态优化[J];电脑知识与技术;2008年36期
3 孙慧媛;金伟祖;;基于Win32的面向对象的线程池的研究与实现[J];电脑知识与技术;2010年20期
4 林海;;社保数据集成系统ETL研究与开发[J];电脑知识与技术;2012年03期
5 韩澄宗;朱善安;;一种基于双C/S架构的视频监控系统[J];电视技术;2006年08期
6 耿昌兴;孟少卿;张辰;廖晓娜;鹿凯宁;;云环境下基于MapReduce的多媒体共享处理系统[J];电子测量技术;2012年07期
7 王新春;钱向东;;基于并发执行时间配额控制的任务调度框架[J];信息技术与标准化;2012年11期
8 许健;于鸿洋;;一种Linux多线程应用下内存池的设计与实现[J];电子技术应用;2012年11期
9 王庆刚;田生军;范协裕;杨延青;;图层级矢量地图裁剪计算模式与算法策略[J];地球信息科学学报;2013年04期
10 王彩莲;;关于档案数据迁移过程中数据审核问题的探讨[J];黑龙江档案;2013年03期
中国博士学位论文全文数据库 前1条
1 段成;电网投资效益后评价理论及决策支持系统的研究[D];华北电力大学;2012年
中国硕士学位论文全文数据库 前10条
1 吕信;激光能量沉积光路追踪法及其并行化[D];中国工程物理研究院;2009年
2 赵磊;电气火灾监控系统的软件设计[D];大连理工大学;2010年
3 刘少武;移动交换网应急保障数据监测系统设计与实现[D];电子科技大学;2010年
4 张玉国;通用可组态串行协议解析器的设计与实现[D];西安电子科技大学;2010年
5 薛宁静;基于服务器推技术的物理实验实时演示系统的设计与实现[D];西安电子科技大学;2010年
6 卢建华;基于Web应用系统的性能测试及工具开发[D];西安电子科技大学;2009年
7 陈永亮;Oracle环境下数据迁移技术研究与实现[D];北方工业大学;2011年
8 王磊;基于多线程的嵌入式远程监控WEB服务器的设计与实现[D];西华大学;2011年
9 孙璞;多业务承载城域网络认证与审计优化研究[D];北京林业大学;2011年
10 唐彬;异构数据库数据迁移中间件设计[D];兰州理工大学;2011年
【二级参考文献】
中国期刊全文数据库 前10条
1 陈伟,丁秋林;具有数据清理功能的交互式数据迁移及应用[J];吉林大学学报(信息科学版);2004年02期
2 刘海英,冯文秀,杜晓通;管理信息系统升级过程中数据迁移的研究及实现[J];电力自动化设备;2005年05期
3 王婧韫;数据迁移的一般原则[J];电脑开发与应用;2000年04期
4 王明松;移动客户服务中心的发展及建设[J];电信技术;2001年01期
5 叶允明,于水,马范援,宋晖,张岭;分布式Web Crawler的研究:结构、算法和策略[J];电子学报;2002年S1期
6 王韶华,郭新志,卢光玉;用Delphi实现异构数据库之间的数据复制[J];河南师范大学学报(自然科学版);2001年02期
7 张爱玉;邱旭华;;公安业务中的数据迁移技术[J];警察技术;2008年01期
8 张飞;曾国荪;;网格环境中节点CPU负载的分形预测[J];计算机科学;2006年08期
9 王艳君,杜志典,王运格;异构数据库间的数据集成[J];计算机工程;1999年08期
10 汪建球,张忠能;分布式Web服务器中负载均衡的实现[J];计算机工程;2003年15期
【相似文献】
中国期刊全文数据库 前10条
1 詹思瑜,汪静,吴跃;Java技术用于RADIUS服务器的设计研究[J];计算机应用;2004年12期
2 陈志成,毛明毅,何华灿,陈榕,林清洪;面向构件基于和欣内核的进程/线程池原理与实现[J];计算机应用研究;2004年12期
3 袁刚,雷光波,傅鹂,向宏;高性能代理服务器的实现[J];计算机工程与应用;2005年05期
4 邓新国,贾利民,秦勇;消息中间件中多线程池并发模型的研究[J];铁路计算机应用;2005年02期
5 杨东升,王高峰;多线程技术在虚拟仪器开发软件LabWindows/CVI中的实现[J];电测与仪表;2005年03期
6 王华,马亮,顾明;线程池技术研究与应用[J];计算机应用研究;2005年11期
7 孟凡彦,陈嘉;基于线程池技术DHCP服务器的设计与实现[J];计算机应用研究;2005年12期
8 肖和平;韩伟红;贾焰;吴泉源;;StarCCM2.0中高性能线程池模型的研究与实现[J];计算机工程;2005年24期
9 杨刚;周兴社;潘惠芳;;基于反馈的自适应线程池管理框架[J];计算机工程;2006年05期
10 张渊;崔滨;余小清;万旺根;;线程池技术在网络游戏服务器中的应用[J];微计算机信息;2006年18期
中国重要会议论文全文数据库 前10条
1 刘彦明;马玉祥;易克初;柯国富;;多SCP智能网负载控制算法[A];开创新世纪的通信技术——第七届全国青年通信学术会议论文集[C];2001年
2 彭湘桂;邬刚;;PMS电源管理系统在渤海曹妃甸油田应用与改进[A];第八届全国设备与维修工程学术会议、第十三届全国设备监测与诊断学术会议论文集[C];2008年
3 黄文伟;何加铭;曾兴斌;;么移动中间件线程池并发机制优化改进[A];浙江省电子学会2010学术年会论文集[C];2010年
4 刘建强;袁怡;杨喜昆;谢静敏;王建民;叶晓俊;;IOCP技术在数据库性能测试中的应用[A];第二十四届中国数据库学术会议论文集(研究报告篇)[C];2007年
5 杨俊;王骏;沈卓炜;汪芸;;针对紧急通道的实时CORBA系统的改进[A];2009年全国开放式分布与并行计算机学术会议论文集(上册)[C];2009年
6 钟艳雯;罗小珠;夏正龙;欧阳计跃;张玉玲;;湖南省级气象信息传输系统研制与开发[A];2011年中国气象学会气象通信与信息技术委员会暨国家气象信息中心科技年会论文摘要[C];2011年
7 胡晓伟;李英壮;李剑虹;;IXP2400网络处理器编程模型研究与应用[A];2006年全国开放式分布与并行计算机学术会议论文集(三)[C];2006年
8 袁小龙;刘增才;李晓霞;郭力;;基于XML的半结构化化学信息提取系统的重构与优化[A];第九届全国计算(机)化学学术会议论文摘要集[C];2007年
9 洪继钦;韩亮;龚光红;;Linux下RTI网络功能实现[A];'2008系统仿真技术及其应用学术会议论文集[C];2008年
10 黄杰;陈琳;钱方;贾焰;邹鹏;;面向OLTP应用的服务对象管理系统[A];第十七届全国数据库学术会议论文集(研究报告篇)[C];2000年
中国重要报纸全文数据库 前10条
1 关向凯;搭建GSM/WCDMA双赢网络[N];通信产业报;2002年
2 爱立信(中国)有限公司无线产品部 关向凯;双模无线网络的设计[N];计算机世界;2002年
3 何朝霞;大唐移动推出新款RNC TDR3000[N];通信产业报;2007年
4 三共;适用所有通信设备的新一代ACTURA电源[N];通信产业报;2000年
5 重庆 凌宗禄;单片机可编程广播自动播出系统[N];电子报;2003年
6 上海 言已;1~16路可编程彩灯控制器[N];电子报;2005年
7 谢厚亮 刘伟跃;构建分布式超级计算机[N];计算机世界;2005年
8 中兴通讯 肖炜丹;中兴HSPA引领3G高速路[N];通信产业报;2007年
9 中国联通研究设计院技术研发部 陈国利李福昌;实现互操作与资源共享[N];通信产业报;2008年
10 ;诺基亚3G系统框架(上)[N];网络世界;2001年
中国博士学位论文全文数据库 前7条
1 刘彦明;智能网关键技术研究[D];西安电子科技大学;2003年
2 邴红艳;异构无线网络的联合资源管理技术[D];上海交通大学;2008年
3 张大海;浮力摆式波浪能发电装置关键技术研究[D];浙江大学;2011年
4 徐祯;面向并行程序设计的可视化建模语言体系及支撑系统研究[D];天津大学;2010年
5 李群;主题搜索引擎聚类算法的研究[D];北京林业大学;2011年
6 田志斌;组件性能建模与银行应用系统性能管理研究[D];燕山大学;2011年
7 霍道安;集群存储网络吞吐量塌陷行为研究[D];华中科技大学;2012年
中国硕士学位论文全文数据库 前10条
1 高昂;Web应用服务器并发计算环境设计与实现[D];华中科技大学;2007年
2 邵鸣年;分布事务监控器中运行支持环境的研究与实现[D];中国科学院研究生院(软件研究所);2004年
3 项波;基于Web服务的组件实时性研究[D];郑州大学;2004年
4 阳靖东;基于嵌入式系统的实时CORBA研究与实现[D];电子科技大学;2006年
5 王俊峰;一种实时集群系统负载均衡通用模型的研究及应用[D];湖南大学;2008年
6 肖和平;基于CORBA构件模型的应用服务器中容器并发的研究与实现[D];国防科学技术大学;2004年
7 吕晶华;高性能环境污染源监控服务系统设计研究[D];浙江大学;2006年
8 张毓鲲;支持面向服务体系结构(SOA)的中间件平台研究与实现[D];华东师范大学;2006年
9 要忠伟;基于线程池的WWW缓存实现[D];中国地质大学(北京);2008年
10 于水晶;通信机房远程综合监控系统性能优化策略的研究与实现[D];北京交通大学;2009年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026