收藏本站
《电子科技大学》 2008年
收藏 | 手机打开
二维码
手机客户端打开本文

集群WEB代理服务器的设计

石开强  
【摘要】: “集群WEB代理服务器”是根据北京市科委“基于IPv6的下一代互联网关键技术研发及产业化推进”项目中“IPv6流媒体分发应用支撑系统”的一个子系统且已得到了实际的应用。由于增长的WEB服务需求产生了用户体验与现有网络带宽的矛盾。提供服务的因特网运营商在解决这一矛盾时,必须考虑用户体验,且应尽可能地满足用户。本文所提出的一种新型架构的透明集群WEB代理服务器一般布置在运营商局域网的出口。通过实际测试,发现这种集群透明WEB代理服务器能有效地降低运营商出口流量,并节省约8%的成本。 本论文所提出的是一种新型透明集群代理服务器。透明代理,与NAT(网络地址转换)有许多地方很相似,通常是通过对TCP报头的拦截并纂改其报头而得以实现的。处于透明代理时,用户感觉不到代理的存在,减少了为通知用户正确设置IP所遇到的困难。因此,采用透明代理不但使运营商节省了费用,也节省了用户的时间与精力。另外,采用集群一方面尽可能地提高了其代理服务器的I/O吞吐能力与服务能力,另一方面也减少了响应时间。 在本论文的开始,先对涉及一般代理服务器及虚拟服务器体系架构的术语及相关协议进行了必要的介绍,对单节点代理服务器所涉及的关键技术及基于IP地址的Round-Robin负载均衡等调度算法也做了介绍。由于集群中前端节点每秒会对数万个TCP包进行拦截与分析,并会向LBE产生频繁的查询操作,所以采用了epoll异步驱动机制,以提高其响应速度,减轻前端节点的压力。通过对不同的服务架构与事件驱动机制的分析,本文构架了遵循HTTP标准的高性能集群代理服务器,并在Linux平台上实现了其基本功能。系统各模块运行在一个基于异步事件驱动的系统运行框架之上。根据Linux2.6内核特性,利用其提供统一的事件的登记和回调接口,所有的操作都是通过登记事件,然后在检测到异步事件时回调相应的处理函数,整个过程都是异步的。另外,为了获得高性能,在设计上采用了HASH散列技术,内存池及线程池技术,提高了对磁盘文件的搜索与传输速度。在论文的后半部分对详细设计与实现以及其实现的一些缺点也分别做了阐述。通过测试,证明了设计是基本成功的,获得了预期的扩展性与I/O性能。
【学位授予单位】:电子科技大学
【学位级别】:硕士
【学位授予年份】:2008
【分类号】:TP393.05

手机知网App
【引证文献】
中国期刊全文数据库 前2条
1 张伟;;管理信息系统的整合实现[J];石油化工自动化;2013年02期
2 杨磊;;分析基于WebLogic的集群Web服务器的实现方案[J];中国新技术新产品;2011年24期
【参考文献】
中国期刊全文数据库 前9条
1 李长志;集群服务器系统负载均衡原理的分析与实现[J];重庆邮电学院学报(自然科学版);2004年06期
2 李兆渊;基于MD5算法的LINUX安全认证机制[J];光电技术应用;2004年01期
3 曾立安,凌力;基于Linux的消息驱动Socket模型[J];计算机工程;2003年19期
4 谢茂涛;宋中山;;LVS集群系统负载均衡策略的研究[J];计算机工程与科学;2006年08期
5 段翰聪,卢显良,宋杰;基于EPOLL的单进程事件驱动通信服务器设计与分析[J];计算机应用;2004年10期
6 张岩,赵霁;基于Linux的代理服务器的设计与实现[J];计算机与数字工程;2005年02期
7 孙永辉,姜昱明;HTTP代理服务器的设计与实现[J];计算机工程与设计;2003年07期
8 于国防;王耀才;;基于协同机制的Web服务器集群负载均衡技术[J];计算机工程与设计;2006年14期
9 薛军,李增智,王云岚;负载均衡技术的发展[J];小型微型计算机系统;2003年12期
【共引文献】
中国期刊全文数据库 前10条
1 王静;;基于ARM的太阳能电站远程监控系统的研究[J];安防科技;2007年10期
2 张德荣;;在Windows系统中建立基于Linux的嵌入式开发平台[J];安徽电子信息职业技术学院学报;2006年06期
3 黄世权;;负载均衡技术在防火墙集群中的应用[J];安徽大学学报(自然科学版);2008年06期
4 莫荣耀;林海燕;胡东平;;通过HTTP代理连接的网络对时器设计[J];现代农业科技;2011年18期
5 徐琳;孙莹;;浅析基于Linux的企业信息化解决方案[J];成都电子机械高等专科学校学报;2007年01期
6 张科;杨斌;;Linux内核交互式和非交互式进程判别算法的质疑[J];成都信息工程学院学报;2010年02期
7 夏卓群,朱树人,彭妮;基于事件驱动和异步通信体系结构的Web服务器设计[J];长沙电力学院学报(自然科学版);2005年01期
8 鞠光明;;服务器负载均衡调度研究[J];江苏技术师范学院学报;2007年02期
9 郭军杰;孟建军;丁汉;;多通道IP电参数测量仪的设计与开发[J];电测与仪表;2008年02期
10 孙海霞;马玉凤;;负载均衡综述[J];电脑知识与技术;2006年08期
中国重要会议论文全文数据库 前3条
1 刘菁;冯丹;;高性能计算机在河南省气象局的应用探讨[A];2011年中国气象学会气象通信与信息技术委员会暨国家气象信息中心科技年会论文摘要[C];2011年
2 朱树人;彭妮;胡宁静;;一种具有可伸缩服务能力的高性能web代理服务器[A];第一届建立和谐人机环境联合学术会议(HHME2005)论文集[C];2005年
3 赵新明;张杭;王大平;;基于嵌入式Linux的通信管理机的研制[A];第一届电器装备及其智能化学术会议论文集[C];2007年
中国博士学位论文全文数据库 前3条
1 李领治;选播路由及其关键技术研究[D];南京航空航天大学;2006年
2 周治国;任播技术的研究[D];吉林大学;2008年
3 庄宏;P2P视频点播系统中的ISPs辅助方法研究[D];中国科学技术大学;2010年
中国硕士学位论文全文数据库 前10条
1 刘国栋;基于ARM与DSP的机器视觉硬件平台设计与研究[D];郑州大学;2010年
2 喻琦;基于智能代理的路由优化技术研究[D];华南理工大学;2010年
3 孙鹏;基于多链路的气象信息传输策略的研究与实现[D];华南理工大学;2010年
4 罗丹;基于WCF的遗留系统并行架构的设计与实现[D];浙江大学;2011年
5 刘志伟;基于ARM的语音识别研究[D];东华大学;2011年
6 黄明;基于Erlang的即时通讯系统的设计与实现[D];电子科技大学;2011年
7 任磊;Linux下基于过滤驱动的监控系统的设计与实现[D];电子科技大学;2011年
8 钟安利;基于Intel XScale的嵌入式视频、音频系统设计与实现[D];西安电子科技大学;2009年
9 穆聪;嵌入式渔业基站电台底层驱动的研究与实现[D];西安电子科技大学;2011年
10 秦晓晨;基于动态负载均衡技术的培训系统的设计与实现[D];西安电子科技大学;2010年
【同被引文献】
中国期刊全文数据库 前4条
1 李长志;集群服务器系统负载均衡原理的分析与实现[J];重庆邮电学院学报(自然科学版);2004年06期
2 朱晴;;基于Oracle9i数据库系统性能优化[J];电脑知识与技术(学术交流);2007年12期
3 李俊青;周恩;符天;;服务器集群及负载均衡的研究[J];电脑知识与技术;2009年26期
4 谷平反,赵军;双机环境下并行数据库实现方式研究[J];无线电工程;2003年09期
中国硕士学位论文全文数据库 前3条
1 吴家祺;WEB服务器集群系统的设计与实现[D];南京航空航天大学;2005年
2 胡利军;Web集群服务器的负载均衡和性能优化[D];北京邮电大学;2010年
3 硕珺;PC集群负载均衡调度策略研究[D];中国石油大学;2010年
【二级参考文献】
中国期刊全文数据库 前9条
1 杨朝军,李世畅,陶洋;Linux嵌入式系统的优化[J];重庆邮电学院学报(自然科学版);2002年04期
2 武威,朱春梅;下一代网络业务提供中的关键问题[J];重庆邮电学院学报(自然科学版);2003年01期
3 金志刚,张钢,舒炎泰;基于网络性能的智能Web加速技术——缓存与预取[J];计算机研究与发展;2001年08期
4 夏煜,郎荣玲,戴冠中;Linux文件系统数据缓冲区的分析研究[J];计算机工程与应用;2001年17期
5 庞辽军,王力,李慧贤;基于集群技术的Linux虚拟服务器[J];计算机工程与应用;2003年14期
6 章文嵩,金士尧,吴泉源;LinuxDirector: A Connection Director for Scalable Internet Services[J];Journal of Computer Science and Technology;2000年06期
7 朱培栋,nudt.edu.cn,卢锡城,nudt.edu.cn,周兴铭,nudt.edu.cn;基于客户行为模式的Web文档预送[J];软件学报;1999年11期
8 王志晓,姜秀柱,张辰;集群技术在Internet服务器中的应用[J];计算机工程与设计;2004年03期
9 秦勇,左利云;一种基于集中模式的负载分析系统的开发[J];计算机工程与设计;2004年06期
【相似文献】
中国期刊全文数据库 前10条
1 李纪云,董小社,童端;“负载路由器”实现动态负载均衡的研究[J];微电子学与计算机;2003年07期
2 郝玉玲,张明昊;图书馆光盘文献网络服务发展策略[J];图书馆学刊;2001年01期
3 陈文阳,迟学斌,石大立;视频监控中基于LVS的负载均衡模型分析[J];微电子学与计算机;2004年05期
4 肖军弼,王宇;应用DNS实现WEB集群服务的负载均衡[J];计算机系统应用;2003年10期
5 赵俊;金海;;自适应的集群流媒体文件副本放置策略[J];计算机应用研究;2008年02期
6 王晨亮;林晓霞;;基于HMM的负载均衡分析模型[J];计算机与信息技术;2009年09期
7 徐岚;;负载均衡技术研究[J];农业与技术;2009年01期
8 杨开林;;基于消息总线的智能负载均衡技术的研究与实现[J];信息与电脑(理论版);2011年04期
9 徐岚;;负载均衡技术的综述[J];光盘技术;2008年12期
10 黄鹤龄;赵荣椿;王凯;张青;;以太网集群并行图像处理技术[J];微处理机;2007年06期
中国重要会议论文全文数据库 前10条
1 宋薇;袁鑫昌;张小云;;媒体网关控制器负载均衡实现方法[A];武汉市第二届学术年会、通信学会2006年学术年会论文集[C];2006年
2 季磊;谭庆平;;一种针对CDN系统的负载均衡解决方案[A];第二十二届中国数据库学术会议论文集(技术报告篇)[C];2005年
3 张敏;郭军华;陈飞;;Linux集群技术研究与应用[A];电工理论与新技术2004年学术研讨会论文集[C];2004年
4 马婕;蒋青;唐伦;陈前斌;;用多代理联盟解决泛在网络的负载均衡[A];2009年全国无线电应用与管理学术会议论文集[C];2009年
5 赵立芳;马向南;;WLAN中双链路负载均衡的研究与应用[A];中国通信学会第六届学术年会论文集(下)[C];2009年
6 陈明;王振武;;基于.NET Remoting技术的分布式构件库模型[A];2007年全国开放式分布与并行计算机学术会议论文集(上册)[C];2007年
7 史军晖;程良伦;;EASNS:一种能量敏感、负载均衡的感知节点调度算法[A];中国自动化学会中南六省(区)2010年第28届年会·论文集[C];2010年
8 翟晓波;杨放春;;Parlay Framework中基于负载感知的业务发现方法[A];2005通信理论与技术新进展——第十届全国青年通信学术会议论文集[C];2005年
9 徐萌;孟祥武;陈俊亮;梅翔;;综合业务平台负载均衡的研究[A];2006年全国通信软件学术会议论文集[C];2006年
10 郑旭明;胡光岷;;基于链路丢包率估计的Ad Hoc网络负载均衡路由[A];2008年中国西部青年通信学术会议论文集[C];2008年
中国重要报纸全文数据库 前10条
1 于开年 张国才 史韶惠;路由器实现线路负载均衡[N];网络世界;2002年
2 何支涛;牵手:反垃圾、Web防御、负载均衡[N];网络世界;2008年
3 本报记者 边歆;随需而变 创新不止[N];网络世界;2009年
4 本报记者 张旭军;博科负载均衡新品的四大优势[N];网络世界;2010年
5 ;负载均衡让宝钢网络不再中断[N];网络世界;2007年
6 张旭军;根深枝茂[N];网络世界;2007年
7 新疆财经学院 孙彬;负载均衡的电子商务技术[N];新疆科技报(汉);2001年
8 河北省沙河市二十冶高中 于江波;负载均衡[N];中国电脑教育报;2004年
9 F5金融行业解决方案咨询经理 扬明飞;给应用加份“保险”[N];网络世界;2007年
10 ;Array负载均衡助中石油加油卡系统[N];人民邮电;2009年
中国博士学位论文全文数据库 前10条
1 余鑫;集群路由器关键技术研究[D];华中科技大学;2005年
2 张泽华;云计算联盟建模及实现的关键技术研究[D];云南大学;2010年
3 杨际祥;并行与分布式计算负载均衡问题研究[D];大连理工大学;2012年
4 王小海;常数度P2P系统负载均衡与拓扑优化技术研究[D];国防科学技术大学;2010年
5 曾锋;无线Mesh网流量负载均衡关键技术研究[D];中南大学;2010年
6 李怡;中国信息产业集群发展研究[D];复旦大学;2005年
7 陈莉敏;科技企业孵化器集群机理研究[D];武汉理工大学;2008年
8 吴宇;对等网络内容搜索及索引缓存研究[D];中国科学院研究生院(计算技术研究所);2006年
9 张震龙;“两湖”平原经济一体化发展战略研究[D];华中科技大学;2005年
10 张危宁;高技术产业集群创新机理研究[D];吉林大学;2007年
中国硕士学位论文全文数据库 前10条
1 石开强;集群WEB代理服务器的设计[D];电子科技大学;2008年
2 张普;网络计算机服务器集群的设计研究[D];中国科学院研究生院(软件研究所);2005年
3 徐海龙;基于标准Linux内核的动态负载均衡实现[D];天津工业大学;2005年
4 王早;基于IOCP机制的代理模型与负载均衡算法研究[D];武汉科技大学;2005年
5 李伦伊;一种分布式路由器中间件结构及其负载均衡研究[D];华中科技大学;2005年
6 吴雷;计费系统服务器负载均衡算法研究[D];哈尔滨工程大学;2005年
7 吕月梅;结构化P2P系统的负载均衡策略的研究[D];北京邮电大学;2011年
8 张永辉;DHT服务器集群系统的负载均衡研究[D];北京邮电大学;2011年
9 胡利军;Web集群服务器的负载均衡和性能优化[D];北京邮电大学;2010年
10 周顺;面向Web Service的负载均衡策略研究[D];湖南大学;2010年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026