收藏本站
《复旦大学》 2009年
收藏 | 手机打开
二维码
手机客户端打开本文

基于云计算的语义搜索引擎研究

张建梁  
【摘要】: 当前,云计算(Cloud Computing)是IT界最时髦的一个词,各大IT公司争相宣传和推广这种新兴的商业模式,并投入巨大的人力物力进行研究。随着存储设备的成本降低,带宽的提高,处理器能力的增强,一种将计算和存储放到“云端”的设想正逐渐成为现实。云计算目前还没有统一的标准和接口,不同的公司都在为了各自的业务进行研究,这些领域包括电子商务,网络存储,在线办公,搜索引擎,电子地图等。其中,搜索引擎是处理海量数据的前沿领域,云计算在搜索引擎的演进过程中会起到非常大的作用,而目前各大搜索引擎公司还没有真正意义上的实现后台的“云化”。通过搜索引擎的特性和需求来研究云计算,同时,通过云计算的理论来改进搜索引擎,是一个非常好的切入点,也可以推广到其他的云计算应用领域。 本文,在介绍传统搜索引擎模块分类和平台架构的基础上,指出传统搜索引擎平台存在的缺陷和问题,并提出了一种基于云计算的搜索引擎平台及相关通用接口,并将这些接口泛化,推广到其他云计算的应用中。本文着重对云计算的存储系统进行了探讨: 1.建立了一种一致性Hash数据定位算法,加快了数据的存储和获取; 2.提出了可配置存储系统,针对不同的数据特性提供不同的存储模式; 3.设计了一种全分布式的数据备份方案; 4.提出了基于云的语义搜索算法; 论文还针对云计算中的数据处理提出了一些设想,并探讨了云计算在互联网其他应用领域的应用,以适应今后互联网的发展。
【学位授予单位】:复旦大学
【学位级别】:硕士
【学位授予年份】:2009
【分类号】:TP391.3

【引证文献】
中国期刊全文数据库 前3条
1 于志良;;云计算现状研究[J];电脑开发与应用;2010年10期
2 陆小丽;何加铭;;基于Map/Reduce的索引数据云存储模型研究[J];宁波大学学报(理工版);2011年03期
3 魏清凤;罗长寿;孙素芬;张峻峰;;云计算在我国农业信息服务中的研究现状与思考[J];中国农业科技导报;2013年04期
中国博士学位论文全文数据库 前2条
1 方雷;基于云计算的土地资源服务高效处理平台关键技术探索与研究[D];浙江大学;2011年
2 陈旭毅;基于索引云的企业搜索引擎实现研究[D];武汉大学;2011年
中国硕士学位论文全文数据库 前10条
1 申志强;基于云计算的IPv6协议应用研究[D];东北财经大学;2010年
2 郭雷风;农业科研云原型系统设计与应用理论研究[D];中国农业科学院;2011年
3 闫金刚;基于云计算的分布式智能语义搜索方法研究[D];电子科技大学;2011年
4 桂许军;基于JavaEE平台与Lucene的信息文档搜索引擎系统的设计与实现[D];西南交通大学;2011年
5 葛辉;基于Nimbus的云计算平台研究及应用[D];成都理工大学;2011年
6 宫彦磊;基于云计算的车载GPS导航终端的研究与设计[D];延边大学;2011年
7 胡晓岽;通信终端网络多媒体资源交互系统研究与实现[D];宁波大学;2010年
8 闻建芬;通信终端个人信息交互系统研究与应用[D];宁波大学;2011年
9 陈鹏飞;基于个性化本体的语义搜索引擎技术的研究与设计[D];河北工业大学;2011年
10 杨洁;云计算在权限管理中的应用研究[D];辽宁工程技术大学;2010年
【同被引文献】
中国期刊全文数据库 前10条
1 胡庆华;Web搜索引擎中Mobile Agent动态路由问题研究[J];安徽大学学报(自然科学版);2003年03期
2 戴立乾;陈娜;;浅议云计算时代下GIS的发展[J];安徽农业科学;2009年31期
3 丁岳强;唐林;赵新兵;肖波;张中波;;基于PDA的人工增雨火箭车载终端的设计与实现[J];安徽农业科学;2010年25期
4 李光达;郑怀国;谭翠萍;邱琳;赵静娟;;基于云计算的农业信息服务研究[J];安徽农业科学;2011年27期
5 武旭,须德;基于向量空间模型的文本自动分类系统的研究与实现[J];北方交通大学学报;2003年02期
6 李文君;岳曾敬;;基于嵌入式Linux电子地图系统的研究[J];兵工自动化;2008年04期
7 邓志鸿,唐世渭,张铭,杨冬青,陈捷;Ontology研究综述[J];北京大学学报(自然科学版);2002年05期
8 胡健;杨炳儒;宋泽锋;钱榕;;基于非结构化数据挖掘结构模型的Web文本聚类算法[J];北京科技大学学报;2008年02期
9 王茜,彭中,刘莉;一种基于自适应阈值的图像分割算法[J];北京理工大学学报;2003年04期
10 冯仲科,游晓斌,任谊群;基于3S技术的森林资源与环境监测系统构想[J];北京林业大学学报;2001年04期
中国重要会议论文全文数据库 前6条
1 周静;周海芳;唐玉华;;多模遥感图像高精度配准并行算法研究与实现[A];图像图形技术研究与应用2009——第四届图像图形技术与应用学术会议论文集[C];2009年
2 李盛韬;吴丽辉;于满泉;潘文锋;余智华;王斌;程学旗;;主题Web信息采集的研究与设计[A];语言计算与基于内容的文本处理——全国第七届计算语言学联合学术会议论文集[C];2003年
3 李应兴;付婷;李勇;;基于LUCENE的藏文信息检索的研究与应用[A];民族语言文字信息技术研究——第十一届全国民族语言文字信息学术研讨会论文集[C];2007年
4 朱鉴;张建;李淼;强静;杨攀;;面向民族语言信息处理的汉语分词方法[A];民族语言文字信息技术研究——第十一届全国民族语言文字信息学术研讨会论文集[C];2007年
5 孙宏纲;陆余良;;基于二元切分的互联网新闻主题词自动提取研究[A];第三届全国信息检索与内容安全学术会议论文集[C];2007年
6 陈磊;茹立云;马少平;;基于用户日志挖掘的搜索引擎广告效果分析[A];第四届全国学生计算语言学研讨会会议论文集[C];2008年
中国重要报纸全文数据库 前2条
1 于露;[N];电子资讯时报;2008年
2 中国科学院计算所 李国杰;[N];计算机世界;2001年
中国博士学位论文全文数据库 前10条
1 吴吉义;基于DHT的开放对等云存储服务系统研究[D];浙江大学;2011年
2 杨晓蓉;分布式农业科技信息共享关键技术研究与应用[D];中国农业科学院;2011年
3 范昕炜;支持向量机算法的研究及其应用[D];浙江大学;2003年
4 韩琼;土地管理信息化方案与策略研究[D];中国地质大学;2003年
5 陈治平;智能搜索引擎理论与应用研究[D];湖南大学;2003年
6 窦文;信任敏感的P2P拓扑构造及其相关技术研究[D];国防科学技术大学;2003年
7 侯孟书;基于P2P的分布式存储及其相关技术研究[D];电子科技大学;2005年
8 余传明;基于本体的语义信息系统研究[D];武汉大学;2005年
9 钱晓东;基于神经网络等技术的数据与文本聚分类研究[D];天津大学;2005年
10 王进;基于本体的语义信息检索研究[D];中国科学技术大学;2006年
中国硕士学位论文全文数据库 前10条
1 陈建云;基于UML公共气象服务调查评估系统的设计与实现[D];南京信息工程大学;2011年
2 郭雷风;农业科研云原型系统设计与应用理论研究[D];中国农业科学院;2011年
3 余堃;湘江流域重金属水环境污染团跟踪模拟与预警系统的研究与实现[D];中南大学;2011年
4 卢凡;基于领域本体的主题爬虫系统研究与实现[D];电子科技大学;2011年
5 郑小波;基于语义的主题搜索引擎研究[D];安徽大学;2011年
6 潘胜一;基于倒排索引的压缩算法性能研究[D];杭州电子科技大学;2009年
7 程苗;云计算技术在web日志挖掘中的应用研究[D];中国科学技术大学;2011年
8 乔冬梅;搜索引擎现状与发展研究[D];郑州大学;2002年
9 史军;帽儿山地区森林资源信息管理及共享的GIS研究[D];东北林业大学;2002年
10 李歆海;基于JXTA的P2P搜索网络研究[D];浙江大学;2003年
【二级引证文献】
中国期刊全文数据库 前10条
1 王晓倩;马姜云;朱毅;郭芯汝;;云计算:图书馆的机遇与挑战[J];电脑知识与技术;2012年16期
2 林德根;梁勤欧;;云GIS的内涵与研究进展[J];地理科学进展;2012年11期
3 张栋海;韩丽华;肖雄兵;刘晖;汤晟佳;郑红艳;;导航地图发展现状和趋势分析[J];地理信息世界;2013年02期
4 杨汝洁;杨云江;;基于私有云服务的水资源管理系统的基础架构设计[J];贵州大学学报(自然科学版);2013年03期
5 朱琛刚;丁佳佳;;分布式数据库的浅析及其在江苏有线电子营业厅中的应用[J];中国数字电视;2013年10期
6 吴珍珍;朱峰;;云计算在数字湖南建设中的应用研究[J];电子技术与软件工程;2013年23期
7 方少卿;周剑;张明新;;基于Map/Reduce的改进选择算法在云计算的Web数据挖掘中的研究[J];计算机应用研究;2013年02期
8 魏清凤;罗长寿;孙素芬;张峻峰;;云计算在我国农业信息服务中的研究现状与思考[J];中国农业科技导报;2013年04期
9 田凤宾;陈伊娜;;三维全景云GIS服务平台的构建与应用[J];信息通信;2013年07期
10 王冬艳;成彬;敦冬梅;羊红光;;科研信息采集整合系统研究[J];河北省科学院学报;2013年04期
中国博士学位论文全文数据库 前6条
1 曾志;云格环境下海量高分遥感影像资源与服务高效调配研究[D];浙江大学;2012年
2 孙伟;林业资源信息云计算服务体系研究[D];中国林业科学研究院;2012年
3 胡宜敏;农业垂直搜索引擎语义化若干问题的研究与实现[D];中国科学技术大学;2012年
4 杨国才;农业农村信息化云服务平台集成关键技术研究[D];西南大学;2012年
5 霍旭光;基于云计算的大规模地形数据处理方法的研究[D];中国地质大学(北京);2013年
6 李刚;黑龙江省国土资源信息数据高效利用与服务研究[D];东北农业大学;2013年
中国硕士学位论文全文数据库 前10条
1 王军;数据归档与信息检索系统的研究与实现[D];太原理工大学;2012年
2 赵长欣;基于数字版权唯一标识符解析系统的设计与实现[D];北方工业大学;2012年
3 王续;云计算环境下的知识产权问题研究[D];山西大学;2012年
4 李珺;林业信息共享中的云计算应用研究[D];中南林业科技大学;2012年
5 罗希;基于Models-3/CMAQ的空气质量预报方法研究[D];陕西师范大学;2012年
6 王鹏;基础设施云关键算法研究与实现[D];西北大学;2012年
7 陆小丽;基于云计算的移动智能终端搜索引擎研究[D];宁波大学;2012年
8 黄勇;基于S3C6410嵌入式手持监视终端的设计[D];南京理工大学;2013年
9 袁凯;云计算环境下的监控系统设计与实现[D];华中科技大学;2012年
10 董志伟;微波遥感数据管理平台设计与实现[D];电子科技大学;2012年
【相似文献】
中国期刊全文数据库 前10条
1 肖鹏;;云计算对图书馆事业的双重影响[J];图书馆学研究;2009年08期
2 李永楠;李德忠;;浅谈云计算优势、应用及发展[J];中国新技术新产品;2011年03期
3 张冬青;;云计算对未来电子商务发展的影响[J];学术交流;2010年04期
4 倪靖;;云计算在Web结构挖掘算法中的运用研究[J];信息与电脑(理论版);2010年10期
5 杨秋杰;;云计算的核心技术——粒度计算[J];信息安全与技术;2010年08期
6 魏民;;云计算:IT服务的优化大师[J];中国教育技术装备;2011年18期
7 白才进;王红;;建构图书馆的“云”时代[J];图书情报工作;2009年23期
8 张继刚;搜索引擎使用技巧[J];网络与信息;1999年09期
9 ;关键词搜索[J];每周电脑报;2000年38期
10 陈冰;;饿狼一样的网站提交工具——“提交饿狼”[J];科学之友;2000年07期
中国重要会议论文全文数据库 前10条
1 彭轲;廖闻剑;;浅析搜索引擎[A];中国通信学会第五届学术年会论文集[C];2008年
2 李丹;;如何利用搜索引擎查找中医药信息[A];中国中医药信息研究会第二届理事大会暨学术交流会议论文汇编[C];2003年
3 邓长寿;郭景峰;杨焱林;邓安远;;下一代Web搜索引擎初探[A];第十八届全国数据库学术会议论文集(研究报告篇)[C];2001年
4 维尼拉·木沙江;吐尔洪·吾司曼;;维、哈、柯文搜索引擎中网页爬行器的设计与实现[A];少数民族青年自然语言处理技术研究与进展——第三届全国少数民族青年自然语言信息处理、第二届全国多语言知识库建设联合学术研讨会论文集[C];2010年
5 汤薇;曾艳;;构建校园网搜索引擎必要性分析[A];广西计算机学会2008年年会论文集[C];2008年
6 姚树宇;赵少东;;一种使用分布式技术的搜索引擎[A];2005年全国开放式分布与并行计算学术会议论文集[C];2005年
7 倪俊峰;;基于黄页搜索引擎的关键字排名广告系统的设计与实现[A];2005年中国索引学会年会暨学术研讨会论文集[C];2005年
8 张怡;查贵庭;;SEO在信息服务中的应用研究[A];2010年中国索引学会年会暨学术研讨会论文集[C];2010年
9 陈援非;何哲;朱珍民;;基于普适计算的个性化搜索技术[A];第二届和谐人机环境联合学术会议(HHME2006)——第2届中国普适计算学术会议(PCC'06)论文集[C];2006年
10 杨萌;李春丽;朱明;;网络搜索技术下的编辑工作[A];学报编辑论丛(第十一集)[C];2003年
中国重要报纸全文数据库 前10条
1 李一鑫;搜索排名的红与黑[N];财经时报;2007年
2 周文林;搜狗3.0能否撼动搜索市场[N];经济参考报;2007年
3 惠正一;比尔·盖茨:微软不怕Google[N];第一财经日报;2005年
4 赛迪顾问股份有限公司互联网与电子商务咨询中心 常燕杰;搜索,还是门户[N];中国计算机报;2005年
5 陈珊;浙江移动推出手机搜索引擎服务[N];人民邮电;2005年
6 赵法忠;搜索引擎还需悠着点[N];中国经营报;2005年
7 金朝力;搜索引擎火拼搜索质量[N];北京商报;2006年
8 本报记者  赵晓辉 孟昭丽;搜索引擎驶入“避风港”[N];中国证券报;2006年
9 孙琎;搜索引擎惊喜侵权官司止于“避风港”?[N];第一财经日报;2006年
10 姜蕊;问天下谁识搜索?[N];中国高新技术产业导报;2006年
中国博士学位论文全文数据库 前10条
1 岑荣伟;基于用户行为分析的搜索引擎评价研究[D];清华大学;2010年
2 李群;主题搜索引擎聚类算法的研究[D];北京林业大学;2011年
3 苏君华;面向搜索引擎的技术接受模型研究[D];南京大学;2011年
4 刘佐达;分布协作式搜索引擎模型及算法研究[D];清华大学;2011年
5 陈旭毅;基于索引云的企业搜索引擎实现研究[D];武汉大学;2011年
6 郭眈;中文互联网视频搜索引擎系统策略研究[D];北京交通大学;2012年
7 王镠璞;基于用户体验的互联网搜索引擎医学信息检索可用性评估研究[D];吉林大学;2010年
8 李莎莎;面向搜索引擎的自然语言处理关键技术研究[D];国防科学技术大学;2011年
9 郑文良;基于简单本体的农业P2P搜索引擎关键技术研究[D];沈阳农业大学;2013年
10 白玉琪;空间信息搜索引擎研究[D];中国科学院研究生院(遥感应用研究所);2003年
中国硕士学位论文全文数据库 前10条
1 张建梁;基于云计算的语义搜索引擎研究[D];复旦大学;2009年
2 薛云;Internet上元搜索引擎的研究与设计[D];太原理工大学;2003年
3 王春花;基于Nutch的农业搜索引擎检索结果排序策略的研究[D];西北农林科技大学;2010年
4 李雷;基于Nutch的农业信息搜索引擎实现和优化[D];吉林大学;2011年
5 董晨;基于模糊聚类的个性化搜索引擎的研究[D];福州大学;2005年
6 封俊;基于Hadoop的分布式搜索引擎研究与实现[D];太原理工大学;2010年
7 李浩;分布式教育网信息检索系统的研究和实现[D];华南理工大学;2010年
8 尉建兴;基于Lucene搜索引擎的研究与应用[D];太原理工大学;2011年
9 李建平;智能化WEB信息搜索引擎的研究与实现[D];大庆石油学院;2003年
10 田生伟;基于涉农词典的搜索引擎的研究与实践[D];新疆大学;2004年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026