收藏本站
《华中科技大学》 2007年
收藏 | 手机打开
二维码
手机客户端打开本文

新闻垂直搜索引擎的设计

文斌  
【摘要】: 我们现在所处的时代是一个信息爆炸的时代,人们在享受互联网带来的便利的同时,却面临着一个如何在如此海量的内容中准确,快捷地找到自己所需要的信息问题,由此互联网的搜索引擎应运而生。其中,搜索引擎的蜘蛛程序如何可以适应各色各样的网页,分词的效率成为影响搜索引擎优劣的重要标准之一。因此,建立满足各色网页的蜘蛛,高效分词程序并建立的快速索引对搜索引擎快速开发,性能优化都有重要意义。 本文先从垂直搜索引擎的概念,原理,组成,工作流程等方面研究和分析入手。对比其他种类的搜索引擎的优劣,指出垂直搜索引擎的市场和发展方向。然后,将通过网络蜘蛛,分词模块和索引模块三个方面,多角度的对垂直搜索引擎分析和设计,并结合实际的需求,做适当的改进。其中,蜘蛛部分可以对各主流门户网站的新闻,博客和论坛进行下载,解析并规范化;分词部分可以只针对特定关键字进行分词,减少系统在此方面的开销,为索引作准备;最后,索引部分根据分词信息完成搜索引擎的索引建立和检索工作。 通过本文的分析,在建立搜索蜘蛛模块时采用了逐步优化的方法,使得在以后的软件开发和维护过程中,蜘蛛模块在解析新网页方面开发会越来越高效,而且关键词库的升级也会相对简单,随之而来的是分词效率变高,建立索引的速度也会提高。对以后扩展功能,缩短开发周期,适应新需求提供了坚实的基础。
【学位授予单位】:华中科技大学
【学位级别】:硕士
【学位授予年份】:2007
【分类号】:TP391.3

【相似文献】
中国期刊全文数据库 前10条
1 顾鹏尧;;让搜索引擎更好地服务于教育教学[J];科学24小时;2003年Z1期
2 陈新颜;垂直搜索引擎辨析[J];现代情报;2004年09期
3 胡文胜;;垂直搜索助号码百事通与商务领航[J];每周电脑报;2006年32期
4 胡洁;丁宁;关静;曹福年;张磊;;基于“PUBMED+PDF”的医学垂直搜索引擎的实践[J];信息系统工程;2009年05期
5 一林;;垂直搜索:前进路上的喜与忧[J];互联网天地;2010年02期
6 牟思;;基于垂直搜索引擎的学校网站的研究与建设[J];中国教育技术装备;2011年21期
7 田野;垂直搜索火热为哪般[J];中国计算机用户;2005年37期
8 胡文胜;;垂直搜索助号码百事通与商务领航[J];每周电脑报;2006年31期
9 边凯;;你会搜索吗?[J];中国计算机用户;2007年23期
10 宿建光;;指点通:移动垂直搜索的创新者[J];通信世界;2007年03期
中国重要会议论文全文数据库 前3条
1 王上;于海;王钲旋;;Deep Web垂直搜索引擎设计与实现[A];第26届中国数据库学术会议论文集(B辑)[C];2009年
2 林欢欢;王文杰;史忠植;;移动环境下垂直搜索引擎[A];第三届全国信息检索与内容安全学术会议论文集[C];2007年
3 王旭;杜军平;;质检总局互联网舆情监控系统中聚焦爬虫的研究[A];中国电子学会第十七届信息论学术年会论文集[C];2010年
中国重要报纸全文数据库 前10条
1 电子工业出版社 董娅 工业和信息化部电子科学技术情报研究所 周峻松;用开源软件建垂直搜索引擎[N];计算机世界;2010年
2 王艳;垂直搜索引擎市场看好[N];中国旅游报;2000年
3 赛迪网 方刚;不只是网站才垂直[N];中国计算机报;2000年
4 王靖;赛迪网推出垂直搜索引擎[N];人民日报海外版;2000年
5 记者 王浒;“去哪儿”旅行网完成第三轮1500万美元融资[N];中国旅游报;2009年
6 本报记者 王宏;搜索引擎 收费能催化市场吗[N];中国计算机报;2001年
7 徐瑾 张玉;市场潜力巨大 价值亟待挖掘[N];人民邮电;2009年
8 本报记者 王晓雁;垂直搜索引擎著作权之争未破题[N];法制日报;2009年
9 记者 吴德群;热门关键词两天抢注一空[N];深圳特区报;2009年
10 本报记者 胡钰;“去哪儿”网撬动在线旅游市场格局[N];华夏时报;2009年
中国博士学位论文全文数据库 前4条
1 王晔;垂直搜索引擎若干问题研究[D];复旦大学;2011年
2 吴羽;面向时间敏感对象的垂直搜索引擎关键技术研究[D];浙江大学;2011年
3 胡宜敏;农业垂直搜索引擎语义化若干问题的研究与实现[D];中国科学技术大学;2012年
4 李传席;基于本体的自适应Web信息抽取方法研究[D];中国科学技术大学;2012年
中国硕士学位论文全文数据库 前10条
1 文斌;新闻垂直搜索引擎的设计[D];华中科技大学;2007年
2 李春燕;企业信息垂直搜索引擎的研究与实现[D];中国地质大学(北京);2010年
3 齐鹏;垂直搜索引擎分类索引系统的设计与实现[D];大连海事大学;2010年
4 张楠;面向汽车主题的垂直搜索引擎研究与实现[D];西南交通大学;2010年
5 陈向东;宠物用品垂直搜索引擎研究与设计[D];西北农林科技大学;2010年
6 周佳庆;实时垂直搜索引擎数据抓取调度研究[D];浙江大学;2010年
7 华大年;手机产品信息垂直搜索引擎系统设计与开发[D];武汉理工大学;2011年
8 薛萍;基于教育领域的垂直搜索引擎的研究与实现[D];天津师范大学;2011年
9 冯效栋;垂直搜索引擎技术在网络舆情巡控中的研究与应用[D];中国海洋大学;2010年
10 张赢;个性化多媒体资源垂直搜索引擎技术研究[D];华东交通大学;2009年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026