收藏本站
《北京化工大学》 2012年
收藏 | 手机打开
二维码
手机客户端打开本文

基于Slor的个性化搜索引擎设计与实现

孙进  
【摘要】:随着Internet(互联网)技术的飞速发展,存在于互联网中的信息量变得越来越巨大。面对如此巨大的信息,如何更加有效的利用这些信息资源,已经成为人们研究主要课题。存在于互联网中的信息来源广泛,通常会以不同的形式存在。对于这种不同来源、不同形式的海量信息,怎样准确地、快速地查找到自己所需要的信息成为我们在使用互联网的时候面临的一个问题。搜索引擎(Search Engine)的出现,从一定程度上缓解了这个问题对人们的困扰。 但是随着生活节奏的不断加快,对于搜索引擎的性能要求不断提升对于搜索效率要求也越来越高,因此如何使用户能够更加快速和准确的检索到自己想要的信息,受到越来越多研究者的关注。个性化搜索引擎就是在这种背景下出现的,它运用个性化相关的技术,实现搜索结果的个性化。本文系统中使用建立用户模型的方法,通过对用户信息的采集,提取用户相关信息的关键词,利用TF-IDF算法,得到用户关键词的权重值,利用关键字和权重值组成的向量来表示用户模型。本文主要的研究内容包括: 1.基于搜索引擎的工作原理、关键技术和工作流程设计了本文系统中的搜索引擎框架。 2.根据Web Crawler(网络爬虫)和Heritrix(爬虫框架)的原理设计了适合本系统的网络爬虫,并在互联网中进行了网页的抓取。 3.基于开源框架Solr工作的原理建立了本文中所需的索引系统和检索系统。 4.建立用户模型,利用Solr搭建了个性化搜索引擎系统,实验证明本文中的个性化搜索引擎系统较高的提升了搜索结果的准确率,并且更加贴近用户的需求。
【学位授予单位】:北京化工大学
【学位级别】:硕士
【学位授予年份】:2012
【分类号】:TP391.3

【参考文献】
中国期刊全文数据库 前10条
1 于洪波;;中文分词技术研究[J];东莞理工学院学报;2010年05期
2 张剑瑛;;搜索引擎[J];黑龙江科技信息;2010年25期
3 陈燕娜,邵志清;基于全文搜索的中文搜索引擎设计技术[J];计算机工程与应用;2002年17期
4 潘春华,冯太明,武港山;基于移动爬虫的专用Web信息收集系统的设计[J];计算机工程与应用;2003年36期
5 何明;周军;李树友;;语义相似的PageRank改进算法[J];计算机工程与应用;2009年27期
6 张卫丰;徐宝文;周晓宇;许蕾;李东;;Web搜索引擎综述[J];计算机科学;2001年09期
7 王琼;搜索引擎的四大发展趋势[J];农业网络信息;2005年03期
8 王琦;张戈;何婧;;基于Lucene与Heritrix的图书垂直搜索引擎的研究与实现[J];计算机时代;2010年02期
9 汪涛,樊孝忠;链接分析对主题爬虫的改进[J];计算机应用;2004年S2期
10 曾彪;;Solr学术索引应用显身手[J];中国教育网络;2010年10期
中国硕士学位论文全文数据库 前10条
1 蔡宇虹;基于主题的元搜索引擎关键技术研究[D];哈尔滨工程大学;2010年
2 崔顷顷;基于个性化搜索的系统研究与设计[D];北京交通大学;2011年
3 陈凯;搜索引擎有关排序算法研究[D];武汉理工大学;2011年
4 黄卫平;个性化搜索引擎的研究与实现[D];武汉理工大学;2011年
5 王小森;基于Solr的搜索引擎的设计与实现[D];北京邮电大学;2011年
6 李彦辉;基于用户兴趣的个性化搜索引擎研究[D];山西财经大学;2011年
7 蔺继国;基于点击数据分析的个性化搜索引擎研究[D];国防科学技术大学;2010年
8 梁萍;搜索引擎中网络爬虫及结果聚类的研究与实现[D];中国科学技术大学;2011年
9 孟庆鑫;搜索引擎相关技术研究[D];中国科学技术大学;2011年
10 王金花;一种利用本体关联度改进的TF-IDF特征词提取方法[D];河北大学;2011年
【共引文献】
中国期刊全文数据库 前10条
1 朱力平,丰国炳;用基于内容的Web图像搜索引擎设计消防电子化道路水源手册[J];安全与环境学报;2004年03期
2 吴林;张仰森;王璐;;《现代汉语语法信息词典》的概率化改造及其应用[J];北京信息科技大学学报(自然科学版);2011年06期
3 汪洋;;学术搜索引擎的现状及发展趋势[J];重庆工学院学报(社会科学版);2008年10期
4 彭建荣;罗永会;;搜索引擎的基本原理及发展趋势[J];电脑知识与技术;2006年02期
5 王挺;;智能搜索引擎在企业人力资源管理决策支持系统中的应用[J];电脑知识与技术;2010年24期
6 李江;殷之明;;链接分析研究综述[J];大学图书馆学报;2008年02期
7 唐忠;欧旭;;因特网搜索引擎技术原理及发展趋势研究[J];大众科技;2009年01期
8 邱战宏;顾国庆;黄江娓;;搜索引擎——图书馆的新工具[J];电子世界;2012年03期
9 左羽;搜索引擎的原理及技术分析研究[J];福建电脑;2005年08期
10 巩知乐;张德贤;;文本挖掘理论概述[J];福建电脑;2008年09期
中国重要会议论文全文数据库 前1条
1 单铁城;张安妮;马德辉;;基于爬虫改进算法的个性化搜索引擎应用研究[A];战略性新兴产业与科技支撑——2012年山东省科协学术年会论文集[C];2012年
中国博士学位论文全文数据库 前5条
1 陈旭毅;基于索引云的企业搜索引擎实现研究[D];武汉大学;2011年
2 李四明;基于智能Agent的网上农业信息挖掘研究[D];中国农业大学;2003年
3 张亮;面向开放域的中文问答系统问句处理相关技术研究[D];南京理工大学;2006年
4 易高翔;粗糙集在Web挖掘中的应用研究[D];华中科技大学;2006年
5 王春元;公共网络信息系统安全管理的研究[D];合肥工业大学;2009年
中国硕士学位论文全文数据库 前10条
1 徐财应;基于Lucene的搜索引擎技术的研究与改进[D];长春理工大学;2010年
2 刘林;基于语义的元搜索引擎关键技术研究[D];河南工业大学;2010年
3 毛敏芹;对搜索引擎扩充语义信息功能方法研究[D];华东师范大学;2010年
4 王思丽;藏文网页自动发现与采集技术研究[D];西北民族大学;2010年
5 史磊峰;移动垂直搜索系统的研究[D];北京交通大学;2010年
6 李海丰;基于Lucene的企业文档搜索引擎研究与应用[D];中南林业科技大学;2009年
7 汪前秀;基于改进的VSM的不良文本过滤模型研究[D];东北财经大学;2010年
8 刘照然;远程教育中智能答疑系统的研究与实现[D];西安电子科技大学;2010年
9 席敏;基于单汉字索引的全文检索系统的研究与实现[D];西安电子科技大学;2010年
10 吴代文;基于Lucene的二次全文检索系统设计与实现[D];西安电子科技大学;2009年
【二级参考文献】
中国期刊全文数据库 前10条
1 卢效峰,郑权;基于用户行为分析的搜索引擎模型[J];北方工业大学学报;2004年03期
2 龚汉明,周长胜;汉语分词技术综述[J];北京机械工业学院学报;2004年03期
3 伍清霞;数字化参考咨询几种常用搜索引擎的比较[J];国家图书馆学刊;2005年02期
4 汪涛,樊孝忠,顾益军,刘林;基于概念分析的主题爬虫设计[J];北京理工大学学报;2004年10期
5 顾益军,樊孝忠,王建华,汪涛,黄维金;中文停用词表的自动选取[J];北京理工大学学报;2005年04期
6 许云,樊孝忠,张锋;基于知网的语义相关度计算[J];北京理工大学学报;2005年05期
7 李红梅;丁振国;周水生;周利华;;元搜索引擎结果合成算法[J];北京邮电大学学报;2008年05期
8 文庭孝;汉语自动分词研究进展[J];图书与情报;2005年05期
9 华薇娜;;搜索引擎的最新进展述要[J];图书与情报;2009年06期
10 赫枫龄,左万利;利用超链接信息改进网页爬行器的搜索策略[J];吉林大学学报(信息科学版);2005年01期
中国博士学位论文全文数据库 前3条
1 李强;基于本体论的个性化和社会化元搜索引擎的研究[D];浙江大学;2006年
2 蔡柯柯;基于查询特征上下文的检索模型研究[D];浙江大学;2007年
3 陈红涛;基于搜索日志的用户行为研究及应用[D];北京邮电大学;2008年
中国硕士学位论文全文数据库 前10条
1 徐财应;基于Lucene的搜索引擎技术的研究与改进[D];长春理工大学;2010年
2 张俭恭;扩展元搜索引擎(EMSE)的系统设计[D];中国科学院研究生院(文献情报中心);2002年
3 赵志荣;个性化搜索引擎的研究、设计与实现[D];四川大学;2002年
4 刘妮娜;Web数据挖掘和个性化搜索引擎研究[D];浙江大学;2005年
5 张校乾;基于Lucene的全文检索系统的研究与应用[D];大连理工大学;2005年
6 刘雪芹;单汉字全文检索技术研究[D];河北工业大学;2005年
7 程传鹏;基于分类的智能信息检索研究与实现[D];云南师范大学;2005年
8 张巍;基于PageRank算法的搜索引擎优化策略研究[D];四川大学;2005年
9 张东方;基于相关反馈的人机对话搜索引擎系统[D];大连理工大学;2006年
10 张波;个性化Web搜索系统研究[D];燕山大学;2006年
【相似文献】
中国期刊全文数据库 前10条
1 李平;;浅析搜索引擎[J];科协论坛(下半月);2009年04期
2 张继刚;搜索引擎使用技巧[J];网络与信息;1999年09期
3 ;关键词搜索[J];每周电脑报;2000年38期
4 陈冰;;饿狼一样的网站提交工具——“提交饿狼”[J];科学之友;2000年07期
5 许斗;从Google看新一代搜索引擎的发展趋向[J];芜湖职业技术学院学报;2001年01期
6 周毅华;从搜索引擎的分类看其应用技巧[J];图书馆理论与实践;2002年06期
7 邹小筑;搜索引擎的选择与使用技巧[J];图书馆学研究;2002年05期
8 林燕;Google搜索引擎的搜索功能与使用技巧[J];河北科技图苑;2003年05期
9 林中;GOOGLE搜索引擎的关键词检索[J];中国信息导报;2003年03期
10 封剑待封喉;吸星大法“搜”天下 笑傲网络任我行——搜索引擎绝对专题[J];网络与信息;2003年07期
中国重要会议论文全文数据库 前10条
1 彭轲;廖闻剑;;浅析搜索引擎[A];中国通信学会第五届学术年会论文集[C];2008年
2 李丹;;如何利用搜索引擎查找中医药信息[A];中国中医药信息研究会第二届理事大会暨学术交流会议论文汇编[C];2003年
3 邓长寿;郭景峰;杨焱林;邓安远;;下一代Web搜索引擎初探[A];第十八届全国数据库学术会议论文集(研究报告篇)[C];2001年
4 维尼拉·木沙江;吐尔洪·吾司曼;;维、哈、柯文搜索引擎中网页爬行器的设计与实现[A];少数民族青年自然语言处理技术研究与进展——第三届全国少数民族青年自然语言信息处理、第二届全国多语言知识库建设联合学术研讨会论文集[C];2010年
5 汤薇;曾艳;;构建校园网搜索引擎必要性分析[A];广西计算机学会2008年年会论文集[C];2008年
6 姚树宇;赵少东;;一种使用分布式技术的搜索引擎[A];2005年全国开放式分布与并行计算学术会议论文集[C];2005年
7 倪俊峰;;基于黄页搜索引擎的关键字排名广告系统的设计与实现[A];2005年中国索引学会年会暨学术研讨会论文集[C];2005年
8 张怡;查贵庭;;SEO在信息服务中的应用研究[A];2010年中国索引学会年会暨学术研讨会论文集[C];2010年
9 陈援非;何哲;朱珍民;;基于普适计算的个性化搜索技术[A];第二届和谐人机环境联合学术会议(HHME2006)——第2届中国普适计算学术会议(PCC'06)论文集[C];2006年
10 杨萌;李春丽;朱明;;网络搜索技术下的编辑工作[A];学报编辑论丛(第十一集)[C];2003年
中国重要报纸全文数据库 前10条
1 李一鑫;搜索排名的红与黑[N];财经时报;2007年
2 周文林;搜狗3.0能否撼动搜索市场[N];经济参考报;2007年
3 惠正一;比尔·盖茨:微软不怕Google[N];第一财经日报;2005年
4 赛迪顾问股份有限公司互联网与电子商务咨询中心 常燕杰;搜索,还是门户[N];中国计算机报;2005年
5 陈珊;浙江移动推出手机搜索引擎服务[N];人民邮电;2005年
6 赵法忠;搜索引擎还需悠着点[N];中国经营报;2005年
7 金朝力;搜索引擎火拼搜索质量[N];北京商报;2006年
8 本报记者  赵晓辉 孟昭丽;搜索引擎驶入“避风港”[N];中国证券报;2006年
9 孙琎;搜索引擎惊喜侵权官司止于“避风港”?[N];第一财经日报;2006年
10 姜蕊;问天下谁识搜索?[N];中国高新技术产业导报;2006年
中国博士学位论文全文数据库 前10条
1 岑荣伟;基于用户行为分析的搜索引擎评价研究[D];清华大学;2010年
2 李群;主题搜索引擎聚类算法的研究[D];北京林业大学;2011年
3 苏君华;面向搜索引擎的技术接受模型研究[D];南京大学;2011年
4 刘佐达;分布协作式搜索引擎模型及算法研究[D];清华大学;2011年
5 陈旭毅;基于索引云的企业搜索引擎实现研究[D];武汉大学;2011年
6 郭眈;中文互联网视频搜索引擎系统策略研究[D];北京交通大学;2012年
7 王镠璞;基于用户体验的互联网搜索引擎医学信息检索可用性评估研究[D];吉林大学;2010年
8 李莎莎;面向搜索引擎的自然语言处理关键技术研究[D];国防科学技术大学;2011年
9 郑文良;基于简单本体的农业P2P搜索引擎关键技术研究[D];沈阳农业大学;2013年
10 白玉琪;空间信息搜索引擎研究[D];中国科学院研究生院(遥感应用研究所);2003年
中国硕士学位论文全文数据库 前10条
1 薛云;Internet上元搜索引擎的研究与设计[D];太原理工大学;2003年
2 王春花;基于Nutch的农业搜索引擎检索结果排序策略的研究[D];西北农林科技大学;2010年
3 李雷;基于Nutch的农业信息搜索引擎实现和优化[D];吉林大学;2011年
4 董晨;基于模糊聚类的个性化搜索引擎的研究[D];福州大学;2005年
5 封俊;基于Hadoop的分布式搜索引擎研究与实现[D];太原理工大学;2010年
6 李浩;分布式教育网信息检索系统的研究和实现[D];华南理工大学;2010年
7 尉建兴;基于Lucene搜索引擎的研究与应用[D];太原理工大学;2011年
8 李建平;智能化WEB信息搜索引擎的研究与实现[D];大庆石油学院;2003年
9 田生伟;基于涉农词典的搜索引擎的研究与实践[D];新疆大学;2004年
10 欧建斌;基于Web挖掘与信息分类的个性化搜索引擎研究[D];暨南大学;2010年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026