收藏本站
《新疆大学》 2004年
收藏 | 手机打开
二维码
手机客户端打开本文

基于涉农词典的搜索引擎的研究与实践

田生伟  
【摘要】:随着计算机技术和Internet网络技术的飞速发展,人们对信息的获取已经从原 始的手工阶段发展到现在的通过计算机网络获取。当今的网络时代,网络的信息 量不到一年就翻一翻,这些资源构成了烟波浩淼的信息海洋。 这一切推动了搜索引擎技术的产生和发展。搜索引擎是一种以Internet网络上 的资源为对象,经过采集分析后,向用户提供信息检索的服务系统。利用搜索引 擎,人们可以快速准确地从网络上检索到自己关心的信息。据中国互联网络信息 中心统计,目前搜索引擎是仅次于电子邮件的第二大Internet的应用。 当前,在Internet网络上被广泛使用的搜索引擎有很多,各有特点和优势。例 如:美国的google、我国的baidu等。 我国的涉农信息的传播手段相对发达国家比较落后,涉农信息获取比较困难, 该现状制约了涉农市场的发展。因此研究和开发基于涉农信息的信息获取技术是 很有必要的。 本文介绍了搜索引擎技术的起源、发展、现状和新的发展趋势,阐述了搜索 引擎的一般工作原理和常用的技术,并在此基础之上构建了基于涉农词典的搜索 引擎模型。 论文完成的主要工作有:结合和分析现有技术,阐述了基于涉农词典的搜索 引擎的一般原理。以基于涉农词典的搜索引擎为原型,给出了数据采集、分析索 引、检索子系统的模型,通过对该系统的研究与实践,提出和设计了一些改进和 优化的方案,为今后系统的进一步研究和完善打下了基础。具体工作有: 对于数据采集子系统,给出了基本体系结构,介绍了网络机器人从网络采集 数据的一般过程;在实践时,对于采集、解析和索引模块工作的速度不匹配的现 象,设计了反馈平衡调节自适应机予以解决,达到了充分利用计算机资源,协调平 衡采集、解析和索引模块工作的目的。 WP=3 对于分析、索引子系统,给出了基本体系结构,介绍了其工作流程;同时, 对涉农词典的组织、基于涉农词典和一般词典的中文分词技术作了论述。为了突 出涉农词典在分词解析的作用,设计了两级词典的分词解析方案;为了保证合法 的新词进入词典来扩充词的数量,设计了基于词频统计方法学习新词汇和词汇清 洗的技术。 对于检索子系统,给出了系统的工作流程;在该系统中,论述了基于知识库 的检索预处理、关联规则的挖掘技术在检索系统中的研究、基于涉农词典的分类 检索、检索排序的加权处理;为了提高检索速度、充分利用计算机资源,设计了 并行检索在检索子系统中的研究与应用模型。 论文的最后阐述了MVC模式,并按照MVC模式的思想设计了搜索引擎的多 层结构的体系结构。
【学位授予单位】:新疆大学
【学位级别】:硕士
【学位授予年份】:2004
【分类号】:TP393.09

【参考文献】
中国期刊全文数据库 前2条
1 陈燕娜,邵志清;基于全文搜索的中文搜索引擎设计技术[J];计算机工程与应用;2002年17期
2 冯永杰,孟宾,翟玉庆;Agent在智能信息检索中的应用研究[J];计算机应用研究;2002年02期
【共引文献】
中国期刊全文数据库 前8条
1 唐培丽,胡明,张勇;基于中文文本主题提取的分词方法研究[J];吉林工程技术师范学院学报;2005年02期
2 杨庆,翟玉庆;一个基于移动Agent的搜索引擎的并行处理架构[J];计算机工程;2003年02期
3 王向星;智能化个性服务在Web上的应用研究[J];计算机与现代化;2003年03期
4 唐培丽;胡明;解飞;刘钢;;全文检索搜索引擎中文信息处理技术研究[J];情报科学;2006年06期
5 何昭青;面向用户的个性化Agent智能搜索系统的设计[J];邵阳学院学报;2003年02期
6 肖秋红;数据挖掘技术在科研信息服务中的应用研究[J];图书馆论坛;2004年01期
7 林强;基于智能Agent的用户个性化检索系统的实现[J];图书馆学研究;2005年05期
8 王向星;智能化个性服务在WEB上的应用研究[J];计算机系统应用;2003年01期
中国博士学位论文全文数据库 前1条
1 李广建;个性化网络信息检索系统的研究与实现[D];中国科学院研究生院(文献情报中心);2002年
中国硕士学位论文全文数据库 前10条
1 李海燕;基于多Agent的智能网络教学系统研究[D];中南大学;2004年
2 吴俊森;维哈柯多语种搜索引擎倒排索引模块的实现[D];新疆大学;2007年
3 江毅铭;专业搜索引擎索引技术的研究与实现[D];北京化工大学;2005年
4 李富萍;基于多Agent的信息搜索引擎技术研究与应用[D];中北大学;2005年
5 宋艳辉;教育资源配送系统中智能化搜索的研究[D];东北师范大学;2005年
6 高雷;网络智能过滤系统的设计与实现[D];广东工业大学;2003年
7 张海燕;基于分词的中文文本自动分类研究与实现[D];湖南大学;2002年
8 尹浩;基于WWW的新闻搜索引擎的设计与实现[D];西南交通大学;2003年
9 汤妹军;基于Agent的信息检索系统的若干问题研究[D];合肥工业大学;2003年
10 乔冰琴;基于XML的智能化Web课件制作模板系统的研究[D];太原理工大学;2002年
【二级参考文献】
中国期刊全文数据库 前3条
1 严威,赵政;开发中文搜索引擎汉语处理的关键技术[J];计算机工程;1999年06期
2 丁承,邵志清;基于字表的中文搜索引擎分词系统的设计与实现[J];计算机工程;2001年02期
3 孙茂松,左正平,黄昌宁;汉语自动分词词典机制的实验研究[J];中文信息学报;2000年01期
【相似文献】
中国期刊全文数据库 前10条
1 顾爱华;赵泉;周塔;彭昱静;卫丽;徐莹莹;邹盛荣;;中文分词技术在搜索引擎中的探讨[J];科技信息;2009年35期
2 张淳晟;郑丽英;;基于XML的搜索引擎倒排索引研究[J];太原科技;2009年01期
3 雷鸣,刘建国,王建勇,陈葆珏;一种基于词典的搜索引擎系统动态更新模型[J];计算机研究与发展;2000年10期
4 陈鑫,常致全;智能化搜索引擎原理及实现[J];计算机应用;2003年S2期
5 陶跃华;赵波;杨秀国;;搜索引擎的文档预处理技术研究[J];计算机科学;2002年07期
6 赵旭;王庆桦;;向LUCENE搜索引擎中加入中文同义词查询[J];科技信息;2011年07期
7 许琦;顾新建;胡恒杰;;一种个性化智能搜索引擎的研究[J];情报学报;2007年04期
8 ;热点[J];互联网天地;2008年09期
9 张继刚;搜索引擎使用技巧[J];网络与信息;1999年09期
10 ;关键词搜索[J];每周电脑报;2000年38期
中国重要会议论文全文数据库 前10条
1 彭轲;廖闻剑;;浅析搜索引擎[A];中国通信学会第五届学术年会论文集[C];2008年
2 李丹;;如何利用搜索引擎查找中医药信息[A];中国中医药信息研究会第二届理事大会暨学术交流会议论文汇编[C];2003年
3 邓长寿;郭景峰;杨焱林;邓安远;;下一代Web搜索引擎初探[A];第十八届全国数据库学术会议论文集(研究报告篇)[C];2001年
4 维尼拉·木沙江;吐尔洪·吾司曼;;维、哈、柯文搜索引擎中网页爬行器的设计与实现[A];少数民族青年自然语言处理技术研究与进展——第三届全国少数民族青年自然语言信息处理、第二届全国多语言知识库建设联合学术研讨会论文集[C];2010年
5 汤薇;曾艳;;构建校园网搜索引擎必要性分析[A];广西计算机学会2008年年会论文集[C];2008年
6 姚树宇;赵少东;;一种使用分布式技术的搜索引擎[A];2005年全国开放式分布与并行计算学术会议论文集[C];2005年
7 倪俊峰;;基于黄页搜索引擎的关键字排名广告系统的设计与实现[A];2005年中国索引学会年会暨学术研讨会论文集[C];2005年
8 张怡;查贵庭;;SEO在信息服务中的应用研究[A];2010年中国索引学会年会暨学术研讨会论文集[C];2010年
9 陈援非;何哲;朱珍民;;基于普适计算的个性化搜索技术[A];第二届和谐人机环境联合学术会议(HHME2006)——第2届中国普适计算学术会议(PCC'06)论文集[C];2006年
10 杨萌;李春丽;朱明;;网络搜索技术下的编辑工作[A];学报编辑论丛(第十一集)[C];2003年
中国重要报纸全文数据库 前10条
1 张韬;网易推自主开发搜索引擎[N];上海证券报;2007年
2 本报记者 唐宋;一本词典见证时代变迁[N];人民日报;2005年
3 Tony;搜索引擎市场集中度升温[N];中国计算机报;2007年
4 洪玉华 冯威 公权 (本报记者 洪玉华 冯威);两岸合编中华大词典 共襄民族共同语[N];中国新闻出版报;2009年
5 本报见习记者 范昕;要不要把“热词”当回事儿?[N];文汇报;2009年
6 李一鑫;搜索排名的红与黑[N];财经时报;2007年
7 周文林;搜狗3.0能否撼动搜索市场[N];经济参考报;2007年
8 惠正一;比尔·盖茨:微软不怕Google[N];第一财经日报;2005年
9 赛迪顾问股份有限公司互联网与电子商务咨询中心 常燕杰;搜索,还是门户[N];中国计算机报;2005年
10 陈珊;浙江移动推出手机搜索引擎服务[N];人民邮电;2005年
中国博士学位论文全文数据库 前10条
1 岑荣伟;基于用户行为分析的搜索引擎评价研究[D];清华大学;2010年
2 李群;主题搜索引擎聚类算法的研究[D];北京林业大学;2011年
3 苏君华;面向搜索引擎的技术接受模型研究[D];南京大学;2011年
4 刘佐达;分布协作式搜索引擎模型及算法研究[D];清华大学;2011年
5 陈旭毅;基于索引云的企业搜索引擎实现研究[D];武汉大学;2011年
6 郭眈;中文互联网视频搜索引擎系统策略研究[D];北京交通大学;2012年
7 王镠璞;基于用户体验的互联网搜索引擎医学信息检索可用性评估研究[D];吉林大学;2010年
8 李莎莎;面向搜索引擎的自然语言处理关键技术研究[D];国防科学技术大学;2011年
9 白玉琪;空间信息搜索引擎研究[D];中国科学院研究生院(遥感应用研究所);2003年
10 吴晓真;英语为源语言词典编纂中的用户友善问题[D];复旦大学;2004年
中国硕士学位论文全文数据库 前10条
1 田生伟;基于涉农词典的搜索引擎的研究与实践[D];新疆大学;2004年
2 薛云;Internet上元搜索引擎的研究与设计[D];太原理工大学;2003年
3 王春花;基于Nutch的农业搜索引擎检索结果排序策略的研究[D];西北农林科技大学;2010年
4 李雷;基于Nutch的农业信息搜索引擎实现和优化[D];吉林大学;2011年
5 董晨;基于模糊聚类的个性化搜索引擎的研究[D];福州大学;2005年
6 封俊;基于Hadoop的分布式搜索引擎研究与实现[D];太原理工大学;2010年
7 李浩;分布式教育网信息检索系统的研究和实现[D];华南理工大学;2010年
8 尉建兴;基于Lucene搜索引擎的研究与应用[D];太原理工大学;2011年
9 李建平;智能化WEB信息搜索引擎的研究与实现[D];大庆石油学院;2003年
10 欧建斌;基于Web挖掘与信息分类的个性化搜索引擎研究[D];暨南大学;2010年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026