收藏本站
《西南交通大学》 2004年
收藏 | 手机打开
二维码
手机客户端打开本文

基于Java的新闻搜索引擎的设计与实现

常晓燕  
【摘要】:作为除电视、报纸、广播之外的第四大媒体,互联网已经成为人们获取新闻信息的主要来源。快速的从众多新闻网站中找到所需新闻,是新闻搜索引擎的基本任务。有重大事件发生时,如何使客户及时得到最新消息,也是当今新闻服务所关心的问题。对于高速列车来说,开发数字高速铁路旅客信息系统,让旅客享受移动式的全新的数字化服务是改善服务软环境的措施之一。本文结合搜索、数据库、网络等多种技术,实现了用于高速铁路旅客信息系统的新闻搜索引擎,该引擎为高速列车提供实时新闻。 本文从搜索引擎技术开始,阐述了搜索引擎的基本原理、所采用的相关技术,进而引出专题搜索引擎,交代了为提高专题性所采取的几种方法。最后作为专题性搜索引擎的一种,重点阐述了新闻搜索引擎,分析了网页文档半结构化的数据特点以及各大新闻网站对新闻网页的布置特点,并对新闻网页的获取、新闻内容提取算法作了详尽的论述。该引擎采用robot新闻搜索程序从Internet上取回新闻放入数据库中,由用户端程序为用户提供分类新闻、关键词搜索功能。用户可以进行个性化设置,限定新闻的刷新频率,新闻源范围。程序根据用户的设置定时刷新新闻。 该新闻搜索引擎经过测试,满足高速铁路旅客信息系统的需求,达到预期的设计效果,对我国高速铁路数字化具有一定的现实意义。同时也为其他相关项目的设计提供了参考。
【学位授予单位】:西南交通大学
【学位级别】:硕士
【学位授予年份】:2004
【分类号】:TP311.52

【引证文献】
中国期刊全文数据库 前1条
1 刘文浩;谢韬;吴进;;基于Heritrix和HTMLParser的网页商品信息提取的研究[J];计算机光盘软件与应用;2012年08期
中国硕士学位论文全文数据库 前7条
1 张立;文本搜索引擎的探究与设计[D];华南理工大学;2011年
2 于景茹;基于Lucene的职位垂直搜索引擎的研究与实现[D];郑州大学;2011年
3 卢毓亮;面向Web站点的搜索引擎研究与实现[D];西安理工大学;2007年
4 张书江;基于Java的垂直搜索引擎的设计与实现[D];安徽理工大学;2009年
5 刘海峰;垂直搜索引擎的研究与实现[D];大连理工大学;2009年
6 张楠;面向汽车主题的垂直搜索引擎研究与实现[D];西南交通大学;2010年
7 赵联冠;分布式信息检索引擎的分析与实现[D];华东师范大学;2010年
【参考文献】
中国期刊全文数据库 前10条
1 戴先宇,王明文,吴水秀,张石林;带参数的搜索引擎[J];江西师范大学学报(自然科学版);2002年04期
2 康桂英,刘春平;新一代中文智能搜索引擎研究[J];东南大学学报(哲学社会科学版);2002年S1期
3 孙莉苹,张永奎;网上信息检索中BOT站点爬行方法[J];电脑开发与应用;2001年10期
4 陈新明,钟涛,万钧,吴杰,张世永;WWW搜索引擎的数据采集技术[J];计算机工程与应用;2002年07期
5 陈敏,曹阳,刘翀;一种WWW搜索引擎的设计与实现[J];计算机工程与应用;2002年07期
6 陈燕娜,邵志清;基于全文搜索的中文搜索引擎设计技术[J];计算机工程与应用;2002年17期
7 阳爱民,杨岳湘,瞿国平;网络机器人的分布性和可控性设计及研究[J];计算机工程;2000年06期
8 张汛涞;搜索引擎的设计剖析[J];计算机工程与科学;2002年04期
9 殷建平;汉语自动分词方法[J];计算机工程与科学;1998年03期
10 蒋晓冬,金宇晖,谈征;网上高质量智能信息检索系统的实现[J];计算机工程与科学;1999年04期
中国硕士学位论文全文数据库 前2条
1 陈小宁;Web信息资源获取技术的研究与实现[D];暨南大学;2001年
2 刘向辉;专题性智能搜索引擎的研究与实现[D];昆明理工大学;2001年
【共引文献】
中国期刊全文数据库 前10条
1 孙素芬;罗长寿;张峻峰;于峰;张树亮;;农业信息资源整合系统研究与应用[J];安徽农业科学;2007年22期
2 汪斌;张云伟;刘健;陈晶;;一种面向农业信息主题网络爬虫的设计[J];安徽农业科学;2009年20期
3 赵晓凡;胡顺义;;基于正向最大匹配的汉语分词[J];安阳师范学院学报;2010年05期
4 周玉丰;;“3D机械制图”网络教学多媒体数据库系统开发[J];安阳工学院学报;2010年06期
5 卢效峰,郑权;基于用户行为分析的搜索引擎模型[J];北方工业大学学报;2004年03期
6 马志强;周长胜;丁维;杨娜;;校园网搜索引擎的研究与实现[J];北京机械工业学院学报;2007年01期
7 耿骞,刘畅;分布式检索系统及其体系结构[J];国家图书馆学刊;2004年02期
8 汪涛,樊孝忠,顾益军,刘林;基于概念分析的主题爬虫设计[J];北京理工大学学报;2004年10期
9 赵明臻;网络信息检索障碍及排除策略探论[J];图书与情报;2005年01期
10 文庭孝;汉语自动分词研究进展[J];图书与情报;2005年05期
中国重要会议论文全文数据库 前10条
1 杨卫明;;独立式搜索引擎原理及存在问题分析[A];2008年计算机应用技术交流会论文集[C];2008年
2 李慧敏;邬群勇;王钦敏;;Robot技术在空间信息服务搜索中的应用研究[A];中国地理信息系统协会第四次会员代表大会暨第十一届年会论文集[C];2007年
3 姚树宇;赵少东;;一种使用分布式技术的搜索引擎[A];2005年全国开放式分布与并行计算学术会议论文集[C];2005年
4 邹永斌;陈兴蜀;王文贤;;一个高性能Web资源收集系统的设计与实现[A];2008'中国信息技术与应用学术论坛论文集(二)[C];2008年
5 刘项洋;侯整风;;ASP技术在网络教学系统中的应用[A];全国第十五届计算机科学与技术应用学术会议论文集[C];2003年
6 鲁娆;;基于Web的图像数据库系统的设计与实现[A];探索创新交流--中国航空学会青年科技论坛文集[C];2004年
7 吴春胤;陈联诚;俞守华;;基于AgMES的搜索引擎的设计与实现[A];农业工程科技创新与建设现代农业——2005年中国农业工程学会学术年会论文集第三分册[C];2005年
8 曹玮祺;梁华瑞;朱雷;李涓子;王克宏;;基于半结构化信息模型的信息检索[A];第六届全国计算机应用联合学术会议论文集[C];2002年
9 陈魁;荣莉莉;;标准元搜索引擎——概念及其模型[A];管理科学与系统科学研究新进展——第7届全国青年管理科学与系统科学学术会议论文集[C];2003年
10 朴星海;赵铁军;郑德权;张迪;;面向Blog的网络爬行器设计与实现[A];中文信息处理前沿进展——中国中文信息学会二十五周年学术会议论文集[C];2006年
中国博士学位论文全文数据库 前10条
1 陈旭毅;基于索引云的企业搜索引擎实现研究[D];武汉大学;2011年
2 张智雄;Internet科技信息资源门户网站(STIP)系统的实践研究[D];中国科学院文献情报中心;2000年
3 李广建;个性化网络信息检索系统的研究与实现[D];中国科学院研究生院(文献情报中心);2002年
4 简(王争)峰;基于XML的异构产品信息网上交换、检索技术研究与应用[D];浙江大学;2002年
5 张宏斌;信息获取中的两类不确定问题研究[D];华中科技大学;2004年
6 杨震;个性化信息获取方法的研究[D];大连理工大学;2004年
7 杜亚军;搜索引擎智能行为的研究及实现[D];西南交通大学;2005年
8 杨全成;天津市前列腺癌发病诊断治疗状况调查及相关网络数据库构建[D];天津医科大学;2006年
9 吴应良;网络计算中的智能信息处理方法研究[D];华南理工大学;2000年
10 韩冰;基于智能软计算的视频镜头分割算法研究[D];西安电子科技大学;2006年
中国硕士学位论文全文数据库 前10条
1 徐财应;基于Lucene的搜索引擎技术的研究与改进[D];长春理工大学;2010年
2 雷斌;基于Java技术的智能化搜索引擎的研究与设计[D];哈尔滨工程大学;2010年
3 刘伟丽;基于粒子群算法和支持向量机的中文文本分类研究[D];河南工业大学;2010年
4 李永春;主题搜索引擎的研究与实现[D];哈尔滨理工大学;2010年
5 惠国宝;基于统计和语义分析的分词及在产品设计中的应用[D];西安电子科技大学;2011年
6 曹仲伟;FTP搜索引擎的关键技术研究[D];湖北工业大学;2011年
7 戴雪梅;面向购物的聚类搜索引擎的研究与实现[D];北京交通大学;2011年
8 杜佳伦;面向用户体验需求的垂直搜索引擎的研究[D];吉林大学;2011年
9 袁黎明;双边网络视角下搜索引擎平台的隔离机制演进[D];北京交通大学;2011年
10 陈凯;搜索引擎有关排序算法研究[D];武汉理工大学;2011年
【同被引文献】
中国期刊全文数据库 前10条
1 李艳欣;;搜索引擎中中文分词的研究[J];电脑知识与技术(学术交流);2007年08期
2 谢峰;刘洪星;;基于Lucene的Web站内搜索引擎的研究[J];电脑知识与技术;2008年04期
3 郑如滨;撒力;谢婷;;基于Heritrix与Lucene的垂直搜索引擎研究[J];电脑知识与技术;2008年29期
4 李海丰;;基于Lucene的企业搜索引擎研究及应用[J];电脑知识与技术;2009年04期
5 龙树全;赵正文;唐华;;中文分词算法概述[J];电脑知识与技术;2009年10期
6 王波静;柳楠;朱琳琳;;基于聚类分析和关联规则的降雨分析与实现[J];电脑知识与技术;2009年19期
7 杨坚争;李朝平;;垂直搜索引擎及其应用[J];电子商务;2006年10期
8 张南平;程鸣;;基于模式识别视频搜索技术的研究[J];福建电脑;2007年08期
9 张君;李保秀;;垂直搜索引擎中网络蜘蛛的设计[J];福建电脑;2008年04期
10 Jeff Prosise ,一帆;在Web上爬行[J];个人电脑;1996年09期
中国硕士学位论文全文数据库 前10条
1 刘向辉;专题性智能搜索引擎的研究与实现[D];昆明理工大学;2001年
2 侯震宇;主题型搜索引擎的研究与实现[D];中国科学院研究生院(文献情报中心);2003年
3 吴东华;Web信息获取技术研究[D];南京理工大学;2004年
4 徐永红;基于专题信息服务的智能搜索引擎技术研究[D];国防科学技术大学;2004年
5 刘平冰;基于Lucene的Web站内信息搜索系统[D];电子科技大学;2005年
6 黄国景;元搜索引擎个性化搜索的研究与设计[D];苏州大学;2005年
7 胡小睿;基于Web挖掘的搜索引擎技术研究[D];武汉大学;2005年
8 何世林;基于Java技术的搜索引擎研究与实现[D];西南交通大学;2006年
9 王骏;基于垂直搜索引擎技术的房源信息分析系统的设计与实现[D];苏州大学;2006年
10 王晓伟;垂直搜索引擎若干关键技术的研究[D];浙江大学;2007年
【二级引证文献】
中国期刊全文数据库 前3条
1 严安;;综合搜索引擎和垂直搜索引擎的比较分析[J];湖北师范学院学报(哲学社会科学版);2012年01期
2 杨伟超;刘阳;李淑霞;;基于搜索引擎的一站式检索平台设计与实现[J];计算机与现代化;2012年11期
3 刘阳;杨伟超;李淑霞;;基于Sphinx的资源整合系统平台的设计与实现[J];信息技术;2012年11期
中国硕士学位论文全文数据库 前10条
1 陈继祥;基于J2EE的网络考试系统的研究与实现[D];南昌大学;2010年
2 袁黎明;双边网络视角下搜索引擎平台的隔离机制演进[D];北京交通大学;2011年
3 徐东丽;基于Crawler的Web服务搜索研究[D];大连海事大学;2011年
4 江军;用户评论情感分类系统设计与实现[D];南京大学;2011年
5 郭艳芬;林业主题搜索引擎的设计与实现[D];北京林业大学;2011年
6 薛萍;基于教育领域的垂直搜索引擎的研究与实现[D];天津师范大学;2011年
7 李巍;企业信息搜索引擎的设计与关键技术的研究[D];内蒙古农业大学;2011年
8 王甲坤;基于互联网的话题分类及敏感话题发现技术研究与实现[D];电子科技大学;2011年
9 杨富生;IPTV系统图文信息自动采集关键技术研究与实现[D];北京邮电大学;2011年
10 金川明;垂直搜索引擎研究与实现[D];云南大学;2011年
【二级参考文献】
中国期刊全文数据库 前10条
1 胡慧;互联网的信息检索技术[J];图书与情报;1998年03期
2 王娟琴;超维检索模式研究[J];大学图书馆学报;1999年01期
3 卢世光,丁方忠;搜索引擎使用技术回顾和发展趋势探讨[J];广东通信技术;1999年05期
4 黄晓斌;中文搜寻引擎的现状与发展方向[J];华南理工大学学报(自然科学版);1998年S1期
5 王继成,邹涛,杨小江,潘金贵,张福炎;基于Internet的信息资源发现技术与实现[J];计算机研究与发展;1999年11期
6 张卫丰,徐宝文;Web搜索引擎框架研究[J];计算机研究与发展;2000年03期
7 王继成,潘金贵,张福炎;Web文本挖掘技术研究[J];计算机研究与发展;2000年05期
8 雷鸣,刘建国,王建勇,陈葆珏;一种基于词典的搜索引擎系统动态更新模型[J];计算机研究与发展;2000年10期
9 王继成,萧嵘,孙正兴,张福炎;Web信息检索研究进展[J];计算机研究与发展;2001年02期
10 邹涛,王继成,朱华宇,金翔宇,张福炎;WWW上的信息挖掘技术及实现[J];计算机研究与发展;1999年08期
【相似文献】
中国期刊全文数据库 前10条
1 程彩凤;杜友福;;搜索引擎技术分析[J];科技信息;2007年01期
2 梁雪松;;网络机器人对网络安全的影响及其应对策略[J];信息安全与通信保密;2008年08期
3 张继刚;搜索引擎使用技巧[J];网络与信息;1999年09期
4 ;关键词搜索[J];每周电脑报;2000年38期
5 陈冰;;饿狼一样的网站提交工具——“提交饿狼”[J];科学之友;2000年07期
6 许斗;从Google看新一代搜索引擎的发展趋向[J];芜湖职业技术学院学报;2001年01期
7 周毅华;从搜索引擎的分类看其应用技巧[J];图书馆理论与实践;2002年06期
8 邹小筑;搜索引擎的选择与使用技巧[J];图书馆学研究;2002年05期
9 林燕;Google搜索引擎的搜索功能与使用技巧[J];河北科技图苑;2003年05期
10 林中;GOOGLE搜索引擎的关键词检索[J];中国信息导报;2003年03期
中国重要会议论文全文数据库 前10条
1 彭轲;廖闻剑;;浅析搜索引擎[A];中国通信学会第五届学术年会论文集[C];2008年
2 李丹;;如何利用搜索引擎查找中医药信息[A];中国中医药信息研究会第二届理事大会暨学术交流会议论文汇编[C];2003年
3 邓长寿;郭景峰;杨焱林;邓安远;;下一代Web搜索引擎初探[A];第十八届全国数据库学术会议论文集(研究报告篇)[C];2001年
4 维尼拉·木沙江;吐尔洪·吾司曼;;维、哈、柯文搜索引擎中网页爬行器的设计与实现[A];少数民族青年自然语言处理技术研究与进展——第三届全国少数民族青年自然语言信息处理、第二届全国多语言知识库建设联合学术研讨会论文集[C];2010年
5 汤薇;曾艳;;构建校园网搜索引擎必要性分析[A];广西计算机学会2008年年会论文集[C];2008年
6 姚树宇;赵少东;;一种使用分布式技术的搜索引擎[A];2005年全国开放式分布与并行计算学术会议论文集[C];2005年
7 倪俊峰;;基于黄页搜索引擎的关键字排名广告系统的设计与实现[A];2005年中国索引学会年会暨学术研讨会论文集[C];2005年
8 张怡;查贵庭;;SEO在信息服务中的应用研究[A];2010年中国索引学会年会暨学术研讨会论文集[C];2010年
9 陈援非;何哲;朱珍民;;基于普适计算的个性化搜索技术[A];第二届和谐人机环境联合学术会议(HHME2006)——第2届中国普适计算学术会议(PCC'06)论文集[C];2006年
10 杨萌;李春丽;朱明;;网络搜索技术下的编辑工作[A];学报编辑论丛(第十一集)[C];2003年
中国重要报纸全文数据库 前10条
1 李一鑫;搜索排名的红与黑[N];财经时报;2007年
2 周文林;搜狗3.0能否撼动搜索市场[N];经济参考报;2007年
3 惠正一;比尔·盖茨:微软不怕Google[N];第一财经日报;2005年
4 赛迪顾问股份有限公司互联网与电子商务咨询中心 常燕杰;搜索,还是门户[N];中国计算机报;2005年
5 陈珊;浙江移动推出手机搜索引擎服务[N];人民邮电;2005年
6 赵法忠;搜索引擎还需悠着点[N];中国经营报;2005年
7 金朝力;搜索引擎火拼搜索质量[N];北京商报;2006年
8 本报记者  赵晓辉 孟昭丽;搜索引擎驶入“避风港”[N];中国证券报;2006年
9 孙琎;搜索引擎惊喜侵权官司止于“避风港”?[N];第一财经日报;2006年
10 姜蕊;问天下谁识搜索?[N];中国高新技术产业导报;2006年
中国博士学位论文全文数据库 前10条
1 赵德安;静电喷涂机器人变量喷涂轨迹优化关键技术研究[D];江苏大学;2012年
2 吕世增;空心非球型手腕喷涂机器人设计及关键技术研究[D];天津大学;2012年
3 李正义;机器人与环境间力/位置控制技术研究与应用[D];华中科技大学;2011年
4 岑荣伟;基于用户行为分析的搜索引擎评价研究[D];清华大学;2010年
5 李群;主题搜索引擎聚类算法的研究[D];北京林业大学;2011年
6 苏君华;面向搜索引擎的技术接受模型研究[D];南京大学;2011年
7 刘佐达;分布协作式搜索引擎模型及算法研究[D];清华大学;2011年
8 马宏波;基于视觉传感的机器人铝合金脉冲TIG焊接过程MLD建模方法研究[D];上海交通大学;2011年
9 陈旭毅;基于索引云的企业搜索引擎实现研究[D];武汉大学;2011年
10 郭眈;中文互联网视频搜索引擎系统策略研究[D];北京交通大学;2012年
中国硕士学位论文全文数据库 前10条
1 常晓燕;基于Java的新闻搜索引擎的设计与实现[D];西南交通大学;2004年
2 薛云;Internet上元搜索引擎的研究与设计[D];太原理工大学;2003年
3 王春花;基于Nutch的农业搜索引擎检索结果排序策略的研究[D];西北农林科技大学;2010年
4 李雷;基于Nutch的农业信息搜索引擎实现和优化[D];吉林大学;2011年
5 董晨;基于模糊聚类的个性化搜索引擎的研究[D];福州大学;2005年
6 封俊;基于Hadoop的分布式搜索引擎研究与实现[D];太原理工大学;2010年
7 李浩;分布式教育网信息检索系统的研究和实现[D];华南理工大学;2010年
8 尉建兴;基于Lucene搜索引擎的研究与应用[D];太原理工大学;2011年
9 李建平;智能化WEB信息搜索引擎的研究与实现[D];大庆石油学院;2003年
10 田生伟;基于涉农词典的搜索引擎的研究与实践[D];新疆大学;2004年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026