基于Internet的中文文本过滤系统的研究与实践
【摘要】：本文简要介绍了文本过滤的背景，系统地探讨了文本过滤与文本检索及机器学习等领域的紧密联系，以一种典型的中文文本过滤逻辑模型为例，深入研究了实现中文文本过滤系统所涉及的各个方面的理论和技术，其中包括概念扩展，文本结构分析和特征抽取，潜在语义标注及自适应学习等技术。文章借鉴了其它文本过滤系统的优点，充分考虑了系统的召回率，查准率，运行效率及可实现性，给出了一种改进的中文文本过滤系统的体系结构，增加了类匹配模块和用户兴趣反馈模块。并详细阐述了一种混合式的中文文本过滤方法，给出了实现该系统主要模块的数学模型及其相关的算法。
利用Java技术对整个中文文本过滤系统的功能模块进行了尝试性的实践。在实践中，实现了自动构建反向词频库，改进了关键词权重计算方法，增加了主题句权重计算方法，调节了数学模型中的相关系数，还增加了其它传统的过滤引擎所没有的同义扩展及查询修正等功能，取得了一定的过滤效果。
最后，针对本系统在过滤的精确率上不太理想的特点，对本课题下一步要研究的内容进行了系统的总结，并提出了自己的一些看法。
【学位授予单位】：兰州理工大学
【学位级别】：硕士
【学位授予年份】：2004
【分类号】：TP391.1
|
|
|
|
| 1 |
刘杨;陈晖;陈远江;;中文文本信息过滤技术研究[J];船电技术;2010年07期 |
| 2 |
刘永丹,曾海泉,李荣陆,胡运发;基于语义分析的倾向性文本过滤[J];通信学报;2004年07期 |
| 3 |
王卫玲;赵秀丽;张燕红;王凤芹;;文本过滤中的特征选择[J];微计算机信息;2010年21期 |
| 4 |
林鸿飞;基于混合模式的文本过滤模型[J];计算机研究与发展;2001年09期 |
| 5 |
江宝林,刘永丹,金峰,葛家翔,胡运发;一个基于语义分析的倾向性文档过滤系统[J];计算机应用与软件;2005年01期 |
| 6 |
张霞;;基于文本过滤的Web页面检索研究[J];电脑知识与技术;2008年26期 |
| 7 |
汪洋;基于Web的信息资源的可利用性[J];合肥联合大学学报;2001年03期 |
| 8 |
李振星,徐泽平,唐卫清,唐荣锡;基于兴趣模型的WEB信息预测采集过滤方法[J];计算机工程与应用;2003年05期 |
| 9 |
李振星,陆大珏,任继成,唐卫清,唐荣锡;基于潜在语义索引的Web信息预测采集过滤方法[J];计算机辅助设计与图形学学报;2004年01期 |
| 10 |
陈江兵;张巍;;基于状态转换方法的不良信息文本过滤模型[J];江西教育学院学报;2005年06期 |
|
手机打开
快捷付款方式
订购知网充值卡
订购热线
帮助中心