收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

具有中文人名识别功能的汉语自动分词算法研究

潘景剑  
【摘要】: 随着信息技术的飞速发展,中文信息处理技术已经渗透到计算机应用的各个领域。词处理平台技术是中文信息处理的中间环节,是连接字处理平台和句处理平台的关键环节,其核心难题是分词问题。汉语自动分词是对汉语文本进行自动分析的第一步,是词处理平台的基础,汉语自动分词技术的发展直接影响着中文信息处理技术的发展。 本文对汉语自动分词的知识进行了全面的描述,介绍了汉语自动分词的概念和国内外研究与应用的现状。对汉语自动分词技术的原理、方法、评价标准以及基本流程进行了分析和总结。其中重点对汉语自动分词歧义的采集和处理以及中文人名识别所用到的技术和各种算法进行了深入的研究与实验分析,并提出了一些改进思路。 文中使用逆向最大匹配法和改进的正向最大匹配法相结合的方法对待切分字段进行双向扫描来采集歧义字段;并在歧义处理过程中做出一些改进,采用规则和统计相结合的方法,运用一些歧义切分的规则及最大概率分词法消解歧义字段;同时采用了统计和规则相结合的方法对未登录词中的人名识别进行了实验,实现了具有人名识别功能的中文分词算法。通过实验数据可以看到,本算法基本可以满足中文信息处理中的实际应用问题。


知网文化
【相似文献】
中国期刊全文数据库 前20条
1 任铭;;互联网舆情热点分析统计方法研究[J];科技促进发展(应用版);2010年06期
2 ;[J];;年期
3 ;[J];;年期
4 ;[J];;年期
5 ;[J];;年期
6 ;[J];;年期
7 ;[J];;年期
8 ;[J];;年期
9 ;[J];;年期
10 ;[J];;年期
11 ;[J];;年期
12 ;[J];;年期
13 ;[J];;年期
14 ;[J];;年期
15 ;[J];;年期
16 ;[J];;年期
17 ;[J];;年期
18 ;[J];;年期
19 ;[J];;年期
20 ;[J];;年期
中国重要会议论文全文数据库 前10条
1 孙茂松;;汉语自动分词研究及其应用:回顾与展望[A];面向21世纪的科技进步与社会经济发展(上册)[C];1999年
2 孙茂松;;汉语自动分词研究的若干最新进展——清华大学相关工作简介[A];辉煌二十年——中国中文信息学会二十周年学术会议论文集[C];2001年
3 曲维光;;解决汉语自动分词的方法选择[A];第一届学生计算语言学研讨会论文集[C];2002年
4 陈晓;;中文文本自动分词研究述要[A];第四届全国语言文字应用学术研讨会论文集[C];2005年
5 贺前华;徐秉铮;;神经网络在汉语自动分词中的应用[A];第二届全国人机语音通讯学术会议论文集[C];1992年
6 庄丽;包塔;朱小燕;;盲人用计算机软件系统中的语音和自然语言处理技术[A];第七届全国人机语音通讯学术会议(NCMMSC7)论文集[C];2003年
7 杨超;李仁发;蒋斌;;一种高效的汉语自动分词词典机制[A];NCIRCS2004第一届全国信息检索与内容安全学术会议论文集[C];2004年
8 侯敏;陈琼璜;初田天;李湛;王瑜;叶立;;汉语自动分词中的上下文相关歧义字段(CSAS)研究[A];全国第八届计算语言学联合学术会议(JSCL-2005)论文集[C];2005年
9 张云涛;龚玲;王永成;;识别中文文本中的未登录专有名词的类别[A];2007年中国智能自动化会议论文集[C];2007年
10 廉竹钧;;汉语组合型切分歧义字段消歧方法研究[A];第一届学生计算语言学研讨会论文集[C];2002年
中国博士学位论文全文数据库 前2条
1 贺前华;汉语自动分词及机器翻译研究[D];华南理工大学;1993年
2 王立欣;翻译标准自动量化方法研究[D];上海外国语大学;2007年
中国硕士学位论文全文数据库 前10条
1 李丹;基于规则与统计的汉语自动分词研究[D];长春工业大学;2010年
2 熊冬明;汉语自动分词和中文人名识别技术研究[D];浙江大学;2006年
3 潘景剑;具有中文人名识别功能的汉语自动分词算法研究[D];河北工业大学;2006年
4 程晓静;自然语言处理在药物专利检索系统中的应用[D];大连理工大学;2004年
5 罗小虎;基于蚁群算法的汉语自动分词的研究与实现[D];苏州大学;2004年
6 乔羽;基于最大熵模型的中文人名识别方法研究[D];山西大学;2005年
7 代建英;汉语自动分词系统的研究与实现[D];重庆大学;2005年
8 胡可;基于人工免疫系统的信息过滤技术研究[D];西南交通大学;2006年
9 唐培丽;基于语义的汉语文本主题词提取算法研究与实现[D];吉林大学;2005年
10 王广正;基于知网语义相关度计算的汉语自动分词方法的研究[D];云南师范大学;2006年
中国知网广告投放
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978