现代汉语分词系统中专名识别的实用策略

【摘要】： 中文信息处理的基础是分词。影响分词准确率的重要因素之一就是未登录 词的识别问题。人名、地名和企业名等专名是现代汉语未登录词的重要组成部 分。本文首先围绕分词系统中专名识别问题展开，对专名识别中具有代表性的 人名、地名、企业名的内部构成和上下文语境做了较为系统的分析，并在此基 础上，建立了人名、地名和企业名的识别规则集合。然后，本文就分词系统中 的用规则进行专名识别的技术和实现策略做了较为详细的阐述。基于上述技术 的中文分词系统已经实现，其中包含了专名识别的部分，所用的专名识别规则 经过了优化处理，并实现了多种专名歧义消解的动态规划算法。论文给出了该 系统专名识别性能的测试结果，并对结果进行了分析。测试结果表明，该系统 的专名识别能力达到了较高的实用水平。