用隐马尔柯夫模型对汉语进行切分和标注排歧

摘要

对汉语进行切分和标注，不可避免要产生歧义。文中对切分和标注阶段采用相同的模型-隐马尔柯夫模型（HMM）来消歧。在切分阶段，使用基于HMM的切分评分，而在标注阶段，使用基于HMM的词汇评分。并按最大可能原理和多结果输出原理进行词汇评分实验，实验结果表明：用HMM对汉语进行标注排歧，正确率很高。