基于完全二阶隐马尔可夫模型的汉语词性标注
Release Time:2019-03-10 Hits:
Indexed by: Journal Article
Date of Publication: 2005-05-20
Journal: 计算机工程
Included Journals: CSCD、ISTIC、PKU
Volume: 31
Issue: 10
Page Number: 177-179
ISSN: 1000-3428
Key Words: 完全二阶隐马尔可夫模型;汉语词性标注;平滑算法;Viterbi算法
Abstract: 该文基于隐马尔可夫理论,提出了一种三元词汇概率和词性概率相结合的汉语词性标注模型,并对传统的Viterbi算法进行了扩展.对统计模型中出现的数据稀疏问题,给出了基于线性插值法的平滑算法.实验表明,完全二阶隐马尔可夫模型比标准的二元、三元模型有更高的词性标注正确率和消歧率.