Institute of Computing Technology, Chinese Academy IR
| 基于层叠隐马模型的汉语词法分析 | |
| 刘群; 张华平; 俞鸿魁; 程学旗 | |
| 2004 | |
| 发表期刊 | 计算机研究与发展
![]() |
| ISSN | 1000-1239 |
| 卷号 | 41.0期号:008页码:1421 |
| 摘要 | 提出了一种基于层叠隐马模型的汉语词法分析方法,旨在将汉语分词、词性标注、切分排歧和未登录词识别集成到一个完整的理论框架中.在分词方面,采取的是基于类的隐马模型,在这层隐马模型中,未登录词和词典中收录的普通词一样处理.未登录词识别引入了角色HMM:Viterbi算法标注出全局最优的角色序列,然后在角色序列的基础上,识别出未登录词,并计算出真实的可信度.在切分排歧方面,提出了一种基于N-最短路径的策略,即:在早期阶段召回N个最佳结果作为候选集,目的是覆盖尽可能多的歧义字段,最终的结果会在未登录词识别和词性标注之后,从N个最有潜力的候选结果中选优得到.不同层面的实验表明,层叠隐马模型的各个层面对汉语词法分析都发挥了积极的作用.实现了基于层叠隐马模型的汉语词法分析系统ICTCLAS.该系统在2002年的“九七三”专家组评测中获得第1名,在2003年汉语特别兴趣研究组(ACL Special Interest Groupon Chinese Language Processing,SIGHAN)组织的第1届国际汉语分词大赛中综合得分获得两项第1名、一项第2名.这表明:ICTCLAS是目前最好的汉语词法分析系统之一,层叠隐马模型能够解决好汉语词法问题. |
| 关键词 | 汉语词法分析 分词 词性标注 未登录词识别 层叠隐马模型 ICTCLAS |
| 语种 | 英语 |
| 文献类型 | 期刊论文 |
| 条目标识符 | http://119.78.100.204/handle/2XEOYT63/36338 |
| 专题 | 中国科学院计算技术研究所期刊论文_中文 |
| 作者单位 | 中国科学院计算技术研究所 |
| 第一作者单位 | 中国科学院计算技术研究所 |
| 推荐引用方式 GB/T 7714 | 刘群,张华平,俞鸿魁,等. 基于层叠隐马模型的汉语词法分析[J]. 计算机研究与发展,2004,41.0(008):1421. |
| APA | 刘群,张华平,俞鸿魁,&程学旗.(2004).基于层叠隐马模型的汉语词法分析.计算机研究与发展,41.0(008),1421. |
| MLA | 刘群,et al."基于层叠隐马模型的汉语词法分析".计算机研究与发展 41.0.008(2004):1421. |
| 条目包含的文件 | 条目无相关文件。 | |||||
| 个性服务 |
| 推荐该条目 |
| 保存到收藏夹 |
| 查看访问统计 |
| 导出为Endnote文件 |
| 谷歌学术 |
| 谷歌学术中相似的文章 |
| [刘群]的文章 |
| [张华平]的文章 |
| [俞鸿魁]的文章 |
| 百度学术 |
| 百度学术中相似的文章 |
| [刘群]的文章 |
| [张华平]的文章 |
| [俞鸿魁]的文章 |
| 必应学术 |
| 必应学术中相似的文章 |
| [刘群]的文章 |
| [张华平]的文章 |
| [俞鸿魁]的文章 |
| 相关权益政策 |
| 暂无数据 |
| 收藏/分享 |
除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。
修改评论