基于判别式分类和重排序技术的藏文分词
文献类型:期刊论文
作者 | 孙萌1; 华却才让2; 才智杰2; 姜文斌1; 吕雅娟1![]() |
刊名 | 中文信息学报
![]() |
出版日期 | 2014 |
卷号 | 28.0期号:002页码:61 |
关键词 | 判别式 藏文分词 构词粒度 重排序 |
ISSN号 | 1003-0077 |
英文摘要 | 本文提出一种基于判别式模型的藏文分词方法,重点研究最小构词粒度和分词结果重排序对藏文分词效果的影响.在构词粒度方面,分别考察了以基本字丁、基本字丁—音节点、音节为最小构词粒度对分词效果的影响,实验结果表明选定音节为最小构词粒度分词的F值最高,为91.21%;在分词结果重排序方面,提出一种基于词图的最短路径重排序策略,将判别式解码生成的切分结果压缩为加权有向图,图中节点表示音节间隔,而边所覆盖的音节作为候选切分并赋予不同权重,选择一条最短路径从而实现整句切分,最终分词结果的F值达到96.25%. |
语种 | 英语 |
源URL | [http://119.78.100.204/handle/2XEOYT63/29380] ![]() |
专题 | 中国科学院计算技术研究所期刊论文_中文 |
作者单位 | 1.中国科学院计算技术研究所 2.青海师范大学藏文信息研究中心 |
推荐引用方式 GB/T 7714 | 孙萌,华却才让,才智杰,等. 基于判别式分类和重排序技术的藏文分词[J]. 中文信息学报,2014,28.0(002):61. |
APA | 孙萌,华却才让,才智杰,姜文斌,吕雅娟,&刘群.(2014).基于判别式分类和重排序技术的藏文分词.中文信息学报,28.0(002),61. |
MLA | 孙萌,et al."基于判别式分类和重排序技术的藏文分词".中文信息学报 28.0.002(2014):61. |
入库方式: OAI收割
来源:计算技术研究所
浏览0
下载0
收藏0
其他版本
除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。