基于词向量的维吾尔语词项归一化方法简
文献类型:期刊论文
作者 | 罗延根; 李晓; 蒋同海![]() ![]() ![]() ![]() |
刊名 | 计算机工程
![]() |
出版日期 | 2018 |
卷号 | 44期号:2页码:220-225 |
关键词 | 维吾尔语口语文本 非正规词 归一化 神经网络 重采样 |
ISSN号 | 1000-3428 |
DOI | 10.3969/j.issn.1000-3428.2018.02.038 |
英文摘要 | 使用无监督的方法,将口语文本中的非正规维吾尔语词项归一化到正规文本中意思相近的正规词,基于神经网络,利用大规模语料将维吾尔语单词映射到低维向量空间,对向量空间的非正规词进行聚类。引入一个贪心解码器对非正规词做归一化处理,并进行重采样迭代,从而将之前未能成功归一化的非正规词归一化。实验结果表明,使用该方法对维汉机器翻译的待翻译口语文本进行前编辑后,生成的译文质量有显著提高。该方法给维汉口语文本机器翻译系统提供一个前处理的流程,在缺乏双语口语平行语料的情况下也能有效提高机器翻译系统性能。 |
CSCD记录号 | CSCD:6161574 |
源URL | [http://ir.xjipc.cas.cn/handle/365002/5236] ![]() |
专题 | 新疆理化技术研究所_多语种信息技术研究室 |
作者单位 | 1.中国科学院新疆民族语音语言信息处理重点实验室 2.中国科学院大学 3.中国科学院新疆理化技术研究所 |
推荐引用方式 GB/T 7714 | 罗延根,李晓,蒋同海,等. 基于词向量的维吾尔语词项归一化方法简[J]. 计算机工程,2018,44(2):220-225. |
APA | 罗延根,李晓,蒋同海,杨雅婷,周喜,&王磊.(2018).基于词向量的维吾尔语词项归一化方法简.计算机工程,44(2),220-225. |
MLA | 罗延根,et al."基于词向量的维吾尔语词项归一化方法简".计算机工程 44.2(2018):220-225. |
入库方式: OAI收割
来源:新疆理化技术研究所
浏览0
下载0
收藏0
其他版本
除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。