Web平行语料挖掘及其在机器翻译中的应用
文献类型:期刊论文
作者 | 林政; 吕雅娟![]() |
刊名 | 中文信息学报
![]() |
出版日期 | 2010 |
卷号 | 24.0期号:005页码:85 |
关键词 | Web挖掘 平行语料库 句子对齐 统计机器翻译 |
ISSN号 | 1003-0077 |
英文摘要 | 双语平行语料库在自然语言处理领域有很多重要应用,但是大规模双语平行语料库的自动获取并不容易。该文提出了一种有效的从Web上获取高质量双语平行语料库的方案,研究了候选双语混合网页获取和平行句对抽取等关键技术。运用该文方法共获取了258万双语平行句对,平均正确率为93.75%,其中前150万句对的平均正确率达到96%。该文还提出句对质量排序和领域信息检索两种方法将Web数据应用于统计机器翻译的模型训练,在IWSLT评测数据上BLEU值可以提高2到5个百分点。 |
语种 | 英语 |
源URL | [http://119.78.100.204/handle/2XEOYT63/37109] ![]() |
专题 | 中国科学院计算技术研究所期刊论文_中文 |
作者单位 | 中国科学院计算技术研究所 |
推荐引用方式 GB/T 7714 | 林政,吕雅娟,刘群,等. Web平行语料挖掘及其在机器翻译中的应用[J]. 中文信息学报,2010,24.0(005):85. |
APA | 林政,吕雅娟,刘群,&马希荣.(2010).Web平行语料挖掘及其在机器翻译中的应用.中文信息学报,24.0(005),85. |
MLA | 林政,et al."Web平行语料挖掘及其在机器翻译中的应用".中文信息学报 24.0.005(2010):85. |
入库方式: OAI收割
来源:计算技术研究所
浏览0
下载0
收藏0
其他版本
除非特别说明,本系统中所有内容都受版权保护,并保留所有权利。