收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

基于短语的统计机器翻译的研究

狄萍  
【摘要】: 随着计算机技术的高速发展,统计机器翻译展示了日益广阔的应用前景。基于短语的统计机器翻译系统在抽取短语时往往将任意连续的单词看作短语,由于没有考虑短语的合理性,因此会产生大量冗余的短语。这不仅扩大了系统的搜索空间,还严重影响了翻译质量。针对以上问题,本文重点研究如何有效地提高短语的质量。 本文首先分析了统计机器翻译的相关原理和各种技术,并在此基础上构建了一个基于短语的统计机器翻译基准系统。然后使用C值和短语粘连度两种方法对短语的合理性进行评分,再据此构建一个更有效的短语翻译概率表。实验结果显示,使用C值方法将短语翻译概率表缩减至78%时,翻译结果的评价指标BLEU值可以提高0.02;使用粘连度可以使短语翻译概率表最小缩减至47.5%,翻译结果的BLEU值可以提高0.0158。 另外,本文还将主题模型应用于统计机器翻译系统。训练时为每个短语确定一个主题分布,在翻译时再过滤掉与主题不相关的短语,从而提高翻译性能。实验结果显示,跟基准系统相比,采用主题模型后可使BLEU值提高0.0136。 最后,本文还将短语的主题模型和C值方法结合起来,在保留短语有效性的同时对短语翻译概率表进行进一步的缩减。实验表明,当短语翻译概率表缩减为原来的57%时,最终的BLEU值仍有一定的提高。 本文的研究和实验表明,使用这些方法可以有效地缩减并优化短语翻译概率表,从而明显改善翻译质量。将主题模型应用于机器翻译是一个全新的尝试,今后我们将进一步探讨如何在统计机器翻译中更好地发挥主题模型的优势。


知网文化
【相似文献】
中国期刊全文数据库 前20条
1 刘群;统计机器翻译综述[J];中文信息学报;2003年04期
2 冯志伟;;机器翻译与语言研究(下)[J];术语标准化与信息技术;2007年04期
3 张涛;;机器翻译的发展与基于短语的统计机器翻译[J];山西广播电视大学学报;2009年04期
4 王丽;韩习武;;双语词典在统计机器翻译中的应用[J];计算机工程与应用;2010年16期
5 郎君;;统计机器翻译中翻译模型的约简概述[J];智能计算机与应用;2011年03期
6 周玉,宗成庆,徐波;基于多层过滤的统计机器翻译[J];中文信息学报;2005年03期
7 强静;张建;;基于短语的统计机器翻译中短语抽取算法改进[J];计算机工程与应用;2008年13期
8 孙广范;宋金平;肖健;袁琦;;句法调序的统计机器翻译方法研究[J];计算机工程与应用;2009年36期
9 任高举;吐尔根·伊布拉音;艾山·吾买尔;;统计机器翻译中汉维短语对抽取的研究[J];新疆大学学报(自然科学版);2010年03期
10 李响;徐金安;姜文斌;吕雅娟;刘群;;面向移动终端的统计机器翻译解码定点化方法[J];中文信息学报;2011年02期
11 曹杰;吕雅娟;苏劲松;刘群;;利用上下文信息的统计机器翻译领域自适应[J];中文信息学报;2010年06期
12 苗洪霞;蔡东风;宋彦;;基于短语的统计机器翻译方法[J];沈阳航空工业学院学报;2007年02期
13 邵艳秋;;机器翻译相关术语简介[J];术语标准化与信息技术;2010年01期
14 狄萍;周宥良;贡正仙;周国栋;;基于短语的统计机器翻译中短语表的过滤[J];计算机应用与软件;2011年05期
15 苏劲松;刘群;吕雅娟;;一种考虑对齐不一致的短语翻译概率估计方法[J];中文信息学报;2011年03期
16 付雷;刘群;;单纯形算法在统计机器翻译Re-ranking中的应用[J];中文信息学报;2007年03期
17 董兴华;陈丽娟;周喜;周俊林;吐尔洪·吾司曼;;汉维统计机器翻译中的形态学处理[J];计算机工程;2011年12期
18 何中军;刘群;林守勋;;统计机器翻译中短语切分的新方法[J];中文信息学报;2007年01期
19 张步峰;孙越恒;赵青;;对齐模板在标准短语统计机器翻译模型中的应用[J];电子测量技术;2007年07期
20 罗毅;李淼;朱鉴;胡冠龙;;基于短语统计机器翻译解码算法的研究与实现[J];计算机工程与应用;2007年30期
中国重要会议论文全文数据库 前10条
1 杜金华;王莎;;西安理工大学统计机器翻译系统技术报告(英文)[A];机器翻译研究进展——第七届全国机器翻译研讨会论文集[C];2011年
2 于惠;谢军;熊皓;吕雅娟;刘群;林守勋;;基于篇章上下文的统计机器翻译方法[A];机器翻译研究进展——第七届全国机器翻译研讨会论文集[C];2011年
3 梁芳丽;李淼;李文;陈雷;乌达巴拉;;统计机器翻译中的源语言重排序方法研究[A];中国计算语言学研究前沿进展(2009-2011)[C];2011年
4 朱海;李淼;张建;乌达巴拉;;系统融合方法在汉蒙统计机器翻译上的应用[A];少数民族青年自然语言处理技术研究与进展——第三届全国少数民族青年自然语言信息处理、第二届全国多语言知识库建设联合学术研讨会论文集[C];2010年
5 董兴华;周俊林;郭树盛;吐尔洪·吾司曼;;基于短语的汉维(维汉)统计机器翻译研究[A];少数民族青年自然语言处理技术研究与进展——第三届全国少数民族青年自然语言信息处理、第二届全国多语言知识库建设联合学术研讨会论文集[C];2010年
6 王春荣;宝美荣;王斯日古楞;;内蒙古师范大学CWMT2011蒙汉机器翻译系统评测技术报告[A];机器翻译研究进展——第七届全国机器翻译研讨会论文集[C];2011年
7 姚树杰;肖桐;朱靖波;;基于句对质量和覆盖度的统计机器翻译训练语料选取[A];第五届全国青年计算语言学研讨会论文集[C];2010年
8 李响;徐金安;刘群;吕雅娟;姜文斌;;移动终端机器翻译设备的解码定点化方法[A];第五届全国青年计算语言学研讨会论文集[C];2010年
9 巢文涵;李舟军;;ZZX_MT系统CWMT2011评测报告[A];机器翻译研究进展——第七届全国机器翻译研讨会论文集[C];2011年
10 张育;李良友;贡正仙;周国栋;;粘贴模型在依存语法统计机器翻译中的应用[A];中国计算语言学研究前沿进展(2009-2011)[C];2011年
中国博士学位论文全文数据库 前10条
1 蒋宏飞;基于同步树替换文法的统计机器翻译方法研究[D];哈尔滨工业大学;2010年
2 贡正仙;文档级统计机器翻译的研究[D];苏州大学;2014年
3 段楠;统计机器翻译的一致性解码方法研究[D];天津大学;2012年
4 刘乐茂;统计机器翻译判别式训练方法研究[D];哈尔滨工业大学;2013年
5 梁华参;基于短语的统计机器翻译模型训练中若干关键问题的研究[D];哈尔滨工业大学;2013年
6 刘水;融入头—修饰词调序模型的短语统计机器翻译方法研究[D];哈尔滨工业大学;2011年
7 杨南;基于神经网络学习的统计机器翻译研究[D];中国科学技术大学;2014年
8 黄书剑;统计机器翻译中的词对齐研究[D];南京大学;2012年
9 陈毅东;基于短语的统计机器翻译模型若干关键技术研究[D];厦门大学;2008年
10 林建方;词搭配抽取及在信息检索中的应用研究[D];哈尔滨工业大学;2010年
中国硕士学位论文全文数据库 前10条
1 李函章;统计机器翻译中语料选择方法研究[D];黑龙江大学;2010年
2 宋美娜;基于词缀特征的汉蒙统计机器翻译系统[D];内蒙古大学;2010年
3 李天宁;词对齐技术研究及统计机器翻译平台的构建[D];东北大学;2009年
4 张涛;面向特定领域的统计机器翻译研究与应用[D];昆明理工大学;2011年
5 李磊;基于依存句法的汉语—纳西语统计机器翻译研究[D];昆明理工大学;2013年
6 罗凌;面向旅游领域的汉英统计机器翻译关键技术研究[D];厦门大学;2014年
7 张育;基于依存语法的统计机器翻译研究[D];苏州大学;2011年
8 宝美荣;融入形态学分析的汉蒙统计机器翻译研究[D];内蒙古师范大学;2012年
9 王春荣;基于层次短语的汉蒙统计机器翻译后处理研究[D];内蒙古师范大学;2013年
10 银花;基于短语的蒙汉统计机器翻译研究[D];内蒙古师范大学;2011年
中国知网广告投放
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978