收藏本站
收藏 | 手机打开
二维码
手机客户端打开本文

基于依存语法的统计机器翻译研究

张育  
【摘要】:近年来,随着统计机器翻译技术的发展,基于句法的统计机器翻译逐渐成为研究热点。同传统的基于短语的方法相比,基于句法的方法在翻译过程中能够利用更多的语言学知识,可以更好的指导翻译过程。 本文在依存句法分析的基础上,构建了一个依存语法翻译模型,设计并实现了一个完整的统计机器翻译系统,并在此基础上进行了改进。 首先,本文构建了一个依存子图(treelet)到串的统计机器翻译模型。该模型的基本单元是对齐模板,其中源语言端是依存子图,目标语言端是串,两端允许变量泛化,对齐模板可以按照一定的约束条件从训练语料中自动获取。在翻译模型的基础上,设计并实现了基准系统。 其次,本文对模板选择问题和未覆盖节点译文操作问题进行了研究。针对模板选择问题,采用了两种选择策略,一是为翻译模型增加模板判别特征函数,如长度不一致惩罚,变量数目惩罚等特征,利用最小错误率训练获得权重;二是为对齐模板增加词性信息标记,从而使模板获得一定语言学知识的约束。模板选择实验结果表明,仅添加模板判别特征可以提高BLEU值,而仅增加词性信息标记并没有提高系统的性能,但是利用词性标记将模板库分层后,优先匹配词性标记模板,可使BLEU值有所提高。针对未覆盖节点的译文操作问题,本文构建了一个基于统计的粘贴模型。首先从训练语料中抽取粘贴实例,然后抽取了首词、组合等特征用于最大熵建模,实验结果表明,粘贴模型可以有效的控制未覆盖节点译文的顺序。在NIST MT 2005测试集上,同时应用模板选择和粘贴模型,保留未登录词的系统的BLEU值比Moses高0.0021,删除未登录词后BLEU值可以达到0.2540,证明我们的改进方法是比较有效的。


知网文化
【相似文献】
中国期刊全文数据库 前20条
1 冯志伟;;机器翻译与语言研究(下)[J];术语标准化与信息技术;2007年04期
2 强静;张建;;基于短语的统计机器翻译中短语抽取算法改进[J];计算机工程与应用;2008年13期
3 苗洪霞;蔡东风;宋彦;;基于短语的统计机器翻译方法[J];沈阳航空工业学院学报;2007年02期
4 张涛;;机器翻译的发展与基于短语的统计机器翻译[J];山西广播电视大学学报;2009年04期
5 任高举;吐尔根·伊布拉音;艾山·吾买尔;;统计机器翻译中汉维短语对抽取的研究[J];新疆大学学报(自然科学版);2010年03期
6 何中军;刘群;林守勋;;统计机器翻译中短语切分的新方法[J];中文信息学报;2007年01期
7 曹杰;吕雅娟;苏劲松;刘群;;利用上下文信息的统计机器翻译领域自适应[J];中文信息学报;2010年06期
8 苏劲松;刘群;吕雅娟;;一种考虑对齐不一致的短语翻译概率估计方法[J];中文信息学报;2011年03期
9 狄萍;周宥良;贡正仙;周国栋;;基于短语的统计机器翻译中短语表的过滤[J];计算机应用与软件;2011年05期
10 李俊;薛永增;赵铁军;;常用统计翻译模型在口语汉英翻译中的比较研究[J];计算机应用研究;2007年06期
11 罗毅;李淼;朱鉴;胡冠龙;;基于短语统计机器翻译解码算法的研究与实现[J];计算机工程与应用;2007年30期
12 孙加东;赵铁军;梁华参;;基于结构对齐的统计机器翻译模型[J];通信学报;2009年07期
13 孙越恒;段楠;侯越先;;统计机器翻译中的非连续短语模板抽取及其应用[J];计算机科学;2009年10期
14 罗毅;李淼;张建;;一种基于短语统计机器翻译的高效柱搜索解码器[J];计算机应用;2007年08期
15 何晶;周明;蒋龙;;基于统计的汉语格律诗生成研究[J];中文信息学报;2010年02期
16 王丽;韩习武;;双语词典在统计机器翻译中的应用[J];计算机工程与应用;2010年16期
17 陈伟;黄蕾;刘峰;赵志宏;;双语平行网页挖掘系统的设计与实现[J];计算机工程;2009年14期
18 蒋宏飞;李生;张民;赵铁军;杨沐昀;;基于同步树序列替换文法的统计机器翻译模型[J];自动化学报;2009年10期
19 郎君;;统计机器翻译中翻译模型的约简概述[J];智能计算机与应用;2011年03期
20 周玉,宗成庆,徐波;基于多层过滤的统计机器翻译[J];中文信息学报;2005年03期
中国重要会议论文全文数据库 前10条
1 于惠;谢军;熊皓;吕雅娟;刘群;林守勋;;基于篇章上下文的统计机器翻译方法[A];机器翻译研究进展——第七届全国机器翻译研讨会论文集[C];2011年
2 朱海;李淼;张建;乌达巴拉;;系统融合方法在汉蒙统计机器翻译上的应用[A];少数民族青年自然语言处理技术研究与进展——第三届全国少数民族青年自然语言信息处理、第二届全国多语言知识库建设联合学术研讨会论文集[C];2010年
3 董兴华;周俊林;郭树盛;吐尔洪·吾司曼;;基于短语的汉维(维汉)统计机器翻译研究[A];少数民族青年自然语言处理技术研究与进展——第三届全国少数民族青年自然语言信息处理、第二届全国多语言知识库建设联合学术研讨会论文集[C];2010年
4 张育;李良友;贡正仙;周国栋;;粘贴模型在依存语法统计机器翻译中的应用[A];中国计算语言学研究前沿进展(2009-2011)[C];2011年
5 王春荣;宝美荣;王斯日古楞;;内蒙古师范大学CWMT2011蒙汉机器翻译系统评测技术报告[A];机器翻译研究进展——第七届全国机器翻译研讨会论文集[C];2011年
6 杜金华;王莎;;西安理工大学统计机器翻译系统技术报告(英文)[A];机器翻译研究进展——第七届全国机器翻译研讨会论文集[C];2011年
7 梁芳丽;李淼;李文;陈雷;乌达巴拉;;统计机器翻译中的源语言重排序方法研究[A];中国计算语言学研究前沿进展(2009-2011)[C];2011年
8 姚树杰;肖桐;朱靖波;;基于句对质量和覆盖度的统计机器翻译训练语料选取[A];第五届全国青年计算语言学研讨会论文集[C];2010年
9 巢文涵;李舟军;;ZZX_MT系统CWMT2011评测报告[A];机器翻译研究进展——第七届全国机器翻译研讨会论文集[C];2011年
10 李响;徐金安;刘群;吕雅娟;姜文斌;;移动终端机器翻译设备的解码定点化方法[A];第五届全国青年计算语言学研讨会论文集[C];2010年
中国博士学位论文全文数据库 前10条
1 蒋宏飞;基于同步树替换文法的统计机器翻译方法研究[D];哈尔滨工业大学;2010年
2 段楠;统计机器翻译的一致性解码方法研究[D];天津大学;2012年
3 刘水;融入头—修饰词调序模型的短语统计机器翻译方法研究[D];哈尔滨工业大学;2011年
4 黄书剑;统计机器翻译中的词对齐研究[D];南京大学;2012年
5 陈毅东;基于短语的统计机器翻译模型若干关键技术研究[D];厦门大学;2008年
6 林建方;词搭配抽取及在信息检索中的应用研究[D];哈尔滨工业大学;2010年
7 朱聪慧;汉英动词次范畴相关技术的研究[D];哈尔滨工业大学;2009年
8 王博;机器翻译系统的自动评价及诊断方法研究[D];哈尔滨工业大学;2010年
9 蔡柯柯;基于查询特征上下文的检索模型研究[D];浙江大学;2007年
10 薛永增;统计机器翻译若干关键技术研究[D];哈尔滨工业大学;2007年
中国硕士学位论文全文数据库 前10条
1 张育;基于依存语法的统计机器翻译研究[D];苏州大学;2011年
2 宋美娜;基于词缀特征的汉蒙统计机器翻译系统[D];内蒙古大学;2010年
3 银花;基于短语的蒙汉统计机器翻译研究[D];内蒙古师范大学;2011年
4 李天宁;词对齐技术研究及统计机器翻译平台的构建[D];东北大学;2009年
5 应玉龙;汉蒙词法分析及其在统计机器翻译中的应用[D];中国科学技术大学;2010年
6 蓝翔;采用统计机器翻译模型的复述生成技术研究[D];哈尔滨工业大学;2010年
7 张春越;统计机器翻译中树到串对齐模板模型系统实现和比较研究[D];哈尔滨工业大学;2010年
8 李文;形态非对称汉蒙统计机器翻译模型构造方法研究[D];中国科学技术大学;2011年
9 王志杰;统计机器翻译系统在手持设备上的研究与实现[D];内蒙古大学;2012年
10 狄萍;基于短语的统计机器翻译的研究[D];苏州大学;2010年
中国重要报纸全文数据库 前1条
1 周滢;走向新时代[N];中国邮政报;2010年
中国知网广告投放
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978