廈門大學(xué)第四屆機(jī)器翻譯研討會評測系統(tǒng)描述.ppt

廈門大學(xué)第四屆機(jī)器翻譯研討會評測系統(tǒng)描述,陳毅東 史曉東 周昌樂 ydchen, mandel, 廈門大學(xué)信息科學(xué)與技術(shù)學(xué)院智能科學(xué)與技術(shù)系 2008年11月 北京,提綱,概述 機(jī)器翻譯系統(tǒng)概要 系統(tǒng)融合方法概要 測評數(shù)據(jù)與結(jié)果 小結(jié),提綱,概述 機(jī)器翻譯系統(tǒng)概要 系統(tǒng)融合方法概要 測評數(shù)據(jù)與結(jié)果 小結(jié),概述,廈門大學(xué)參加了 漢英新聞領(lǐng)域機(jī)器翻譯（開放） 漢英新聞領(lǐng)域系統(tǒng)融合 英漢新聞領(lǐng)域機(jī)器翻譯（受限） 英漢科技領(lǐng)域機(jī)器翻譯（受限） 使用的模型 漢英機(jī)器翻譯：短語，短語+規(guī)則 英漢機(jī)器翻譯：短語+規(guī)則、規(guī)則,使用的融合方法和系統(tǒng)融合評測中使用的相同,提綱,概述 機(jī)器翻譯系統(tǒng)概要 系統(tǒng)融合方法概要 測評數(shù)據(jù)與結(jié)果 小結(jié),機(jī)器翻譯系統(tǒng)概要（1）,統(tǒng)計翻譯系統(tǒng) 短語模型 對數(shù)線性模型 融合特征：短語翻譯概率（正向/反向）、詞匯化短語翻譯概率（正向/反向）、語言模型、長度懲罰因子、短語懲罰因子 單調(diào)解碼，動態(tài)規(guī)劃方法 漢英機(jī)器翻譯評測中，我們的短語翻譯系統(tǒng)則結(jié)合了基于組塊的詞語調(diào)序模型,機(jī)器翻譯系統(tǒng)概要（2）,規(guī)則翻譯系統(tǒng) 基本模塊： 詞法分析句法分析詞義消歧譯文生成 采用依存文法描述英語和漢語，文法由程序來描述 詞典條目大約10萬 結(jié)合了部分TM技術(shù) 沒有專門針對這次評測進(jìn)行調(diào)整,提綱,概述 機(jī)器翻譯系統(tǒng)概要 系統(tǒng)融合方法概要 測評數(shù)據(jù)與結(jié)果 小結(jié),系統(tǒng)融合方法概要（1）,早在1994年就有研究者研究多引擎翻譯系統(tǒng)。 多引擎系統(tǒng)的研究可以粗略地分成兩類： 簡單地在各系統(tǒng)的輸出中選出一個最佳的結(jié)果。 從各系統(tǒng)的輸出中各選取最佳片段并構(gòu)成新的結(jié)果。 由于融合粒度更細(xì)，第二類方法常?？梢垣@得更好的融合效果。 第二類系統(tǒng)融合技術(shù)需要解決的兩個問題： 必須從候選翻譯中抽取出與原文相對應(yīng)的翻譯片段。 必須在這些可用的翻譯片段中篩選并組合成新的翻譯結(jié)果。,系統(tǒng)融合方法概要（2）,參考文獻(xiàn) Chen Yu, Andreas Eisele, Christian Federmann, Eva Hasler, Michael Jellinghaus, and Silke Theison. 2007. Multi-Engine Machine Translaiton with an Open-Source Decoder for Statistical Machine Translaiton. In: Proceedings of the Second Workshop on Statistical Machine Translation, Prague, 193-196.,提綱,概述 機(jī)器翻譯系統(tǒng)概要 系統(tǒng)融合方法概要 測評數(shù)據(jù)與結(jié)果 小結(jié),評測數(shù)據(jù)與結(jié)果（1）,使用的外部工具 GIZA+工具包對雙語語料進(jìn)行詞對齊，訓(xùn)練模式是15H53545 使用SRI語言模型工具包來訓(xùn)練語言模型 使用CRF+工具包來訓(xùn)練組塊分析器（漢英測評中）。,評測數(shù)據(jù)與結(jié)果（2）,漢英新聞機(jī)器翻譯評測 數(shù)據(jù) 結(jié)果,評測數(shù)據(jù)與結(jié)果（3）,漢英新聞系統(tǒng)融合評測 根據(jù)諸系統(tǒng)在ssmt2007測試集上的成績僅挑選了前4名的系統(tǒng)參與融合 采用的數(shù)據(jù)情況同漢英新聞機(jī)器翻譯評測 結(jié)果 constrast系統(tǒng)使用和漢英新聞機(jī)器翻譯評測相同的參數(shù)，primary系統(tǒng)則將長度懲罰因子參數(shù)增加到原來的兩倍。,英漢新聞機(jī)器翻譯評測 數(shù)據(jù)情況 結(jié)果,評測數(shù)據(jù)與結(jié)果（5）,英漢科技機(jī)器翻譯評測 數(shù)據(jù)情況 結(jié)果 xmu-constrast-memt2系統(tǒng)僅使用科技語料,提綱,概述 機(jī)器翻譯系統(tǒng)概要 系統(tǒng)融合方法概要 測評數(shù)據(jù)與結(jié)果 小結(jié),小結(jié),本次評測我們參加的系統(tǒng)在技