《電子技術應用》
您所在的位置:首頁 > 其他 > 設計應用 > 基于改進互信息的譯文選擇技術研究
基于改進互信息的譯文選擇技術研究
林曉慶,徐惠紅
(遼東學院 信息技術學院,遼寧 丹東 118003)
摘要: 提出了一種改進互信息的譯文選擇方法,認為詞語的譯文的選擇不是孤立進行的,上下文對譯文的選擇有著重要的意義,通過對已有的互信息公式加入翻譯模型特征進行改進,結合翻譯模型與互信息來選擇最佳譯文,經過BLEU(BiLingual Evaluation Understudy)作為機器評價準則的實驗結果表明,該方法優于傳統的互信息詞語譯文選擇的方法。
Abstract:
Key words :

摘 要:提出了一種改進互信息譯文選擇方法,認為詞語的譯文的選擇不是孤立進行的,上下文對譯文的選擇有著重要的意義,通過對已有的互信息公式加入翻譯模型特征進行改進,結合翻譯模型與互信息來選擇最佳譯文,經過BLEU(BiLingual Evaluation Understudy)作為機器評價準則的實驗結果表明,該方法優于傳統的互信息詞語譯文選擇的方法。
關鍵詞:互信息;譯文選擇;翻譯模型;譯文選擇模型

    譯文選擇是指根據從語料庫中學習翻譯知識,為源語言詞選擇對應的目標語言詞。詞譯文選擇的好壞決定了機器翻譯系統的質量。Gale等人[1]應用基于大型英法對齊語料庫的統計方法,對6個常見的歧義詞的消歧正確率在82%~86%。劉小虎建立多上下文特征的詞義消歧統計模型,對歧義詞“interest”消歧測試的正確率達到80%[2];而通過在英漢機譯系統的譯文選擇中引入改進的ID3機器學習方法[3],歧義詞“interest”消歧測試的正確率可達到91%,荀恩東[4]在譯文選擇中使用以消歧矩陣為計算背景的貪心算法。Dagan[5]等人提出利用目標語同現統計消除源語言歧義的思想。哈爾濱工業大學BT863-2英漢機譯系統繼承Dagan的思想,譯文選擇的正確率為75%。術語相關性計算的研究比較典型,有EMMI weighting measure[6]、Term Similarity[7-9],本文方法與參考文獻[10]中提出的查詢翻譯中用到的方法有些相似。
1 譯文選擇模型
    Ballesteros和Croft[8]認為對語料庫進行共現頻率的統計有助于消除翻譯的歧義問題。他們假定正確的翻譯更可能在同一個目標句子中共現,否則相反。參考文獻[7-9]也使用相類似的方法選擇最佳的詞語翻譯。
    正是因為各個詞之間的關系不是相互獨立的,本文提出詞語相關性和翻譯概率相結合的方法來選擇相應的詞語翻譯,而不是逐詞孤立地翻譯。當翻譯一個詞語時,其他待翻譯詞的候選翻譯會成為它的上下文信息,這是本文進行翻譯選擇的原則。給定一個待翻譯的英文詞語的集合,通過貪心算法和下文中的公式(5)找到每個詞的正確譯文。
    例如,輸入NP(Noun Phrase):IC card intelligent door lock。
    在本文的雙語詞典中,“intelligent”對應的翻譯候選有:(1) 智能國;(2) 智力。依次類推本例中的目標集合T為{“IC”,“卡”,“門”,“通道”,“鎖”,“鎖頭”}。目標集合的獲得是通過在雙語詞典中查找每個源語言詞對應的漢語翻譯候選組成的集合。通過公式(1)~(3)[11]計算,找到最可能的目標翻譯,上例計算得到的翻譯結果為“IC 卡 智能 門 鎖”。



    具體算法如圖1所示。


2  實驗結果及分析
    本文將翻譯概率加入到公式(1)中,結合翻譯概率與互信息來進行譯文的選擇,對比實驗結果可知,翻譯概率對翻譯結果有較大的提高。
    為了充分證明該結果,從英漢術語實例庫中,隨機挑選500個實例進行對比測試,采用NIST發布的最新版本mteval-v11b.pl作為自動翻譯結果的評測工具,實驗結果的曲線圖如圖2所示。

    從表1中可以看出,加入翻譯概率后,從1-gram到4-gram的BLEU值都有所提高。為了更加清楚地顯示其對比效果,可以參見圖2。

 
     舉一具體實例來說明上面原因。例如:輸入NP:Safety non-tipping mosquito incense device,在不加入翻譯概率時,只通過公式(1)計算得出翻譯結果為:“安全不倒蚊蚊扣掣座”。
    分析其原因,從表2可知,在沒有加入翻譯概率之前,通過公式(2)計算,“incense”選擇了“蚊”這個譯文,因為“蚊”的值最大,如表3所示。在加入翻譯概率改進之后,通過公式(5)計算,結果如表2所示,由于其翻譯概率很小,因此就會選擇到更合適的譯文“香”。(“#”表示選擇的譯文)根據表4,正確的譯文為:“安全 不倒 蚊 香 器”。

    譯文選擇的好壞是機器翻譯質量提高的關鍵。本文提出的改進互信息的譯文選擇方法,其中對互信息的理論作了簡單介紹,對譯文選擇的相關研究也進行了簡單描述。通過對比實驗分析證明了該方法在已有的互信息方法上加入翻譯模型特征后,翻譯效果得到顯著地提高,BLEU值提高了0.1左右。
參考文獻
[1] WILLIAM G, KENNETH C, DAVID Y. Using bilingual materials to develop word sense disambiguation methods[C]. The 4th Int’l Conf on Theoretical and Methodological Issues in Machine Translation, Montreal, Canada, 1992.
[2] LIU Xiao Hu, Li Sheng , Zhao Tie Jun . Statistical model selection for word sense disambiguation(in Chinse)[J]. Communications of Chinese and Oriental Languages Information Processing Society, 1997, 7(2): 69-75.
[3] 劉小虎. 英漢機器翻譯中詞義消歧的研究[M]. 哈爾濱:哈爾濱工業大學, 1997.
[4] 荀恩東, 李生, 趙鐵軍. 基于漢語二元同現的統計詞義消歧方法研究[J].高技術通訊, 1998, 10(8): 21-25.
[5] DAGAN,  LILLIAN L, FERNANDO P. Similarity-based models of cooccurrence probabilities[J]. Machine Learning, Special Issue on Natural Language Learning, 1999, 34(1-3): 43-69.
[6] RIJSBERGEN V . Information retrieval[J]. 2nd ed. Butterworths, London, 1979.
[7] ADRIANI M. Using statistical term similarity for sense disambiguation in cross-language information Retrieval[C]. Information Retrieval, 2000,2: 69-80.
[8] BALLESTEROS L, CROFT  W B Resolving ambiguity for cross-language retrieval[C]. In Proceedings of the 21st International Conference on Research and Development in Information Retrieval,1998.
[9] BALLESTEROS L , CROFT W B. Phrasal translation and query expansion  techniques for cross-language information  retrieval[C]. In: Proceedings of the 20th International Conference on Research and Development in Information Retrieval, 1997: 84-91.
[10] GAO J F , NIE J Y. A study of statistical models for query translation:finding a good unit of translation[C]. In SIGIR, 2006.
[11]  GAO Jian Feng, NIE Jian Yun, ZHANG Jian, et al. Improving query translation for cross-language information retrieval using statistical models[C]. In SIGIR’01, NewOrleans, Louisiana, 2001: 96-104.
 

此內容為AET網站原創,未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
欧美成人免费在线| 国产视频一区在线观看一区免费| 亚洲欧美日韩国产另类专区| 亚洲国产精选| 欧美一级欧美一级在线播放| 亚洲最快最全在线视频| 亚洲精品乱码久久久久久蜜桃麻豆 | 国产欧美一区二区精品忘忧草 | 欧美jizzhd精品欧美巨大免费| 久久精品夜色噜噜亚洲a∨ | 欧美日韩少妇| 欧美日韩伦理在线免费| 欧美日韩精品在线观看| 欧美日韩国产精品专区| 欧美日韩一区二区三区在线| 欧美日本一区二区三区| 欧美人与禽猛交乱配| 欧美日韩综合在线免费观看| 欧美日韩一区二区三区四区在线观看 | 欧美日韩亚洲一区在线观看| 欧美精品 日韩| 欧美高清一区二区| 欧美国产91| 你懂的国产精品永久在线| 免费观看一区| 欧美精品一区在线播放| 欧美日韩一卡| 国产精品日韩专区| 国产亚洲制服色| 激情欧美一区二区三区在线观看| 精品1区2区3区4区| 亚洲欧洲在线免费| 亚洲视频在线观看三级| 亚洲自拍偷拍福利| 久久国产精品亚洲va麻豆| 91久久精品一区| 在线视频一区二区| 欧美一级专区免费大片| 久久综合给合久久狠狠狠97色69| 美女日韩欧美| 欧美日韩高清不卡| 国产精品亚洲欧美| 国模私拍视频一区| 亚洲国产成人久久综合一区| 日韩小视频在线观看| 亚洲欧美日韩国产综合精品二区| 欧美在线一二三区| 99在线精品观看| 亚洲欧美日韩电影| 久久久久综合| 欧美日韩www| 国产欧美精品一区| 亚洲国产精品成人久久综合一区| 一区二区三区精品在线| 欧美一区二区三区播放老司机| 亚洲国产精品一区二区www在线 | 久久久噜久噜久久综合| 欧美日本亚洲韩国国产| 国产免费成人av| 在线观看日韩| 亚洲香蕉伊综合在人在线视看| 久久精品国产一区二区三区免费看| 亚洲另类在线视频| 欧美一区二区三区免费大片| 久久在线视频| 欧美色欧美亚洲另类二区| 国产综合精品一区| 亚洲免费观看高清完整版在线观看| 亚洲中午字幕| 亚洲美女黄色| 久久精品主播| 欧美日韩另类一区| 在线播放国产一区中文字幕剧情欧美| 一区二区久久久久| 亚洲欧洲视频| 欧美永久精品| 欧美三级视频在线观看| 黄页网站一区| 亚洲一区二区精品在线| 亚洲国产成人在线| 午夜欧美视频| 欧美精品首页| 伊人精品在线| 亚洲自啪免费| 中文在线资源观看网站视频免费不卡| 久久久久久久久综合| 国产精品久久久999| 91久久久在线| 亚洲国产一区二区三区在线播| 欧美亚洲一级片| 欧美日韩亚洲激情| 亚洲激情第一页| 久久精品国产精品亚洲精品| 性刺激综合网| 欧美天天视频| 亚洲精品乱码久久久久| 亚洲欧洲日韩在线| 美女精品国产| 激情综合网址| 欧美在线观看一区| 欧美在线免费观看视频| 国产精品99免费看 | 国产精品理论片| 亚洲精品欧洲| 亚洲三级电影在线观看| 久久深夜福利免费观看| 国产日韩精品久久| 亚洲淫片在线视频| 亚洲综合丁香| 欧美性大战久久久久久久| 亚洲国产成人不卡| 亚洲国产精品美女| 久久久亚洲高清| 国产真实乱子伦精品视频| 小黄鸭视频精品导航| 午夜精品久久久久久久99水蜜桃| 欧美日韩亚洲网| 亚洲作爱视频| 亚洲综合色视频| 欧美色精品天天在线观看视频 | 一区二区欧美国产| 欧美日韩的一区二区| 亚洲精品日韩精品| 日韩视频―中文字幕| 欧美大片在线看免费观看| 亚洲激情电影中文字幕| 亚洲免费福利视频| 欧美日韩亚洲一区三区| 99在线|亚洲一区二区| 中文一区二区| 国产精品久久午夜| 亚洲免费影视| 久久精品人人做人人爽| 国产在线国偷精品产拍免费yy| 欧美在线视频一区二区三区| 玖玖视频精品| 亚洲国产精品一区二区久 | av成人老司机| 国产精品多人| 香港久久久电影| 久久久av水蜜桃| 极品少妇一区二区三区| 亚洲激情校园春色| 欧美日韩精品一二三区| 亚洲精品乱码久久久久久蜜桃91| 亚洲小少妇裸体bbw| 国产免费一区二区三区香蕉精| 久久精品国产清高在天天线| 久久一二三国产| 亚洲国产裸拍裸体视频在线观看乱了 | 日韩视频在线免费观看| 亚洲视频高清| 国产精品欧美日韩一区二区| 欧美一二三视频| 女人色偷偷aa久久天堂| 亚洲精品在线二区| 亚洲欧美日韩爽爽影院| 国产亚洲一区在线| 亚洲另类在线视频| 国产精品久久久久久亚洲毛片| 亚洲深爱激情| 久久久91精品国产一区二区精品| 亚洲第一毛片| 亚洲天堂成人| 国产主播一区二区三区| 亚洲精品麻豆| 国产精品日韩欧美| 亚洲高清自拍| 欧美午夜电影完整版| 欧美一区二区三区免费在线看| 欧美~级网站不卡| 中文精品视频| 麻豆精品传媒视频| 一区二区日韩精品| 老司机精品导航| 日韩视频免费观看高清完整版| 欧美专区日韩专区| 91久久在线播放| 欧美一区二区视频在线观看2020| 亚洲成人自拍视频| 欧美一级久久久| 亚洲国产精品精华液2区45| 先锋影音久久| 亚洲黄色天堂| 久久久精品网| 亚洲私人影吧| 欧美成人69av| 午夜精品av| 欧美日韩精品二区| 亚洲大胆人体视频| 国产精品久久久久久久久果冻传媒| 亚洲国产精品一区二区久| 国产精品入口日韩视频大尺度| 亚洲精品一区二区三区樱花| 国产麻豆精品在线观看| 中文亚洲视频在线| 亚洲国产影院| 另类综合日韩欧美亚洲| 亚洲欧美日本国产有色| 欧美日韩另类综合|