《電子技術應用》
您所在的位置:首頁 > 其他 > 設計應用 > 基于改進互信息的譯文選擇技術研究
基于改進互信息的譯文選擇技術研究
林曉慶,徐惠紅
(遼東學院 信息技術學院,遼寧 丹東 118003)
摘要: 提出了一種改進互信息的譯文選擇方法,認為詞語的譯文的選擇不是孤立進行的,上下文對譯文的選擇有著重要的意義,通過對已有的互信息公式加入翻譯模型特征進行改進,結合翻譯模型與互信息來選擇最佳譯文,經過BLEU(BiLingual Evaluation Understudy)作為機器評價準則的實驗結果表明,該方法優于傳統的互信息詞語譯文選擇的方法。
Abstract:
Key words :

摘 要:提出了一種改進互信息譯文選擇方法,認為詞語的譯文的選擇不是孤立進行的,上下文對譯文的選擇有著重要的意義,通過對已有的互信息公式加入翻譯模型特征進行改進,結合翻譯模型與互信息來選擇最佳譯文,經過BLEU(BiLingual Evaluation Understudy)作為機器評價準則的實驗結果表明,該方法優于傳統的互信息詞語譯文選擇的方法。
關鍵詞:互信息;譯文選擇;翻譯模型;譯文選擇模型

    譯文選擇是指根據從語料庫中學習翻譯知識,為源語言詞選擇對應的目標語言詞。詞譯文選擇的好壞決定了機器翻譯系統的質量。Gale等人[1]應用基于大型英法對齊語料庫的統計方法,對6個常見的歧義詞的消歧正確率在82%~86%。劉小虎建立多上下文特征的詞義消歧統計模型,對歧義詞“interest”消歧測試的正確率達到80%[2];而通過在英漢機譯系統的譯文選擇中引入改進的ID3機器學習方法[3],歧義詞“interest”消歧測試的正確率可達到91%,荀恩東[4]在譯文選擇中使用以消歧矩陣為計算背景的貪心算法。Dagan[5]等人提出利用目標語同現統計消除源語言歧義的思想。哈爾濱工業大學BT863-2英漢機譯系統繼承Dagan的思想,譯文選擇的正確率為75%。術語相關性計算的研究比較典型,有EMMI weighting measure[6]、Term Similarity[7-9],本文方法與參考文獻[10]中提出的查詢翻譯中用到的方法有些相似。
1 譯文選擇模型
    Ballesteros和Croft[8]認為對語料庫進行共現頻率的統計有助于消除翻譯的歧義問題。他們假定正確的翻譯更可能在同一個目標句子中共現,否則相反。參考文獻[7-9]也使用相類似的方法選擇最佳的詞語翻譯。
    正是因為各個詞之間的關系不是相互獨立的,本文提出詞語相關性和翻譯概率相結合的方法來選擇相應的詞語翻譯,而不是逐詞孤立地翻譯。當翻譯一個詞語時,其他待翻譯詞的候選翻譯會成為它的上下文信息,這是本文進行翻譯選擇的原則。給定一個待翻譯的英文詞語的集合,通過貪心算法和下文中的公式(5)找到每個詞的正確譯文。
    例如,輸入NP(Noun Phrase):IC card intelligent door lock。
    在本文的雙語詞典中,“intelligent”對應的翻譯候選有:(1) 智能國;(2) 智力。依次類推本例中的目標集合T為{“IC”,“卡”,“門”,“通道”,“鎖”,“鎖頭”}。目標集合的獲得是通過在雙語詞典中查找每個源語言詞對應的漢語翻譯候選組成的集合。通過公式(1)~(3)[11]計算,找到最可能的目標翻譯,上例計算得到的翻譯結果為“IC 卡 智能 門 鎖”。



    具體算法如圖1所示。


2  實驗結果及分析
    本文將翻譯概率加入到公式(1)中,結合翻譯概率與互信息來進行譯文的選擇,對比實驗結果可知,翻譯概率對翻譯結果有較大的提高。
    為了充分證明該結果,從英漢術語實例庫中,隨機挑選500個實例進行對比測試,采用NIST發布的最新版本mteval-v11b.pl作為自動翻譯結果的評測工具,實驗結果的曲線圖如圖2所示。

    從表1中可以看出,加入翻譯概率后,從1-gram到4-gram的BLEU值都有所提高。為了更加清楚地顯示其對比效果,可以參見圖2。

 
     舉一具體實例來說明上面原因。例如:輸入NP:Safety non-tipping mosquito incense device,在不加入翻譯概率時,只通過公式(1)計算得出翻譯結果為:“安全不倒蚊蚊扣掣座”。
    分析其原因,從表2可知,在沒有加入翻譯概率之前,通過公式(2)計算,“incense”選擇了“蚊”這個譯文,因為“蚊”的值最大,如表3所示。在加入翻譯概率改進之后,通過公式(5)計算,結果如表2所示,由于其翻譯概率很小,因此就會選擇到更合適的譯文“香”。(“#”表示選擇的譯文)根據表4,正確的譯文為:“安全 不倒 蚊 香 器”。

    譯文選擇的好壞是機器翻譯質量提高的關鍵。本文提出的改進互信息的譯文選擇方法,其中對互信息的理論作了簡單介紹,對譯文選擇的相關研究也進行了簡單描述。通過對比實驗分析證明了該方法在已有的互信息方法上加入翻譯模型特征后,翻譯效果得到顯著地提高,BLEU值提高了0.1左右。
參考文獻
[1] WILLIAM G, KENNETH C, DAVID Y. Using bilingual materials to develop word sense disambiguation methods[C]. The 4th Int’l Conf on Theoretical and Methodological Issues in Machine Translation, Montreal, Canada, 1992.
[2] LIU Xiao Hu, Li Sheng , Zhao Tie Jun . Statistical model selection for word sense disambiguation(in Chinse)[J]. Communications of Chinese and Oriental Languages Information Processing Society, 1997, 7(2): 69-75.
[3] 劉小虎. 英漢機器翻譯中詞義消歧的研究[M]. 哈爾濱:哈爾濱工業大學, 1997.
[4] 荀恩東, 李生, 趙鐵軍. 基于漢語二元同現的統計詞義消歧方法研究[J].高技術通訊, 1998, 10(8): 21-25.
[5] DAGAN,  LILLIAN L, FERNANDO P. Similarity-based models of cooccurrence probabilities[J]. Machine Learning, Special Issue on Natural Language Learning, 1999, 34(1-3): 43-69.
[6] RIJSBERGEN V . Information retrieval[J]. 2nd ed. Butterworths, London, 1979.
[7] ADRIANI M. Using statistical term similarity for sense disambiguation in cross-language information Retrieval[C]. Information Retrieval, 2000,2: 69-80.
[8] BALLESTEROS L, CROFT  W B Resolving ambiguity for cross-language retrieval[C]. In Proceedings of the 21st International Conference on Research and Development in Information Retrieval,1998.
[9] BALLESTEROS L , CROFT W B. Phrasal translation and query expansion  techniques for cross-language information  retrieval[C]. In: Proceedings of the 20th International Conference on Research and Development in Information Retrieval, 1997: 84-91.
[10] GAO J F , NIE J Y. A study of statistical models for query translation:finding a good unit of translation[C]. In SIGIR, 2006.
[11]  GAO Jian Feng, NIE Jian Yun, ZHANG Jian, et al. Improving query translation for cross-language information retrieval using statistical models[C]. In SIGIR’01, NewOrleans, Louisiana, 2001: 96-104.
 

此內容為AET網站原創,未經授權禁止轉載。
亚洲一区二区欧美_亚洲丝袜一区_99re亚洲国产精品_日韩亚洲一区二区
欧美另类99xxxxx| 国产一区二区三区在线观看精品 | 亚洲美女视频在线观看| 激情成人亚洲| 国产手机视频精品| 国产精品欧美日韩一区| 国产精品国产三级国产aⅴ无密码| 欧美黄在线观看| 欧美mv日韩mv国产网站| 老司机免费视频一区二区| 久久久99精品免费观看不卡| 欧美在线视频导航| 欧美一区二区三区在线免费观看| 午夜免费日韩视频| 亚洲欧美日韩一区二区三区在线观看 | 久久国产福利| 久久成人免费网| 亚洲成人自拍视频| 亚洲电影在线免费观看| 久久国产精品久久w女人spa| 久久精品视频在线播放| 欧美一区国产二区| 亚洲第一在线综合在线| 亚洲电影视频在线| 最新国产成人在线观看| 亚洲日本中文| 一区二区三区精品视频| 在线一区二区日韩| 亚洲免费人成在线视频观看| 亚洲综合电影| 久久国产精品99国产精| 久久久噜噜噜久久中文字免| 另类专区欧美制服同性| 欧美高清在线一区二区| 欧美日韩国产区| 欧美新色视频| 国产欧美日韩免费| 国内自拍一区| 亚洲国产精品久久久久婷婷884 | 欧美一级电影久久| 亚洲第一精品在线| 日韩一级精品| 亚洲免费网址| 久久久久久91香蕉国产| 久久国产精品亚洲va麻豆| 久久精品视频网| 老司机免费视频一区二区| 欧美激情综合色综合啪啪| 欧美午夜视频一区二区| 国产婷婷色综合av蜜臀av | 亚洲国产成人精品久久| 一本久久综合| 久久gogo国模裸体人体| 99精品国产热久久91蜜凸| 亚洲欧美在线另类| 另类天堂视频在线观看| 欧美色道久久88综合亚洲精品| 国产精一区二区三区| 在线免费一区三区| 中日韩高清电影网| 久久成人免费| 亚洲一区二区毛片| 久久免费视频网| 欧美日韩一卡| 激情久久中文字幕| 一本色道88久久加勒比精品| 久久狠狠亚洲综合| 亚洲私人黄色宅男| 久久亚洲高清| 国产精品v亚洲精品v日韩精品| 国产亚洲欧美另类一区二区三区| 亚洲人成欧美中文字幕| 午夜精品久久久久久久| 日韩网站在线观看| 久久精彩免费视频| 欧美色精品天天在线观看视频| 狠狠色狠狠色综合日日tαg| 亚洲天堂偷拍| 亚洲精品字幕| 久久精品欧美日韩| 欧美性大战久久久久久久蜜臀| 经典三级久久| 亚洲欧美国产精品桃花| 99综合电影在线视频| 久久亚洲美女| 国产乱码精品一区二区三区忘忧草| 91久久精品日日躁夜夜躁国产| 欧美影院精品一区| 亚洲欧美日韩一区二区三区在线| 欧美国产激情二区三区| 国产一区二区三区高清播放| 亚洲视频在线看| 99精品视频免费观看| 麻豆久久婷婷| 国产一区二区三区网站| 亚洲欧美激情视频在线观看一区二区三区| 亚洲美洲欧洲综合国产一区| 久久久久欧美精品| 国产欧美另类| 亚洲伊人一本大道中文字幕| 一区二区三区不卡视频在线观看| 免费看的黄色欧美网站| 国产亚洲制服色| 亚洲女人天堂av| 亚洲在线视频| 欧美日一区二区在线观看| 亚洲国产日韩欧美在线99| 亚洲高清中文字幕| 久久精品国产在热久久| 国产精品一二| 亚洲一区二区三区精品在线观看| 中文在线资源观看网站视频免费不卡| 欧美国产视频一区二区| 在线观看久久av| 亚洲第一精品夜夜躁人人躁| 久久精品免费播放| 国产伦精品一区二区三| 亚洲一级片在线观看| 亚洲一区二区成人| 欧美性色综合| 在线视频亚洲一区| 亚洲综合首页| 国产精品久在线观看| 中文av一区二区| 亚洲——在线| 国产精品午夜在线观看| 亚洲欧美日韩精品在线| 欧美一级大片在线免费观看| 国产精品专区h在线观看| 亚洲综合欧美日韩| 欧美制服丝袜第一页| 国产欧美日本一区二区三区| 欧美一区二区日韩一区二区| 久久国产色av| 国内精品久久久久影院 日本资源 国内精品久久久久伊人av | 亚洲第一页中文字幕| 欧美粗暴jizz性欧美20| 亚洲欧洲精品一区二区三区| 野花国产精品入口| 欧美午夜片在线免费观看| 亚洲一区二区精品在线| 久久av一区二区| 一区二区在线不卡| 亚洲欧洲精品一区二区三区波多野1战4 | 久久久91精品国产一区二区精品| 国内精品美女在线观看| 亚洲国产综合在线| 欧美激情亚洲另类| 一区二区三区四区国产| 欧美一区二区三区免费看| 国产在线精品成人一区二区三区| 亚洲国产老妈| 欧美日韩在线播放三区| 亚洲免费在线看| 久久综合狠狠综合久久综青草 | 国产在线精品一区二区中文| 亚洲大胆人体在线| 欧美美女bb生活片| 在线亚洲成人| 久久av老司机精品网站导航| 在线精品亚洲| 宅男精品导航| 国产手机视频一区二区| 99re6热在线精品视频播放速度| 欧美午夜一区二区三区免费大片| 香蕉乱码成人久久天堂爱免费 | 久久精品在线播放| 亚洲国产日韩一区| 性做久久久久久久免费看| 国内外成人免费视频| 中国亚洲黄色| 国产婷婷色一区二区三区在线| 亚洲人成免费| 国产精品女人久久久久久| 亚洲国产二区| 国产精品国产三级国产专播品爱网 | 久久精品国产亚洲一区二区三区 | 男女激情视频一区| 一区二区三区四区五区精品| 久久久精品一区| 99综合视频| 久久尤物电影视频在线观看| 日韩午夜在线| 麻豆freexxxx性91精品| 亚洲一级片在线看| 欧美成在线观看| 午夜精彩视频在线观看不卡| 欧美激情精品久久久久久大尺度| 亚洲综合丁香| 欧美日韩精品在线视频| 欧美主播一区二区三区| 欧美三级电影一区| 久久精品伊人 | 老司机久久99久久精品播放免费| 一个色综合av| 欧美电影免费网站| 欧美一区二区网站| 国产精品欧美日韩一区二区| 亚洲精品一区在线观看| 狠狠v欧美v日韩v亚洲ⅴ|