到目前為止,口譯仍然是一個(gè)相對(duì)不變的職業(yè),軟件的進(jìn)步,很大程度上是因?yàn)樗且环N細(xì)微的藝術(shù)形式。
雖然在翻譯生產(chǎn)力工具,機(jī)器翻譯(MT)和測(cè)量MT質(zhì)量等主題上已經(jīng)說(shuō)了很多,但是之前對(duì)于如何將相似的質(zhì)量評(píng)估(QE)方法應(yīng)用于翻譯領(lǐng)域的研究相對(duì)較少。
由馬里蘭大學(xué)的Jordan Boyd-Graber和卡內(nèi)基梅隆大學(xué)的Graham Neubig領(lǐng)導(dǎo)的一組美國(guó)研究人員剛剛發(fā)表了一篇題為“自動(dòng)估計(jì)同聲傳譯器性能”的論文。在這里,我們概述了論文的發(fā)現(xiàn)并研究了它的含義。我們還包括作者的問(wèn)答和專業(yè)口譯員的評(píng)論。
構(gòu)建實(shí)時(shí)質(zhì)量反饋循環(huán)
旨在幫助口譯員(CAI)的軟件工具已經(jīng)存在并通過(guò)在口譯任務(wù)期間提供術(shù)語(yǔ)提示而起作用。這些結(jié)果好壞參半,因?yàn)闆](méi)有任何真正的方法可以計(jì)算出提供翻譯的信息量和時(shí)間。
太多或無(wú)關(guān)的信息會(huì)分散注意力,并且會(huì)干擾認(rèn)知過(guò)程,從而妨礙翻譯的表現(xiàn)。
為了解決這個(gè)問(wèn)題,該團(tuán)隊(duì)希望開(kāi)發(fā)一種實(shí)時(shí)評(píng)估口譯員表現(xiàn)的方法,即能夠判斷口譯員是否可以從那里獲得軟件幫助。如果是,生產(chǎn)力軟件工具將選擇提供術(shù)語(yǔ)提示。
生成可靠的實(shí)時(shí)性能評(píng)估是使解釋器的軟件輔助具有選擇性,因此更有用,以及提高同聲傳譯(SI)輸出質(zhì)量的關(guān)鍵。
為此,首先需要基于SI輸出的樣本開(kāi)發(fā)質(zhì)量估計(jì)(QE)方法,然后將其應(yīng)用于實(shí)時(shí)性能方案。
開(kāi)發(fā)質(zhì)量評(píng)估方法
簡(jiǎn)單地使用現(xiàn)有的機(jī)器翻譯(MT)QE方法是不夠好的,因?yàn)橛性S多線索表明SI輸出的質(zhì)量與指示良好MT輸出的那些不同。例如,當(dāng)翻譯公司的人員掙扎時(shí),他們可能會(huì)產(chǎn)生大量暫停的不穩(wěn)定翻譯,或丟棄他們無(wú)法正確解釋的大部分內(nèi)容。
僅使用現(xiàn)有的機(jī)器翻譯(MT)QE方法就不夠好了
盡管如此,現(xiàn)有的MT QE方法被認(rèn)為是一個(gè)很好的起點(diǎn),研究人員團(tuán)隊(duì)決定使用名為QuEst ++的MT QE模型作為基線。然后,他們通過(guò)添加許多功能來(lái)定制QuEst ++以用于SI輸出,這些功能是解釋器性能的特定指標(biāo)。
1)暫停/猶豫/不完整單詞的比例 – 因?yàn)椤胺g輸出中的猶豫或不完整單詞數(shù)量的增加可能表明翻譯正在努力產(chǎn)生準(zhǔn)確的輸出?!?/p>
2)非特定單詞的比例 – 因?yàn)椤翱谧g員經(jīng)常通過(guò)替換或省略常用名詞來(lái)壓縮輸出,以避免使用特定術(shù)語(yǔ)來(lái)防止冗余或減輕認(rèn)知負(fù)荷?!?/p>
3)“準(zhǔn)”認(rèn)知的比例 – 因?yàn)椤敖忉屝哉Z(yǔ)音中的音譯詞語(yǔ)可以通過(guò)語(yǔ)言接近度來(lái)表示便利翻譯,或者試圖產(chǎn)生翻譯公司不知道的單詞的近似值”。
4)單詞數(shù)量的比率 – “比較源和目標(biāo)長(zhǎng)度以及轉(zhuǎn)錄標(biāo)點(diǎn)符號(hào)的數(shù)量”。
研究人員開(kāi)始在使用英語(yǔ) – 法語(yǔ),英語(yǔ) – 意大利語(yǔ)和英語(yǔ) – 日語(yǔ)翻譯輸出的一系列實(shí)驗(yàn)中測(cè)試這些附加功能的有效性。他們發(fā)現(xiàn)他們的SI QE模型具有統(tǒng)計(jì)上相關(guān)的收益,并且在所有語(yǔ)言中都優(yōu)于METEOR。這對(duì)英日語(yǔ)言特別有效。
接下來(lái)是什么?
基于這些結(jié)果,該團(tuán)隊(duì)提出可以立即使用SI QE方法來(lái)改進(jìn)現(xiàn)有解釋器輔助軟件的性能,以便提高SI輸出。他們還建議未來(lái)的研究工作可以探索其他特征組合可以幫助調(diào)整模型,使其更加適應(yīng)口譯員表現(xiàn)的特殊性。