Обратный перевод: оценка и развлечение машинным переводом.
Round-trip translation
Обратный перевод: что это такое и зачем нужен? Оценка качества машинного перевода, тесты и развлечения. Исследование показывает неэффективность метода.
Сравнивайте с английским: нажмите на абзац — оригинал откроется в окне. Кнопка EN под абзацем показывает его прямо в тексте.
Введение
Обратный перевод (RTT), также известный как перевод туда и обратно, рекурсивный перевод и двунаправленный перевод, – это процесс перевода слова, фразы или текста на другой язык (прямой перевод), а затем перевода результата обратно на исходный язык (обратный перевод) с использованием программного обеспечения машинного перевода (MT). Он часто используется людьми, не являющимися профессиональными переводчиками, для оценки системы машинного перевода или для проверки пригодности текста для машинного перевода, когда они не владеют целевым языком. Поскольку полученный текст часто может существенно отличаться от оригинала, RTT также может быть развлечением. В исследовании, в котором использовались автоматические методы оценки BLEU и F-мера, сравнивались пять различных бесплатных онлайн-программ перевода, оценивая качество как прямого, так и обратного перевода, и не было выявлено корреляции между качеством прямого перевода и качеством обратного перевода (то есть высокое качество прямого перевода не всегда соответствовало высокому качеству обратного перевода). Автор заключил, что RTT является ненадёжным методом прогнозирования качества программного обеспечения для машинного перевода, не на уровне отдельных предложений, а для более крупных текстов.
Round trip translation (RTT), also known as back and forth translation, recursive translation and bi directional translation, is the process of translating a word, phrase or text into another language (forward translation), then translating the result back into the original language (back translation), using machine translation (MT) software. It is often used by laypeople to evaluate a machine translation system, or to test whether a text is suitable for MT when they are unfamiliar with the target language. Because the resulting text can often differ substantially from the original, RTT can also be a source of entertainment. A study using the automatic evaluation methods BLEU and F score compared five different free online translation programs, evaluating the quality of both the forward translation and the back translation, and found no correlation between the quality of the forward translation and the quality of the back translation (i. e., a high quality forward translation did not always correspond to a high quality back translation). The author concluded that RTT was a poor method of predicting the quality of machine translation software. not on a sentence by sentence basis but for larger texts.
Подходящее для машинного перевода текстовое обеспечение
Также предлагается использовать RTT для определения пригодности текста для машинного перевода. Идея заключается в том, что если RTT приводит к тексту, близкому к оригиналу, то текст подходит для машинного перевода. Если после применения RTT полученный текст оказывается неточным, исходный текст можно редактировать до достижения удовлетворительного результата. Одно из исследований, рассматривавшее RTT как способ оценки качества систем машинного перевода, также изучало его способность предсказывать пригодность текста для машинного перевода. В нем было обнаружено, что использование различных типов текстов не выявило никакой корреляции между качеством прямого перевода и качеством обратного перевода. Другие варианты предполагают пропуск текста через несколько языков перед переводом обратно в исходный язык или многократный перевод текста туда и обратно, пока не будет достигнуто равновесие (то есть результат обратного перевода будет идентичен тексту, использованному для прямого перевода). RTT в качестве развлечения встречается в романе Филипа К. Дика «Галактический целитель». Главный герой пропускает названия книг и пословицы через RTT, а затем предлагает друзьям угадать оригинал. В австралийском телешоу Spicks and Specks был конкурс под названием «Turning Japanese», в котором использовался RTT для текстов песен. Участникам необходимо было правильно угадать название песни, из которой взяты эти слова.
It is also suggested that RTT can be used to determine whether a text is suitable for machine translation. The idea being that if RTT results in a text that is close to the original, the text is suitable for MT. If after using RTT, the resulting text is inaccurate, the source text can then be edited until a satisfactory result is achieved. One of the studies looking at RTT as a means of measuring MT system quality also looked at its ability to predict whether a text was suitable for machine translation. It found that using different types of text also did not result in any correlation between the quality of the forward translation and the quality of the back translation. Other variations send the text through several languages before translating it back into the original or continue translating the text back and forth until it reaches equilibrium (i. e., the result of the back translation is identical to the text used for the forward translation). RTT as entertainment appeared in Philip K. Dick's novel Galactic Pot Healer. The main character runs book titles and sayings through RTT then has his friends try to guess the original. The Australian television show Spicks and Specks had a contest called "Turning Japanese" which used RTT on song lyrics. Contestants needed to correctly guess the title of the song from which the lyrics were taken.