48. Формальный подход к оценке качества перевода. Методы. Особенности реализаций.

Современные системы МП не могут дать того идеального перевода, которого ожидают пользователи. При работе обнаруживается ряд погрешностей при переводе текста. Поэтому в любом из современных видов машинного перевода необходимо участие человека-редактора. Качество перевода зависит от тематики и стиля исходного текста.

Машинный перевод художественных текстов практически всегда оказывается неудовлетворительного качества.

Для технических документов при наличии специализированных машинных словарей и некоторой настройке системы на особенности того или иного типа текстов возможно получение перевода приемлемого качества, который нуждается лишь в небольшой редакторской корректировке. «Электронные переводчики», зачастую, сталкиваются с теми же проблемами, что и живые люди. Так, недостатком некоторых переводчиков является неточность перевода слов, имеющих несколько значений. Подобно этому, возникают проблемы с переводом устоявшихся выражений (фразеологизмов), чаще всего переводчик выдает набор «голых» слов, не связанных грамматически. Чем более формализован стиль исходного документа, тем большего качества перевода можно ожидать. Самых лучших результатов при использовании машинного перевода можно достичь для текстов, написанных в техническом (различные описания и руководства) и официально-деловом стиле.

Применение машинного перевода без настройки на тематику (или с намеренно неверной настройкой) служит предметом многочисленных бродящих по Интернету шуток. Из пространных примеров наиболее известен текст «Гуртовщики Мыши» (перевод компьютерной документации программой Poliglossum на основе медицинского, коммерческого и юридического словарей); из кратких - фраза «My cat has given birth to four kittens, two yellow, one white and one black», которую программа ПРОМТ превращает в «Мой кот родил четырёх котят, два жёлтых цвета, одно белое и одного афроамериканца». Чаще всего подобные шутки связаны с тем, что программа не распознаёт контекст фразы и переводит термины дословно, к тому же не отличая собственных имён от обычных слов.

Качество машинного перевода также зависит от:

- объема словаря;

- объема информации, приписываемой лексическим единицам;

- соответствия словаря предметной области;

- работы алгоритмов анализа и синтеза.

Современные аппаратные и программные средства допускают использование словарей большого объема, содержащих подробную грамматическую информацию. Информация м.б. представлена как в декларативной (описательной), так и в процедурной (учитывающей потребности алгоритма) форме.

Системные характеристики:

- скорость и время выполнения перевода; - характеристики редактирования;

- словари (возможность и легкость их обновления); - отказоустойчивость;

- удобство представления информации.

Критерии оценки выходных текстов:

- Сопоставление содержания оригинала и перевода:

точность перевода м. оценить как интеллектуально (с привлечением эксперта), так и обратным переводом и сравнением текстов.

правильный перевод терминологии определяется с привлечением экспертов по предметной области (часто – пользователь системы).

понятность оценивается пользователем интуитивно.

- Характеристики представления на языке перевода:

• естественность оценивается пользователем и \ или экспертом.

• лингвистическая правильность оценивается экспертом – лингвистом.

• связность оценивается пользователем интуитивно.

Методы оценки качества выходных текстов:

• обратный перевод выполняется или программой-переводчиком, или человеком.

• сравнение с эталонным переводом – из мультиязычного корпуса текстов.

• денотативный метод - оценивается денотатная структура оригинала и перевода.

• анализ ошибок по лингвистическим уровням – выделяются уровни, представляющие интерес: лексический, синтаксический (для каждого отдельно анализируются ошибки).

Нарушение лексической правильности при:

- переводе имен собственных; - переводе аббревиатур; - переводе терминологии;

+ неверное снятие конверсионной омонимии

Возможные пути повышения качества перевода:

- занесение лексических единиц и их сочетаний в автоматический словарь;

- усовершенствование способа описания лексических единиц в автоматическом словаре.