Аннотация:
Представлены данные, полученные в результате наблюдения за работой системы нейронного машинного перевода (НМП), а также анализа допущенных в переводе ошибок. В ходе эксперимента получена количественная оценка нестабильности НМП с помощью индикаторов. Экспериментальным материалом послужили 250 русскоязычных текстовых фрагментов, для каждого из которых ежемесячно в течение одного года фиксировался как перевод на французский язык, выполненный с помощью системы НМП Google Translate, так и допущенные в нем ошибки. Фиксация ошибок проведена в процессе аннотирования переводов с помощью надкорпусной базы данных (НБД). В результате ежемесячной обработки переводов была получена серия из 12 аннотаций для каждого из 250 текстовых фрагментов. Аннотирование переводов позволило не только зафиксировать допущенные в переводе ошибки в случае их наличия, но и определить категории нестабильности НМП, указывающие на изменения качества перевода или на отсутствие ошибок. Цель {статьи} состоит в сопоставительном анализе результатов работы Google Translate с учетом временного параметра.
Ключевые слова:
нейронный машинный перевод (НМП), нестабильность машинного перевода, надкорпусная база данных, индикаторная оценка, лингвистическое аннотирование, категории, характеризующие нестабильность НМП.
Поступила в редакцию: 09.03.2021
Тип публикации:
Статья
Образец цитирования:
А. Ю. Егорова, И. М. Зацман, М. Г. Кружков, В. А. Нуриев, “Индикаторная оценка нестабильности нейронного машинного перевода”, Системы и средства информ., 31:2 (2021), 139–151
\RBibitem{EgoZatKru21}
\by А.~Ю.~Егорова, И.~М.~Зацман, М.~Г.~Кружков, В.~А.~Нуриев
\paper Индикаторная оценка нестабильности нейронного машинного перевода
\jour Системы и средства информ.
\yr 2021
\vol 31
\issue 2
\pages 139--151
\mathnet{http://mi.mathnet.ru/ssi772}
\crossref{https://doi.org/10.14357/08696527210213}
Образцы ссылок на эту страницу:
https://www.mathnet.ru/rus/ssi772
https://www.mathnet.ru/rus/ssi/v31/i2/p139
Эта публикация цитируется в следующих 3 статьяx:
A. Yu. Egorova, I. M. Zatsman, V. O. Romanenko, “Method for Assessing the Repeatability of ChatGPT Machine Translation Results”, Autom. Doc. Math. Linguist., 58:6 (2024), 453
А. Ю. Егорова, И. М. Зацман, В. О. Романенко, “Машинный перевод с помощью ChatGPT: мониторинг воспроизводимости результатов”, Системы и средства информ., 33:3 (2023), 117–128
А. Ю. Егорова, И. М. Зацман, В. А. Нуриев, “Экспертная оценка машинного перевода: классификация ошибок”, Системы и средства информ., 31:3 (2021), 144–157