Аннотация:
Представлены данные, полученные в ходе наблюдения за обучением системы нейронного машинного перевода (НМП). Проведена количественная оценка работы системы НМП с помощью индикаторов. В качестве экспериментального материала были использованы 250 русскоязычных текстовых фрагментов, для каждого из которых ежемесячно в течение одного года фиксировался перевод на французский язык, выполненный с помощью системы НМП Google. Фиксация переводов была реализована посредством их аннотирования в надкорпусной базе данных (НБД), в результате чего была сформирована серия из 12 аннотаций для каждого из 250 текстовых фрагментов. Аннотирование переводов позволило не только зафиксировать допущенные в переводе ошибки в случае их наличия, но и определить категорию нестабильности НМП, указывающую на изменения качества перевода или на их отсутствие. Цель статьи — представить разработанный индикаторный подход и пример его применения для оценки результатов обучения искусственной нейронной сети (ИНС).
Образец цитирования:
А. Ю. Егорова, И. М. Зацман, М. Г. Кружков, В. А. Нуриев, “Машинный перевод: индикаторная оценка результатов обучения искусственной нейронной сети”, Системы и средства информ., 30:4 (2020), 124–137
\RBibitem{EgoZatKru20}
\by А.~Ю.~Егорова, И.~М.~Зацман, М.~Г.~Кружков, В.~А.~Нуриев
\paper Машинный перевод: индикаторная оценка результатов обучения искусственной нейронной сети
\jour Системы и средства информ.
\yr 2020
\vol 30
\issue 4
\pages 124--137
\mathnet{http://mi.mathnet.ru/ssi741}
\crossref{https://doi.org/10.14357/08696527200412}
\elib{https://elibrary.ru/item.asp?id=44264286}
Образцы ссылок на эту страницу:
https://www.mathnet.ru/rus/ssi741
https://www.mathnet.ru/rus/ssi/v30/i4/p124
Эта публикация цитируется в следующих 4 статьяx:
Anna Egorova, Mikhail Kruzhkov, Vitaly Nuriev, Igor Zatsman, “Interval evaluation of temporal (in)stability for neural machine translation”, Discov Artif Intell, 5:1 (2025)
А. Ю. Егорова, И. М. Зацман, В. О. Романенко, “Машинный перевод с помощью ChatGPT: мониторинг воспроизводимости результатов”, Системы и средства информ., 33:3 (2023), 117–128
А. Ю. Егорова, И. М. Зацман, М. Г. Кружков, В. А. Нуриев, “Индикаторная оценка нестабильности нейронного машинного перевода”, Системы и средства информ., 31:2 (2021), 139–151
А. Ю. Егорова, И. М. Зацман, В. А. Нуриев, “Экспертная оценка машинного перевода: классификация ошибок”, Системы и средства информ., 31:3 (2021), 144–157