The Riddle of (Literary) Machine Translation Quality
Open Access
- 22 December 2023
- journal article
- research article
- Published by Universitat Autonoma de Barcelona in Tradumàtica tecnologies de la traducció
- No. 21,p. 129-159
Abstract
Aquest estudi pretén calibrar la fiabilitat i la validesa de mètriques i algoritmes per avaluar la qualitat de la traducció automàtica en un context literari. Es comparen deu versions traduïdes automàticament d’una història literària, proporcionades per quatre motors de traducció automàtica diferents al llarg d’un període de tres anys, aplicant dues puntuacions quantitatives d’estimació de la qualitat (BLEU i un algoritme de literarietat desenvolupat recentment). L’anàlisi comparativa ofereix una visió no només de la qualitat dels trets estilístics i narratològics de la traducció automàtica, sinó també de criteris de qualitat més tradicionals, com la precisió i la fluidesa. Es constata que les avaluacions no sempre coincideixen i que no posseixen matissos. Se suggereix que les mètriques i els algoritmes tan sols cubreixen una part de la noció de «qualitat», i que és necessari un enfocament més detallat si es pretén captar la qualitat literària potencial de la traducció automàtica i, possiblement, validar-la per mitjà d’aquests instruments.Keywords
This publication has 8 references indexed in Scilit:
- Domain Adaptation and Multi-Domain Adaptation for Neural Machine Translation: A SurveyJournal of Artificial Intelligence Research, 2022
- Gutenberg Goes Neural: Comparing Features of Dutch Human Translations with Raw Neural Machine Translation Outputs in a Corpus of English Literary ClassicsInformatics, 2020
- Literary quality in the eye of the Dutch reader: The National Reader SurveyPoetics, 2020
- Vector space explorations of literary languageLanguage Resources and Evaluation, 2019
- An Empirical Comparison of Domain Adaptation Methods for Neural Machine Translation2017
- Six Challenges for Neural Machine Translation2017
- Donald Barthelme: A Study of the Short FictionWorld Literature Today, 1993
- Donald Barthelme and the Metafictional MuseSubStance, 1980