Is machine translation ready yet?

The default option of the Google Translator Toolkit (GTT), released in June 2009, is to “pre-fill with machine translation” all segments for which a ‘no match’ has been returned by the memories, while the Settings window clearly advises that “[m]ost users should not modify this”. To confirm whether this approach indeed benefits translators and translation quality, we designed and performed tests whereby trainee translators used the GTT to translate passages from English into Chinese either entirely from the source text, or after seeding of empty segments by the Google Translate engine as recommended. The translations were timed, and their quality assessed by independent experienced markers following Australian NAATI test criteria. Our results show that, while time differences were not significant, the machine translation seeded passages were more favourably assessed by the markers in thirty three of fifty six cases. This indicates that, at least for certain tasks and language combinations—and against the received wisdom of translation professionals and translator trainers—translating by proofreading machine translation may be advantageous.

L’option par défaut de la Google Translator Toolkit (GTT), publiée en juin 2009, prévoit de préremplir au moyen de la traduction automatique tous les segments pour lesquels un non match a été retourné par les mémoires de traduction. Afin de vérifier si une telle approche est en effet susceptible de profiter au traducteur/à la qualité de la traduction, nous avons conçu et réalisé des tests dans lesquels des traducteurs en formation ont utilisé la GTT dans des traductions de l’anglais en le chinois, soit à partir du seul texte source, soit à partir de segments vides sélectionnés par la GTT selon les instructions prévues. Les traductions ont été chronométrées, et leur qualité évaluée par des marqueurs indépendants expérimentés, suivant les critères d’essai australiens (NAATI). Nos résultats montrent que, alors que les différences temporelles ne sont pas significatives, la traduction automatique sélective par segments a été évaluée de manière plus favorable dans trente-trois cas sur le total des cinquante-six. Ce qui indique que, au moins dans des tâches particulières et pour certaines combinaisons de langue données, traduire avec le secours de la relecture par traduction automatique peut être avantageux.