Mesurez la qualité de la traduction par l'IA et l'effort de révision humaine associé
À mesure que l'IA prend en charge une plus grande part de la traduction, la question évolue. Il ne s'agit plus de savoir « l'IA peut-elle traduire cela ? », mais plutôt « quelle est la qualité du résultat et combien d'efforts humains faut-il encore pour le finaliser ? » Pour les équipes qui gèrent des flux de travail combinant IA et révision à grande échelle, la réponse est étonnamment difficile à obtenir. L'information est dispersée sur de nombreux projets, paires de langues, configurations et réviseurs, avec des calendriers décalés. Elle est donc reconstituée manuellement, ou pas du tout. À mesure que le volume de contenu et le nombre de configurations d'IA augmentent, cet angle mort ne fait pas que s'agrandir. Il s'aggrave, et les équipes finissent par faire confiance à une automatisation qu'elles ne peuvent pas réellement évaluer.
Le Translation Review Report comble cette lacune. Il analyse le travail déjà en cours dans votre espace de travail et le transforme en données concrètes, de sorte que la qualité et l'effort de révision ne soient plus une simple impression, mais des chiffres sur lesquels vous pouvez vous appuyer.
Sachez quelle est la véritable qualité de votre traduction par IA. Vous pouvez voir que le contenu a été modifié, mais pas dans quelle mesure, où, ni pourquoi. Le rapport indique à quelle fréquence le résultat de l'IA est approuvé tel quel par rapport à celui qui est modifié, votre taux de modification pour chaque flux de travail et paire de langues, ainsi que les changements exacts au niveau du segment qui en découlent.
Chiffrez la révision humaine que l'IA exige encore. L'effort de révision est réel, mais invisible dans son ensemble. Le temps de révision estimé pour 1 000 mots, réparti par paire de langues, configuration et réviseur, montre exactement où se concentre l'effort humain, quel travail est peu coûteux à finaliser et lequel consomme discrètement le temps de vos réviseurs.
Trouvez la configuration qui vous coûte cher et corrigez-la. Lorsque la qualité ou les délais se dégradent, trouver la cause implique généralement de fouiller manuellement dans les documents. Filtrez par flux de travail, paire de langues, profil d'IA ou réviseur, et passez d'une tendance de l'espace de travail au document et au segment précis qui se cachent derrière une anomalie. Vous pouvez voir s'il faut ajuster la configuration de l'IA ou les agents de révision qui gèrent les modifications avant qu'un humain n'ouvre le document, afin que l'optimisation soit ciblée plutôt que laissée au hasard.
Montrez que l'automatisation porte ses fruits sur le long terme. Sans preuve que l'effort de révision diminue, la confiance dans l'automatisation et les arguments pour la développer s'essoufflent. Les graphiques de tendance suivent le taux de modification et l'effort des réviseurs sur différentes périodes, ce qui vous permet de montrer que l'effort de révision diminue à mesure que vos agents apprennent de vos réviseurs. C'est la preuve qui justifie la mise en place en interne et encourage à aller plus loin.
Comment cela fonctionne dans Smartcat
Le Translation Review Report se compose de trois vues interconnectées :
Translation Review Report (espace de travail) : la fréquence à laquelle les traductions par l'IA sont approuvées telles quelles par rapport à celles qui sont modifiées, ainsi que le taux de modification et le temps de révision estimé pour 1 000 mots, répartis par flux de travail, paire de langues, profil ou modèle d'IA, réviseur et période.
Rapport de projet : les mêmes indicateurs de révision appliqués à un seul projet, avec une répartition par document.
Rapport de modification de document : une comparaison avant/après au niveau du segment montrant exactement ce que chaque contributeur a modifié, et pourquoi.
Le taux de modification se mesure en divisant les mots modifiés manuellement par les mots terminés. Les tâches approuvées automatiquement et les documents traités uniquement par l'IA sont exclus, de sorte que ce chiffre reflète le comportement réel des réviseurs humains. Les trois rapports peuvent être exportés au format PDF pour être partagés.
Premiers pas
Le Translation Review Report est idéal pour les équipes dont la révision manuelle est une étape standard. Si votre équipe ne révise jamais les traductions manuellement, les indicateurs principaux afficheront N/A, puisqu'il n'y a aucun effort humain à mesurer. Pour tous les autres, ouvrez le rapport dans votre espace de travail pour consulter votre taux de modification et l'effort des réviseurs, filtrez selon les flux de travail et les paires de langues les plus pertinents, et commencez à identifier ce qui doit être ajusté.
Pour en savoir plus, consultez le Centre d'aide.