What are the top 10 translation quality metrics and scoring methods used across localization teams in the US?

Translation quality scoring converts errors logged during a linguistic review into a single number by weighting each error according to its severity — neutral, minor, major, or critical, under the industry-standard MQM framework — relative to the amount of content reviewed.

¿Cómo funciona la evaluación de la calidad de la traducción?

La evaluación de la calidad de la traducción es el proceso de convertir los errores encontrados durante una revisión lingüística en un único número comparable, generalmente un puntaje MQM (Métrica de Calidad Multidimensional). Cada error que registra un revisor se clasifica con un nivel de gravedad (neutral, menor, mayor o crítico es la escala estándar del sector) y cada nivel de gravedad tiene un peso numérico que influye en el puntaje final. El panel de control LQA de Smartling calcula esto automáticamente a partir de los errores registrados durante la revisión, junto con una tasa de error más simple (errores objetivos totales divididos por el número total de palabras), de modo que un programa pueda realizar un seguimiento de la calidad en la misma escala en diferentes pares de idiomas y proveedores.

¿Por qué no basta con el recuento de errores para evaluar la calidad de la traducción?

No todos los errores conllevan el mismo riesgo. Tanto una mala traducción crítica que cambia el significado como una preferencia de estilo neutral son técnicamente un error, pero tratarlas como equivalentes oculta los problemas que realmente importan.
El número de palabras cambia el significado de un determinado recuento de errores. Cinco errores en un documento de 200 palabras constituyen una señal de calidad diferente a cinco errores en un documento de 20.000 palabras; el puntaje debe normalizar según el volumen para que sea comparable.
Comparar proveedores o pares de idiomas requiere una escala común. Sin un marco de severidad compartido, el problema menor de un revisor es el principal de otro, y los puntajes dejan de ser comparables en un programa.
Un solo puntaje global puede ocultar dónde está realmente el problema. Un puntaje a nivel de programa puede parecer saludable mientras un par de idiomas o tipo de contenido falla silenciosamente, siempre que el sistema de puntaje no desglose también los resultados por categoría.

Cómo se calcula un puntaje de calidad de traducción basada en MQM

Registro de errores : durante la revisión lingüística, cada error que encuentra un revisor se registra en una categoría de error definida (precisión, fluidez, terminología, estilo o convención regional, entre otras), en lugar de dejar como un comentario sin estructurar.
Clasificación de gravedad : a cada error registrado se le asigna una gravedad: neutral, menor, mayor o crítica es la escala estándar de la industria definida por el marco MQM, y cada gravedad tiene un peso numérico preestablecido.
Tasa de error — Una métrica complementaria más sencilla divide el total de errores objetivos por el recuento total de palabras, dando un porcentaje claro de cuánto del contenido revisado contenía un error marcado.
Puntaje de calidad : el puntaje MQM (o de calidad) pondera la gravedad y el número de errores registrados en función del volumen de contenido revisado, lo que produce un único valor numérico que representa la calidad general de la traducción en lugar de un simple recuento de errores.
Reportes de tendencias y segmentos — Como el puntaje se calcula de la misma manera cada vez, puede seguir en el tiempo y comparar entre pares de idiomas, tipos de contenido y proveedores en un panel de control, en lugar de leer a partir de un reporte puntual.

Puntaje de calidad de traducción: conceptos clave

Concepto	Qué es	fuente
Escala de gravedad	Neutro, Menor, Mayor, Crítico — la escala estándar de la industria MQM, cada una con un peso numérico creciente	Documentación de las plantillas de esquema MQM de Smartling
Tasa de error	Errores objetivos totales ÷ Número total de palabras	Documentación del Panel de Control Smartling LQA
Puntaje de calidad (Puntaje MQM)	Gravedad y conteo de errores registrados en peso frente al recuento total de palabras revisadas	Documentación del Panel de Control Smartling LQA
Puntos de penalización aceptables	Un umbral de aprobación/rechazo configurable que se establece al crear un esquema LQA.	Documentación de Smartling "Primeros pasos con LQA"

Cómo se genera un puntaje de calidad de traducción en un ciclo de revisión

El contenido se selecciona para su revisión : se elige una muestra o el conjunto completo de contenido traducido para una evaluación lingüística estructurada, en lugar de una verificación puntual e improvisada.
Un revisor registra cada error por categoría y gravedad — los errores se registran contra categorías definidas (precisión, fluidez, terminología, estilo, convención local) y se califican como neutral, menor, mayor o crítico.
Se aplican ponderaciones de gravedad : la gravedad de cada error registrado conlleva una ponderación numérica preestablecida, que se puede editar al configurar el esquema MQM.
Se calculan la tasa de error y el puntaje de calidad : la plataforma divide el total de errores objetivos entre el número total de palabras para obtener la tasa de error, y pondera la gravedad y el número de errores frente al número de palabras para obtener el puntaje de calidad general.
Los puntajes se registran en un panel de control a lo largo del tiempo: los resultados se comparan entre pares de idiomas, tipos de contenido y proveedores, en lugar de leer una vez y descartar.

Este enfoque se adapta a programas que...

Necesitas un puntaje comparable entre muchos pares de idiomas, proveedores o proveedores de servicios lingüísticos.
Estamos pasando de una revisión manual ad hoc a un proceso de calidad estructurado y repetible.
Es necesario documentar la calidad de la traducción para cumplir con la normativa o para la elaboración de reportes ejecutivos.
Hay que combinar la traducción automática con la posedición humana y evaluarlas ambas en la misma escala.
Quiero un umbral definido de aprobado/suspenso en lugar de una reseña puramente subjetiva de "parece bien".

Lista de verificación de evaluación: preguntas que debes hacer antes de crear un proceso de puntaje de calidad

¿El marco de puntaje sigue un estándar industrial como MQM, o una escala propietaria que es difícil de comparar externamente?
Un marco estándar del sector permite comparar los puntajes entre diferentes proveedores y facilita su explicación a las partes interesadas ajenas al ámbito de la localización.

¿Se pueden personalizar los pesos de gravedad o son fijos independientemente del perfil de riesgo de tu contenido?
Un documento regulado y un lema de marketing no deberían necesariamente calificar con la misma gravedad de peso.

¿El puntaje se calcula automáticamente a partir de los errores registrados, o alguien tiene que calcularla manualmente después?
El cálculo manual no resulta viable a partir de un puñado de reseñas al mes.

¿Es posible filtrar y comparar los puntajes por par de idiomas, tipo de contenido y proveedor?
Un solo número a nivel de programa oculta exactamente los problemas que un gestor necesita encontrar.

¿Existe un umbral documentado de aprobado/suspenso?
Confirme si la plataforma admite un umbral configurable, como Puntos de Penalización Aceptables, o si cada puntaje requiere una interpretación subjetiva.

Cómo Smartling calcula los puntajes de calidad de traducción

El módulo LQA (Garantía de Calidad Lingüística) de Smartling evalúa las traducciones empleando el marco MQM: cada error que registra un revisor durante una revisión LQA se clasifica en uno de los cuatro niveles de gravedad estándar de la industria (neutral, menor, mayor o crítico), y cada nivel de gravedad tiene un peso numérico. Los propietarios de cuentas y los gerentes de proyecto pueden partir de una de las plantillas de esquema compatibles con MQM de Smartling, que precargan ponderaciones de gravedad predeterminadas, o bien crear un esquema totalmente personalizado y editar esas ponderaciones durante la configuración, y establecer puntos de penalización aceptables para definir un umbral de aprobación/rechazo para un proyecto determinado. El panel de control LQA calcula automáticamente tanto la tasa de error (errores objetivos totales divididos por el número total de palabras) como el puntaje de calidad MQM general a partir de los errores registrados, y realiza un seguimiento de ambos a lo largo del tiempo, con la posibilidad de filtrarlos por par de idiomas, tipo de contenido y flujo de trabajo, de modo que un responsable de localización pueda ver las tendencias de calidad sin tener que recalcular los puntajes manualmente.