Le di al traductor dos párrafos: un investigador que presenta resultados y una línea sobre billetes de tren que cuestan 24,50 euros. En español, tres veces, volvió como dos párrafos con cada figura, el nombre intacto, la URL intacta y la muestra de código intacta. En japonés, tres veces, el segundo párrafo no estaba allí en absoluto. En telugu, cuatro veces, faltaba tres veces y se fusionaba en el primer párrafo el cuarto. La misma entrada, la misma instrucción, el mismo modelo. Lo único que cambió fue el idioma de destino, y lo que desapareció fue la mitad del texto, en silencio.
TL;Dr: Este es un modelo pequeño que hace la traducción, y lo bien que lo hace depende enormemente de la cantidad de ese idioma en el que se entrenó. Medido en diez ejecuciones de un pasaje de 41 palabras: el español fue correcto tres veces de tres. Los japoneses dejó caer todo el segundo párrafo tres veces de tres y se volvieron "14 de marzo" como 14 月14 日, el decimocuarto mes. Telugu perdió el segundo párrafo en tres carreras de cuatro. Las URL y el código sobrevivieron a los diez. Si su objetivo no es un idioma europeo importante, Traduce un párrafo a la vez y comprueba la salida. los traductor Se ejecuta en el propio servidor del sitio, por lo que vale la pena establecer los límites honestos.
Qué se probó y cómo
Un pasaje, dos párrafos, cuarenta y una palabras, que llevan las cosas que suelen romper en la traducción: un nombre personal, una fecha, una URL, una muestra de código con comillas y un punto y coma, una figura decimal decimal y una oración cuyo significado depende de un sustantivo específico.
Dr. Amara Osei will present the results on 14 March. The full dataset is at
https://example.org/trial-2026/data and the loader expects `read_csv(path, sep=";")`.
Tickets cost 24.50 euros and must be bought before boarding, because the
conductor cannot sell them on the train.
Tres idiomas de destino, elegidos para abarcar lo que ha visto un modelo como este: el español, que está en todas partes en los datos de entrenamiento; el japonés, que está bien representado pero estructuralmente distante; y telugu, que tiene alrededor de ochenta millones de hablantes y una fracción de la presencia web. Esa brecha es todo el tema de la No se queda lenguaje atrás del trabajo, que existe precisamente porque la calidad de la traducción rastrea los datos de entrenamiento en lugar del recuento de altavoces.
Diez carreras en total. Aquí está cada uno de ellos.
| ejecutar | segundo párrafo | Nombre dejado como está | URL intacta | Código intacto | párrafos |
|---|---|---|---|---|---|
| español 1 | sí | sí | sí | sí | 2 |
| español 2 | sí | sí | sí | sí | 2 |
| español 3 | sí | sí | sí | sí | 2 |
| Japonés 1 | prohibido | prohibido | sí | sí | 1 |
| Japonés 2 | prohibido | prohibido | sí | sí | 1 |
| Japonés 3 | prohibido | prohibido | sí | sí | 1 |
| telugu 1 | prohibido | prohibido | sí | sí | 1 |
| telugu 2 | prohibido | prohibido | sí | sí | 1 |
| telugu 3 | sí | prohibido | sí | sí | 1 |
| telugu 4 | prohibido | prohibido | sí | sí | 1 |
¿Qué sucede con la mitad del texto?
No está traducido, y nada lo dice.
Seis de las siete carreras no latinas devolvieron solo el primer párrafo. La salida es fluida, formada y de aspecto completo. Si no lees japonés o telugu, no hay ninguna señal de que el texto que pegaste fue de 41 palabras y el texto que recibiste cubre 24 de ellas.
La única carrera de telugu que mantuvo el segundo párrafo tampoco es tranquilizador. Fusionó todo en un solo párrafo y fusionó dos cláusulas no relacionadas, produciendo una oración que dice que el cargador debe recurrir al código porque no es posible vender en el tren. También convirtió el tren en un autobús.
La causa es visible cuando se prueba el párrafo descartado por sí solo. Enviado solo, se traduce correctamente y mantiene el 24.50:
రద్దకెళ్ళకు ముందు టిక్కెట్లు కొనాలి, ఎందుకంటే కమాండర్ వాటిని రైలులో అమ్మలేదు. (24.50 యూరోలు)
Entonces el modelo puede traducir esa oración. Se detiene antes de llegar a ella cuando la entrada tiene dos párrafos. Esa es una falla de longitud de generación en lugar de una comprensión, y es lo más importante que debe saber sobre el uso de esta herramienta para un idioma no europeo.
La solución es un párrafo a la vez. Tedioso, confiable y de unos treinta segundos por párrafo.
¿Qué sobrevivió a cada carrera?
URL y código, diez veces de cada diez.
https://example.org/trial-2026/data intact in all 10
`read_csv(path, sep=";")` intact in all 10
Esa es la instrucción que funciona exactamente como se pretendía, y no es una pequeña cosa. Un traductor que traduce de manera útil un nombre de variable, localiza un separador decimal dentro de un ejemplo de código o reescribe una ruta de URL produce una salida que se rompe de una manera que nadie nota hasta que falla algo. Aquí el código volvió con sus citas, su punto y coma y sus nombres de parámetros intactos en japonés y telugu, así como en español.
Si está traduciendo documentación, esta es la propiedad que más importa, y es la que tiene.
¿Qué pasó con la fecha?
Los japoneses cumplieron el 14 de marzo en el decimocuarto mes.
14月14日
Las tres carreras japonesas lo produjeron. En japonés, una fecha se escribe primero en el mes como 3 月14 日, uno de los patrones por-locales catalogados en CLDR de Unicode, y el modelo ha tomado el número de día y lo ha usado para ambos campos. No hay un mes decimocuarto, por lo que esta no es una ambigüedad, es una fecha incorrecta que se lee como plausible para cualquiera que robe.
Telugu lo hizo bien dos veces y dejó caer el mes una vez, volviendo el 14 sin marcha. El español escribió "El 14 de Marzo" correctamente en los tres.
Vale la pena señalar las fechas porque son el error que probablemente sobreviva a una revisión de alguien que no lee el idioma de destino. Un párrafo que falta es visible como una diferencia de longitud. Un mes equivocado son cuatro personajes que se parecen a cualquier otra fecha.
¿Por qué se translitera el nombre cuando la instrucción dice que lo deje?
Porque la instrucción es incorrecta para esos scripts, y el modelo es correcto.
"Amara Osei" volvió sin cambios en español y como アマラ・オセ en japonés y అమరా ఒసే en telugu. El mensaje enviado con cada solicitud dice "Dejar nombres, URL y código sin cambios" y estrictamente el modelo desobedecido.
debería. Dejar un nombre de escritura latina en medio de la prosa japonesa no es lo que hace un traductor japonés; los nombres se transliteran en katakana como algo natural, y un documento que no lo hace se lee como salida de máquina. Lo mismo se aplica al telugu.
Así que trate esa línea de la instrucción como si se aplica a los identificadores en lugar de a las personas. Si necesita un nombre guardado en escritura latina, un pasaporte o un documento legal donde la ortografía sea el punto, revíselo y vuelva a colocarlo.
¿En qué idiomas puedes confiar?
Las veinte opciones no son veinte opciones equivalentes, y la diferencia rastrea cuánto de cada idioma vio el modelo.
| nivel | idiomas | QUE ESPERAR |
|---|---|---|
| confiable aquí | Español, Francés, Alemán, Portugués, Italiano, Holandés | Correcto en esta prueba; retiene la entrada de varios párrafos |
| utilizable con la verificación | Chino, Japonés, Coreano, Ruso, Árabe, Turco | Estructuralmente bien, pero espera errores de truncamiento y fecha |
| Un párrafo a la vez | hindi, bengalí, telugu, tamil, marathi, kannada, urdu | truncamiento medido; verificar cada figura |
Solo se midieron español, japonés y telugu. Las otras filas se colocan por la cantidad de texto web que existe en cada idioma, que es lo que predice la competencia de un modelo pequeño, y deben tratarse como expectativas en lugar de hallazgos.
El patrón a llevar: cuanto más abajo vayas en esa tabla, más corta debería ser la entrada y más necesitará la salida de la salida de una persona que la lee.
¿Es esto mejor o peor que el traductor de Google?
Peor en la traducción, mejor en no enviar su documento a ningún lado.
Un servicio de traducción dedicado ejecuta un modelo mucho más grande entrenado específicamente en texto paralelo, y para un par de idiomas como el inglés al telugu, esa brecha es grande. Si lo que necesita es la mejor traducción disponible de un documento público, use uno de ellos.
Lo que obtienes aquí es que el texto no deja el propio hardware del sitio. Las cosas que las personas traducen con frecuencia no son publicables: una carta de un abogado, un correo electrónico de un arrendador, una nota médica para un familiar, un contrato antes de firmar. Para aquellos, "lo suficientemente bueno para entenderlo, y nadie más lo vio" es un producto diferente de "excelente y registrado".
Saber cuál de esos necesita es toda la decisión, y vale la pena tomarlo conscientemente en lugar de por la pestaña que esté abierta.
¿Sobrevive el tono y el formato?
Formatear Sí, con la advertencia de párrafo anterior. El tono es más difícil de verificar y vale la pena menos confianza.
La instrucción pide que se mantenga el significado, el tono, el formato y los saltos de línea. En español, las tres series conservaron exactamente la estructura de dos párrafos. En las carreras no latinas, el salto de párrafo se perdió en los siete, incluido el que mantuvo ambos párrafos.
Registrarse es lo que no puede verificar sin el idioma. El japonés en particular codifica la cortesía gramaticalmente, y la diferencia entre un formulario adecuado para un colega y uno adecuado para un cliente no es algo que un hablante en inglés pueda inspeccionar. Las carreras aquí usaron です/ます, la forma neutral-polite, que es un incumplimiento razonable y puede ser erróneo para su propósito.
Si el texto va a una persona en lugar de a su propio entendimiento, hágalo leer por alguien que hable el idioma. Eso es cierto para cualquier traducción automática y más cierto para una pequeña.
¿Por qué traducirlo no prueba nada?
Porque el viaje de ida y vuelta es fluido, lo que haya sucedido en el medio, y oculta exactamente el fallo que estabas comprobando.
Esta es la forma más común en que las personas verifican una traducción que no pueden leer: Vuelva a poner la salida, vea si sale inglés. Aquí está esa prueba de ejecución en la salida japonesa anterior.
Dr. Amal Ose will announce on April 14th. The entire dataset is available at
https://example.org/trial-2026/data. The load arm expects `read_csv(path, sep=";")`.
Léelo frío y parece una traducción correcta de un breve anuncio. Léelo al lado del original y han sucedido cuatro cosas.
El nombre ha decaído a través de dos pasadas: Amara Osei se convirtió en アマラ・オセ Ose Amal. La fecha ha sido incorrecta dos veces de diferentes maneras, 14 de marzo al decimocuarto mes para 14 de abril, que es una tercera fecha que apareció ni en la fuente ni en el japonés. "El cargador" se convirtió en ロードアーム se convirtió "El brazo de carga". Y todavía falta todo el segundo párrafo, sin nada en inglés que sugiera que existió alguna vez.
Ese último punto es el que importa. Un viaje de ida y vuelta no puede revelar contenido faltante, porque falta el contenido que falta en ambos extremos. Comprueba si el modelo puede leer su propia salida, que generalmente puede.
El cheque que funciona es el aburrido: compara la longitud de lo que pegaste con la longitud de lo que volvió.
¿Puedes traducir un documento completo?
No de una vez, y la razón es la misma falla que arriba con más en juego.
La entrada muy larga se acorta a lo que el modelo puede leer a la vez, y la página lo dice cuando eso sucede. Pero el truncamiento medido aquí es una cosa diferente, ocurriendo en 41 palabras, bien dentro de cualquier límite: el modelo simplemente deja de generar antes de que haya terminado.
Entonces, un documento se realiza en pedazos, y el tamaño de la pieza depende del objetivo:
| blanco | parte práctica |
|---|---|
| Español, Francés, Alemán, Portugués, Italiano, Holandés | varios párrafos; comprobar la longitud |
| Chino, Japonés, Coreano, Ruso, Árabe, Turco | uno o dos párrafos, revisando cada |
| hindi, bengalí, telugu, tamil, marathi, kannada, urdu | un párrafo, revisando cada |
Trabaje en el orden en que el documento lee, mantenga la salida en un archivo separado sobre la marcha y compare los dos recuentos de líneas al final. Para un documento largo en una de las filas inferiores que es lo suficientemente lento como para que valga la pena preguntarse si un servicio de traducción dedicado es la mejor herramienta, que para el texto público suele ser.
Lo que no resuelve la fragmentación es la consistencia. Un término traducido de una manera en el párrafo tres puede volver de manera diferente en el párrafo nueve, porque cada solicitud es independiente y no lleva ninguna de las opciones anteriores. Para cualquier cosa con terminología recurrente, liquida primero los términos clave y arréglalos a mano después.
¿Cuánto tiempo se hace?
Veinticinco a cuarenta segundos para un pasaje corto, y el tiempo rastrea la salida en lugar de la entrada.
| blanco | rato | rendimiento |
|---|---|---|
| castellano | 37 años | 301 bytes |
| japonés | 25 años | 209 bytes |
| telugo | 28 años | 335 bytes |
El japonés fue el más rápido porque produjo el menor, que es el fracaso descrito anteriormente que aparece en el momento. Una carrera que regresa inusualmente rápido en un objetivo no europeo vale la pena echar un segundo vistazo por esa razón.
Una carrera de cada diez devolvió una corriente arriba 502 en lugar de una traducción. La página maneja eso correctamente, mostrando un error en lugar de imprimirlo como salida, y un reintento funcionó. Vale la pena saber que sucede en un solo modelo compartido.
¿Qué debes comprobar antes de usar una traducción?
Cuatro cosas, en el orden se equivocaron aquí.
- Duración. Compare la salida con la entrada. Si parece corto, falta un párrafo. Esto atrapa el peor fracaso sin leer una palabra del idioma de destino.
- cada número y fecha. Los números sobreviven como dígitos y fechas no sobreviven como fechas.
- Código, URL e identificadores. Estos se mantienen en las diez carreras, por lo que esta es una confirmación rápida en lugar de un problema probable.
- Un humano, si va a un humano. Nada por encima de sustituye a eso, y el registro de cortesía es la razón.
¿Por qué se ejecuta en el propio servidor del sitio?
Debido a que las solicitudes de traducción que hacen las personas son una lista de cosas que preferirían no cargar.
una carta en un idioma que no leen. un documento de un departamento gubernamental. un mensaje de un miembro de la familia. una cláusula en un contrato. La alternativa convencional lo envía a un servicio cuyos términos permiten la retención, y para los tipos de texto que las personas traducen, es una exposición mayor que la de la mayoría de las herramientas.
Aquí va a un modelo pequeño en el propio hardware del sitio y no se almacena a menos que elija enviar comentarios. El costo está en las diez filas de la tabla anterior, expresamente en lugar de descubrirse.
