나는 번역가에게 두 단락을 주었습니다. 결과를 발표하는 연구원과 24.50유로의 기차표에 대한 줄입니다. 스페인어로 세 번이나 모든 그림이 있는 두 단락으로 돌아왔습니다. 이름은 손대지 않았고 URL은 손대지 않았고 코드 샘플은 그대로였습니다. 일본어로 세 번, 두 번째 단락은 전혀 거기에 없었습니다. 텔루구어로 네 번이나 3번 누락되어 첫 번째 단락 네 번째 단락에 융합되었습니다. 동일한 입력, 동일한 명령, 동일한 모델. 바뀐 것은 목표 언어였고, 사라진 것은 조용히 텍스트의 절반이었다.
TL;DR: 이것은 번역을 수행하는 작은 모델이며, 번역이 얼마나 잘 수행되는지는 해당 언어가 얼마나 많이 훈련되었는지에 따라 크게 달라집니다. 41단어 구절 10회에 걸쳐 측정됨: 스페인어는 3번 중 3번 맞았습니다. 일본인은 3번 중 3번을 3번으로 전체를 삭제하고 14개월인 14일 14일로 "14 3월"로 번역했습니다. 텔루구어는 4번의 3번의 실행에서 두 번째 단락을 잃었습니다. URL과 코드는 10개 모두에서 살아남았습니다. 대상이 유럽의 주요 언어가 아닌 경우, 한 번에 한 단락을 번역하고 출력을 확인하십시오.. 그만큼 번역가 사이트 자체 서버에서 실행되므로 정직한 한계를 말할 가치가 있습니다.
테스트한 내용과 방법
한 구절, 두 단락, 41개의 단어, 번역에서 일반적으로 깨지는 것들을 담고 있습니다: 개인 이름, 날짜, URL, 따옴표가 있는 코드 샘플 및 세미콜론, 소수의 통화 그림, 특정 명사에 의미가 있는 문장.
Dr. Amara Osei will present the results on 14 March. The full dataset is at
https://example.org/trial-2026/data and the loader expects `read_csv(path, sep=";")`.
Tickets cost 24.50 euros and must be bought before boarding, because the
conductor cannot sell them on the train.
이와 같은 모델을 확장하도록 선택된 세 가지 대상 언어: 훈련 데이터의 모든 곳에서 스페인어, 잘 표현되었지만 구조적으로 멀리 떨어져 있는 일본어, 약 8천만 명의 화자와 웹 존재의 일부를 보유한 텔루구어. 그 격차는 전체 주제 일 뒤에 남은 언어가 없다, 번역 품질이 화자 수가 아닌 교육 데이터를 추적하기 때문에 정확히 존재합니다.
총 10회. 여기 그들 모두가 있습니다.
| 실행 | 두 번째 단락 | 그대로 남은 이름 | URL이 그대로 | 코드가 손상되지 않았습니다. | 단락 |
|---|---|---|---|---|---|
| 스페인어 1 | 예 | 예 | 예 | 예 | 2 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X |
| 스페인어 2 | 예 | 예 | 예 | 예 | 2 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X |
| 스페인어 3 | 예 | 예 | 예 | 예 | 2 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X 2000 X |
| 일본어 1 | ...이 아닌 | ...이 아닌 | 예 | 예 | 1 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 1 |
| 일본어 2 | ...이 아닌 | ...이 아닌 | 예 | 예 | 1 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 1 |
| 일본어 3 | ...이 아닌 | ...이 아닌 | 예 | 예 | 1 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 1 |
| 텔루구어 1 | ...이 아닌 | ...이 아닌 | 예 | 예 | 1 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 1 |
| 텔루구어 2 | ...이 아닌 | ...이 아닌 | 예 | 예 | 1 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 1 |
| 텔루구어 3 | 예 | ...이 아닌 | 예 | 예 | 1 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 1 |
| 텔루구어 4 | ...이 아닌 | ...이 아닌 | 예 | 예 | 1 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 1000 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 100 X 1 |
텍스트의 절반은 어떻게 됩니까?
그것은 번역되지 않았고, 아무 것도 그렇게 말하지 않습니다.
7개의 비라틴어 실행 중 6개는 첫 번째 단락만 반환했습니다. 출력은 유창하고 올바르게 형성되며 완벽합니다. 일본어나 텔루구어를 읽지 않으면 붙여넣은 텍스트가 41단어이고 받은 텍스트가 24단어라는 신호가 전혀 없습니다.
두 번째 단락을 유지한 텔루구어 실행도 안심하지 않습니다. 그것은 모든 것을 하나의 단락으로 병합하고 두 개의 관련 없는 조항을 융합하여 기차에서 판매하는 것이 불가능하기 때문에 로더가 코드에 의존해야 한다는 문장을 생성했습니다. 기차를 버스로 만들기도 했다.
삭제된 단락을 자체적으로 테스트하면 원인이 표시됩니다. 단독으로 전송하면 올바르게 번역되고 24.50을 유지합니다.
రద్దకెళ్ళకు ముందు టిక్కెట్లు కొనాలి, ఎందుకంటే కమాండర్ వాటిని రైలులో అమ్మలేదు. (24.50 యూరోలు)
따라서 모델은 그 문장을 번역할 수 있습니다. 입력에 두 개의 단락이 있을 때 도달하기 전에 중지됩니다. 그것은 이해력이 아니라 세대 길이의 실패이며, 비유럽어로 이 도구를 사용하는 것에 대해 알아야 할 가장 중요한 것입니다.
해결 방법은 한 번에 단락입니다. 지루하고 신뢰할 수 있으며 단락당 약 30초입니다.
매번 모든 것을 살아남은 것은 무엇입니까?
URL과 코드, 10번에 10번.
https://example.org/trial-2026/data intact in all 10
`read_csv(path, sep=";")` intact in all 10
그것은 지시가 의도한 대로 정확하게 작동하는 것이며 작은 것이 아닙니다. 변수 이름을 유용하게 번역하거나 코드 샘플 내에서 소수점 구분자를 로컬화하거나 URL 경로를 다시 작성하면 문제가 발생할 때까지 아무도 알아차리지 못하는 방식으로 깨진 출력이 생성됩니다. 여기에서 코드는 따옴표, 세미콜론 및 매개변수 이름과 함께 일본어와 텔루구어, 스페인어로 되어 있지 않습니다.
문서를 번역하는 경우 이것이 가장 중요한 자산이며 보유하고 있는 자산입니다.
날짜에 무슨 일이?
일본인은 3월 14일이 되어 14개월이 되었습니다.
14月14日
세 가지 일본 런이 모두 생산했습니다. 일본어로 날짜는 3가 14 日로 달에 쓰여지며, 로케일별 패턴 중 하나는 유니코드의 CLDR, 그리고 모델은 일수를 가져와 두 필드에 모두 사용했습니다. 14개월이 없으므로 모호한 것이 아니라 훑어보는 사람에게 그럴듯한 날짜로 읽는 잘못된 날짜입니다.
텔루구어는 두 번 맞아서 한 달을 한 번 떨어뜨리고 행군 없이 "14번가"를 되찾았다. 스페인어는 세 가지 모두에서 "El 14 de Marzo"를 올바르게 썼습니다.
대상 언어를 읽지 않은 사람이 교정한 결과에서 살아남을 가능성이 가장 높은 오류이기 때문에 날짜를 선택해 볼 가치가 있습니다. 누락된 단락은 길이 차이로 볼 수 있습니다. 잘못된 달은 다른 날짜와 같은 4개의 문자입니다.
명령에 그것을 떠나라고 지시할 때 이름이 음역되는 이유는 무엇입니까?
해당 스크립트에 대한 지침이 잘못되고 모델이 맞기 때문입니다.
"Amara Osei"는 스페인어로, 텔루구어로 アマオセ와 일본어로 అమరా ఒసే으로 변하지 않고 돌아왔습니다. 모든 요청과 함께 전송된 프롬프트는 "이름, URL 및 코드를 변경하지 않고 남겨둡니다"라고 말하고 엄격하게 모델이 불복종합니다.
그것은해야합니다. 일본어 번역가의 중간에 라틴 문자 이름을 남겨두는 것은 일본어 번역가가 하는 일이 아니며, 이름은 물론 가타카나로 음역되고, 그것을 수행하지 않는 문서는 기계 출력으로 읽습니다. 텔루구어에도 마찬가지입니다.
따라서 명령어의 해당 줄을 사람이 아닌 식별자에 적용하는 것으로 취급하십시오. 여권이나 철자가 요점인 법적 문서의 경우 라틴어 문자로 된 이름이 필요하면 확인하고 다시 넣으십시오.
어떤 언어에 의존할 수 있습니까?
제공되는 20개는 20개의 동등한 옵션이 아니며 차이는 모델이 본 각 언어의 양을 추적합니다.
| 층 | 언어 | 기대하는 것 |
|---|---|---|
| 여기에서 신뢰할 수 있습니다 | 스페인어, 프랑스어, 독일어, 포르투갈어, 이탈리아어, 네덜란드어 | 이 테스트에서 수정, 다중 단락 입력 |
| 확인과 함께 사용 가능 | 중국어, 일본어, 한국어, 러시아어, 아랍어, 터키어 | 구조적으로는 괜찮지만 잘림과 날짜 오류가 예상됩니다. |
| 한 번에 한 단락 | 힌디어, 벵골어, 텔루구어, 타밀어, 마라티어, 칸나다어, 우르두어 | 측정된 잘림; 모든 수치를 확인 |
스페인어, 일본어, 텔루구어만 측정되었습니다. 다른 행은 각 언어에 얼마나 많은 웹 텍스트가 존재하는지에 따라 배치되며, 이는 작은 모델의 능력을 예측하는 것이므로 결과가 아니라 기대로 취급되어야 합니다.
수행할 패턴: 해당 테이블 아래로 이동할수록 입력이 더 짧아지고 출력이 더 많이 확인되어야 하는 사람이 이를 읽는 사람이 더 많이 확인해야 합니다.
이것이 구글 번역보다 낫습니까, 나쁜가요?
번역이 더 나빠서 문서를 아무데도 보내지 않는 것이 좋습니다.
전용 번역 서비스는 병렬 텍스트에 대해 특별히 훈련된 훨씬 더 큰 모델을 실행하고 English to Telugu와 같은 언어 쌍에 대해 격차가 큽니다. 필요한 것이 공개 문서의 가장 좋은 번역본이라면 그 중 하나를 사용하십시오.
대신 여기에서 얻을 수 있는 것은 텍스트가 사이트의 자체 하드웨어를 떠나지 않는다는 것입니다. 사람들이 번역하는 것들은 종종 출판될 수 없습니다: 변호사의 편지, 집주인의 이메일, 친척을 위한 의료 메모, 서명하기 전에 계약. "이해하기에 충분하고 아무도 그것을 보지 못했다"는 사람들에게는 "우수하고 기록된"과 다른 제품입니다.
당신이 필요로 하는 것 중 어느 것이 필요한지 아는 것이 전체 결정이며, 어떤 탭이 열려 있는지가 아니라 의식적으로 결정할 가치가 있습니다.
톤과 포맷이 살아남습니까?
위의 단락 주의 사항과 함께 예, 형식 지정 예. 톤은 확인하기가 더 어렵고 신뢰도가 낮습니다.
지침은 의미, 톤, 서식 및 줄 바꿈을 유지하도록 요구합니다. 스페인어로 세 가지 실행 모두 두 단락 구조를 정확히 보존했습니다. 비라틴어 실행에서 단락 나누기는 두 단락의 내용을 모두 유지한 단락을 포함하여 7개 모두에서 단락이 손실되었습니다.
등록은 언어 없이 확인할 수 없는 것입니다. 특히 일본어는 문법적으로 공손함을 인코딩하며, 동료에게 적합한 형식과 고객에게 적합한 형식의 차이는 영어 사용자가 검사할 수 있는 것이 아닙니다. 여기에서 실행은 합리적인 기본값이며 귀하의 목적에 잘못될 수 있는 중립적인 형식인 です/ます를 사용했습니다.
텍스트가 자신의 이해가 아닌 사람에게 가고 있다면 해당 언어를 사용하는 사람이 읽도록 하십시오. 그것은 모든 기계 번역에 해당되며 작은 번역에 더 해당됩니다.
번역하면 아무 것도 증명되지 않는 이유는 무엇입니까?
왕복은 중간에 무슨 일이 일어났든 유창하고, 당신이 확인했던 실패를 정확히 숨기기 때문입니다.
이것은 사람들이 읽을 수 없는 번역을 확인하는 가장 일반적인 방법입니다. 출력을 다시 입력하고 영어가 나오는지 확인하십시오. 위의 일본어 출력에 대한 테스트 실행입니다.
Dr. Amal Ose will announce on April 14th. The entire dataset is available at
https://example.org/trial-2026/data. The load arm expects `read_csv(path, sep=";")`.
차갑게 읽으십시오. 짧은 발표의 올바른 번역처럼 보입니다. 원본 옆에 읽으면 네 가지 일이 일어났습니다.
이름은 두 번의 패스를 통해 쇠퇴했습니다. Amara Osei가 ア�라·오세가 되었습니다. 아말 오세. 날짜는 이제 다른 방식으로 두 번 잘못되었습니다. 3월 14일에서 14개월까지 4월 14일, 출처도 일본어에도 등장하지 않는 세 번째 날짜입니다. 「로더」가 ロロムアム가 되었다 "로드 암". 그리고 두 번째 단락 전체가 여전히 누락되어 있으며 영어에는 그것이 존재하지 않았다는 것을 암시하는 것이 없습니다.
그 마지막 포인트가 중요한 것입니다. 누락된 콘텐츠가 양쪽 끝에서 누락되었기 때문에 왕복 여행에서는 누락된 콘텐츠를 표시할 수 없습니다. 모델이 일반적으로 읽을 수 있는 자체 출력을 읽을 수 있는지 여부를 테스트합니다.
작동하는 검사는 둔한 것입니다. 붙여넣은 길이를 다시 돌아온 길이와 비교하십시오.
전체 문서를 번역할 수 있습니까?
한 번도 실행되지 않으며, 그 이유는 위와 같은 실패가 더 위험합니다.
매우 긴 입력은 모델이 한 번에 읽을 수 있는 것으로 단축되고 페이지는 그렇게 될 때 그렇게 말합니다. 그러나 여기에서 측정된 자르기는 41단어에서 발생하는 다른 것입니다. 어떤 한계 내에서든 모델은 완료되기 전에 생성을 중지합니다.
따라서 문서는 조각으로 진행되며 조각 크기는 대상에 따라 다릅니다.
| 타겟 | 실용적인 청크 |
|---|---|
| 스페인어, 프랑스어, 독일어, 포르투갈어, 이탈리아어, 네덜란드어 | 여러 단락; 길이 확인 |
| 중국어, 일본어, 한국어, 러시아어, 아랍어, 터키어 | 각각 확인하는 한두 단락 |
| 힌디어, 벵골어, 텔루구어, 타밀어, 마라티어, 칸나다어, 우르두어 | 하나의 단락, 각각 확인 |
문서가 읽는 순서대로 작업하고, 출력을 이동하면서 별도의 파일에 보관하고, 마지막에 있는 두 줄 수를 비교합니다. 전용 번역 서비스가 더 나은 도구인지 물어볼 가치가 충분히 느린 아래쪽 행 중 하나의 긴 문서의 경우 일반적으로 공개 텍스트의 경우입니다.
청킹이 해결하지 못하는 것은 일관성입니다. 단락 3에서 한 방향으로 번역된 용어는 9번 단락에서 다르게 돌아올 수 있습니다. 각 요청은 독립적이고 이전 선택 사항을 수행하지 않기 때문입니다. 반복되는 용어가 있는 모든 경우 먼저 핵심 용어를 정하고 나중에 손으로 수정하십시오.
얼마나 걸립니까?
짧은 통로에 대해 25초에서 40초 사이에 시간이 입력이 아닌 출력을 추적합니다.
| 타겟 | 시간 | 출력 |
|---|---|---|
| 스페인 사람 | 37초 | 301바이트 |
| 일본의 | 25초 | 209바이트 |
| 텔루구 말 | 28초 | 335바이트 |
일본어는 가장 적게 생산했기 때문에 가장 빨랐으며, 이는 위에서 설명한 실패의 타이밍에 나타납니다. 비유럽적 목표물에 대해 비정상적으로 빠르게 돌아오는 달리기는 그런 이유로 다시 한 번 살펴볼 가치가 있습니다.
10분의 1 실행은 업스트림을 반환했습니다. 502 번역보다는. 페이지는 이를 올바르게 처리하여 오류를 출력으로 인쇄하는 대신 표시하고 재시도가 작동했습니다. 단일 공유 모델에서 발생한다는 사실을 알 가치가 있습니다.
번역을 사용하기 전에 무엇을 확인해야 합니까?
4가지, 순서대로 여기에서 잘못되었습니다.
- 길이. 출력과 입력을 비교하십시오. 짧아 보이면 단락이 없습니다. 이것은 대상 언어의 단어를 읽지 않고 최악의 실패를 포착합니다.
- 모든 숫자와 날짜. 숫자는 숫자로 남아 있고 날짜는 날짜로 생존하지 않습니다.
- 코드, URL 및 식별자. 이는 10번의 실행 모두에서 유지되므로 가능한 문제가 아니라 빠른 확인입니다.
- 인간에게, 인간에게 간다면. 위의 내용은 이를 대체하지 않으며 공손함 등록이 그 이유입니다.
사이트의 자체 서버에서 실행되는 이유는 무엇입니까?
사람들이 만드는 번역 요청은 업로드하지 않는 것이 좋습니다.
그들이 읽지 않는 언어로 된 편지. 정부부서의 문서. 가족의 메시지. 계약의 조항. 기존의 대안은 용어가 유지를 허용하는 서비스로 보내고 사람들이 번역하는 종류의 텍스트에 대해 대부분의 도구보다 더 큰 노출입니다.
여기에서 사이트 자체 하드웨어에 있는 작은 모델로 이동하며 피드백을 보내기로 선택하지 않는 한 저장되지 않습니다. 비용은 위 표의 10줄에 있으며, 발견되기보다는 분명히 명시되어 있습니다.
