Від GPT-3 до GPT-5: як насправді змінилася якість ШІ-перекладу

Між GPT-3, GPT-4 та GPT-5 — п'ять років різниці та кілька поколінь архітектури, але корисне для перекладу питання полягає не в тому, «яка з них найрозумніша». Воно вужче: що саме змінилося в тому, як ці моделі працюють із тими аспектами мови, які не перекладаються дослівно, — такими як ідіоми, неоднозначність і мовний регістр? Покращення відбувалися в конкретних аспектах, у певні моменти, і цей розвиток не йшов по прямій від старіших версій до новіших.

Що насправді запропонувала GPT-3 для перекладу

OpenAI випустила GPT-3 у 2020 році, ще до появи власної програми тестування MachineTranslation.com, тому наведені тут дані не є пропрієтарним бенчмарком. Це добре задокументована історія, а не результат внутрішнього тестування. GPT-3 була першою моделлю такого типу, здатною створювати зв'язний, природний текст багатьма мовами без спеціального навчання під конкретне завдання, що зробило її справжньою віхою. Зокрема для перекладу ця ж плавність мовлення створювала реальний ризик: GPT-3 могла впевнено згенерувати граматично правильне речення цільовою мовою, яке водночас було помилковим, і ніщо в результаті не вказувало на наявність помилки.

Що змінилося з появою GPT-4

GPT-4 вийшла у березні 2023 року, і саме з цього покоління починається власне тестування моделей від MachineTranslation.com. Покращення було відчутним, але нерівномірним. Під час тестування неоднозначної англійської фрази «That's sick» під час перекладу японською GPT-4.1-nano виявилася єдиною моделлю з шести протестованих, яка звела навмисне подвійне значення фрази до одного тлумачення, тоді як решта п'ять зберегли неоднозначність, закладену в оригіналі. Ідіоми виявилися ще слабшим місцем: під час перевірки іспанської ідіоми «llevarse el gato al agua» на п'яти версіях GPT одночасно, менші моделі GPT-4o-mini та GPT-4.1-nano видали однаковий буквальний і неправильний переклад, повністю проігнорувавши ідіоматичний зміст.

Така сама закономірність спостерігалася й в інших випадках. Німецьку ідіому «ich verstehe nur Bahnhof», протестовану на восьми субверсіях GPT та Claude, саме модель GPT-4o-mini переклала буквально й неправильно, тоді як менша й новіша модель у тому ж тесті, GPT-4.1-nano, впоралася правильно. Покоління та розмір моделі не корелювали між собою жодним послідовним чином — цю закономірність докладніше розглянуто в матеріалах тестування версій моделей від MachineTranslation.com.

Що GPT-5 змінила в перекладі

OpenAI представила GPT-5 як уніфіковану систему, яка залежно від завдання спрямовує запити або до швидкої базової моделі, або до моделі з поглибленим міркуванням, що є структурною зміною порівняно з одномодельною архітектурою GPT-4. Згідно з власним звітом OpenAI GPT-5 System Card, загальний рівень фактичних помилок моделі приблизно на 45% нижчий, ніж у GPT-4, і на 80% нижчий, ніж у GPT-3; це загальне підвищення надійності простежується й конкретно в перекладі. Тестування MachineTranslation.com демонструє найпомітніші зрушення саме там, де моделі епохи GPT-4 зазнавали найбільших труднощів: у тій самій іспанській ідіомі, з якою не впоралися GPT-4o-mini та GPT-4.1-nano, і GPT-5.4-mini, і GPT-5.4 запропонували правильні ідіоматичні переклади — кожна сформулювала його дещо по-різному, але обидві зрозуміли саму ідіому.

Цей останній пункт важливий: окремий тест стандартної ділової фрази «please confirm receipt of this document» під час перекладу німецькою мовою показав майже ідентичні результати для кожної протестованої моделі, включно з GPT-4o-mini та моделями покоління GPT-5. Розрив між поколіннями стосується саме образної та неоднозначної мови, а не є загальною різницею в якості.

Чи новіше покоління GPT завжди означає кращий переклад?

Ні. Під час тестування івридського ідіоматичного виразу серед різних сімейств моделей GPT-5.4-mini та GPT-5.4 запропонували дві різні, часткові інтерпретації однієї й тієї самої фрази, жодна з яких не була повністю правильною, тоді як старіша, не пов'язана з ними модель підійшла ближче до істини. Новіша модель не означає автоматично точніша, а більша або новіша модель не є автоматично безпечнішим вибором для конкретного речення.

Які позиції GPT-5 займає у перекладі сьогодні

GPT-3 та GPT-4 вилучено з ChatGPT; GPT-4 залишається доступним лише через API OpenAI для наявних інтеграцій. Поточне покоління, GPT-5.4 та GPT-5.5, — це те, що MachineTranslation.com використовує сьогодні, і воно демонструє конкурентні результати порівняно з актуальними моделями інших постачальників, хоча й не є рівномірно кращим для кожної мовної пари. Щоб детальніше ознайомитися з тим, як поточні субверсії GPT порівнюються між собою та з такими моделями, як Claude і DeepSeek, перегляньте пряме порівняльне тестування субверсій від MachineTranslation.com, яке є значно глибшим за загальний огляд поколінь.

Що це означає, якщо ви здійснюєте масштабну локалізацію

Найважливіший висновок для великої програми локалізації — це не те, що «GPT-5 перевершує GPT-3». Справа в тому, що саме версія моделі, а не лише її сімейство, визначає, чи буде конкретна ідіома або неоднозначна фраза перекладена правильно, і це стосується кожної мовної пари, а не лише кількох наведених тут прикладів. Це має найбільше значення для контенту, який передусім спирається на тональність та образну мову, особливо маркетингових текстів та користувацького контенту, де одна буквально перекладена ідіома може повністю змінити зміст допису або реклами. Програма, яка перекладає контент на десятки мов, стикатиметься саме з такими мовними явищами в кожній із них. Серія тестувань субверсій та повномасштабне порівняльне тестування моделей від MachineTranslation.com розглядають це детальніше. Підхід платформи — запуск актуальних моделей GPT разом із понад 20 іншими моделями для кожного перекладу — існує саме тому, що історія версій жодної окремої моделі сама по собі не є достатньо надійною гарантією.

Часті запитання