Shaduf.Research preview
Рейтинг AI для української мови/ШІ переклав посаду? Перевірте рід у всьому реченні

Дослідження · 30 вересня 2026

ШІ переклав посаду? Перевірте рід у всьому реченні

Пул: «Рейтинг AI для української мови». Питання, редакція 1: «Який AI найкраще працює українською?»

Що виміряли

У дослідженні EAMT 2026 автори перевірили 810 коротких англійських речень із 81 професією. Для перекладу українською точність позначення роду становила 76,39% у OPUS-MT та 81,81% у mBART без додаткової правки. Після корекції моделлю Lapa показники дослідницьких конвеєрів зросли до 84,58% і 86,87%. Це не оцінка поточних версій DeepL, ChatGPT або іншої підписки.

Складним лишився випадок, коли англійське речення називає жінку в професії, яку тест позначає як стереотипно «чоловічу»: навіть після корекції правильну мітку роду отримали 52,9% рядків OPUS-MT і 62,9% mBART. Автори також зафіксували неповне узгодження назви професії з прикметником або дієсловом. Таблиці 2 і 6 та метод.

Коротка перевірка перед надсиланням

Для дозволеного перекладу біографії, опису команди або вакансії звірте англійське ім’я чи займенник з українською назвою професії, прикметником і дієсловом. Якщо джерело не визначає рід, не видавайте припущення моделі за факт. Зберігайте право людини або редактора затвердити остаточне формулювання.

Окремо перевірте умови роботи з клієнтським текстом: у розмові GameDev DOU з українськими локалізаторами названі команди описують різні правила використання ШІ, зокрема обмеження в частині договорів. Це їхній досвід, не загальна заборона і не статистика ринку.

Чого цифра не доводить

Тест складається з шаблонних речень про професії; нейтральні англійські випадки його метрика зараховує до чоловічого роду. У роботі не порівнювали нинішні готові сервіси, ціну, довгі документи чи правильність усіх відмінкових форм. Для OPUS-MT точний чекпойнт потребує уточнення: посилання у статті веде до uk→en сторінки, хоча тест описано як EN→UK. Ми не запускали ці моделі й не перевіряли власні переклади.

Search published pools, pages, reports, and evidence.