Дослідження · 2026-11-03
Китайські ШІ-моделі відстають від OpenAI і Anthropic, якщо тести стали закритими
Незалежна компанія Artificial Analysis показала, що після переходу на закриті тести розрив між найкращими American моделями та відкритими китайськими моделями зріс з 3 до 12 балів.
Що сталося
Компанія Artificial Analysis, яка тестує моделі штучного інтелекту, опублікувала нові результати. Китайські моделі з відкритими вагами (їх можна завантажити й запускати самостійно) виявилися значно слабшими за провідних американських. Після зміни методики тестування відставання стало в чотири рази більшим.
Чому результати змінилися
Раніше тестові завдання були відомі заздалегідь. Розробники могли навчати свої моделі саме під них, тому тести показували більше, ніж модель уміє насправді. Тепер завдання засекречені. За старою системою найкращі відкриті моделі відставали від лідера на 3 бали, а за новою різниця стала 12 балів.
Приклади з цифрами
Китайська модель Kimi K3.1 Pro від Moonshot набрала у своїй категорії 32 бали. Флагман Anthropic Claude Opus 5.5 отримав 58 балів. Навіть компактна Claude Haiku 5.5 показала результат краще за будь-який відкритий аналог.
Що про це кажуть експерти
Генеральний директор Snowflake Срідхар Рамасвамі поставив питання: відкриті моделі справді наздоганяють, чи тест міг просочитися? Частина ринку давно говорить, що рейтинги можна підігнати під тести, тому такі цифри варто читати обережно.
Навіщо це звичайному читачеві
Твердження, що дешеві китайські моделі скоро витіснять ChatGPT і Claude, стає менш переконливим. За оцінкою співзасновника OpenCode Дакса Раада, добовий трафік DeepSeek можна обслужити одним серверним пристроєм Nvidia вартістю $6-7 млн, а ChatGPT має понад 1 млрд щомісячних користувачів. Масштаби все ще дуже різні.
Корисне з першоджерела
- Оригінальна публікація Business Insider — Англомовний матеріал, на який посилається стаття, з деталями про рейтинги Artificial Analysis.
- Telegram-канал DOU/dev.ua — Канал з головними IT-новинами України, де публікують такі матеріали.
Джерела: 🔗 DOU/dev.ua
