Bitrix AI Challenge
Какая нейросеть лучше пишет код на 1С-Битрикс
Тест AI-агентов Claude Code, Codex, Cursor и других на реальном заказе веб-студии: каждая связка «приложение + модель + скиллы» делает задачу на живом стенде 1С-Битрикс, а результат оценивают двое — модель-ревьювер и автор.
Лучший результат — Claude Opus 5.5 в Claude Code: 89.5 из 100. Оба прогона Codex — в тире C.
Все прогоны
| Связка | Срезы | Оценка | Итер. | Мин | Токены in/out | Расход | ||
|---|---|---|---|---|---|---|---|---|
| Тир A · 85–100 | ||||||||
|
Claude Code · Claude Opus 5.5 High
Anthropic
Референс узнаётся на десктопе, бэкенд на штатном D7 закрывает гонку за слот в базе, всё с первого прогона. Мимо — узкий мобильный экран и скомпилированный dataClass вместо Elements-класса. |
Виз
Бэк
|
89.5
√(В·Б)
|
1 | 48 |
496.0 / 256.4K
кеш ввода 84.6M
кеш вывода 528.5K
|
60% 5ч
тариф Pro ($20)
|
Прогон → |
|
Claude Code · Claude Sonnet 5.5 High
Anthropic
Близкая копия референса и бэкенд на штатных механизмах Битрикса с первого прогона; мелочи остались во фронтенде и в стиле кода. |
Виз
Бэк
|
85.2
√(В·Б)
|
1 | 36 |
300.0 / 2.6K
кеш ввода 46.9M
кеш вывода 975.6K
|
56% 5ч
тариф Pro ($20)
|
Прогон → |
| Тир B · 70–84 | ||||||||
|
Claude Code · Claude Opus 5 High
Anthropic
Битриксовый модуль по канону D7 и узнаваемый референс с первой попытки; подвела адаптивность одной секции. |
Виз
Бэк
|
82.2
√(В·Б)
|
1 | 90 |
1.3K / 546.7K
кеш ввода 227.9M
кеш вывода 1.7M
|
70% 5ч
тариф Pro ($20)
|
Прогон → |
|
Работает с первого прогона: узнаваемый первый экран и настоящая D7-архитектура с гонкой на уровне БД, но лендинг после первого экрана и английские заголовки референса тянут визуал вниз. |
Виз
Бэк
|
71.7
√(В·Б)
|
1 | 45 |
628.2K / 146.1K
кеш ввода 17.5M
кеш вывода 0
|
2% мес.
тариф Pro ($20)
|
Прогон → |
| Тир C · 50–69 | ||||||||
|
Cursor · Gemini 4 Argon High
Google
Узнаваемый лендинг ценой стилей, списанных с референса, и битриксовый каркас бэкенда, который обходит требования скиллов: нет Loc, legacy-работа с инфоблоками. |
Виз
Бэк
|
69.5
√(В·Б)
|
1 | 32 |
1.8M / 162.8K
кеш ввода 16.0M
кеш вывода 0
|
16% мес.
тариф Pro ($20)
|
Прогон → |
|
Codex · GPT 5.6 Sol High
OpenAI
Убедительный лендинг по референсу поверх бэкенда, который держит контракт, но написан на один показ. |
Виз
Бэк
|
68.4
√(В·Б)
|
1 | 63 |
851.2K / 89.3K
кеш ввода 21.4M
кеш вывода 0
|
64% 5ч
тариф Plus ($20)
|
Прогон → |
|
Качественный визуал по мотивам референса и рабочая запись за 0.5$, но бэкенд написан старым API в обход правил скиллов. |
Виз
Бэк
|
66.5
√(В·Б)
|
1 | 56 |
208.5K / 290.5K
кеш ввода 81.8M
кеш вывода 0
|
$0.50 | Прогон → |
|
Codex · GPT 6 Astra High
OpenAI
Лендинг узнаётся как референс с первой итерации, но код в нём не отформатирован и не читается, хотя слои D7 в нём настоящие. |
Виз
Бэк
|
61.3
√(В·Б)
|
1 | 36 |
716.4K / 57.0K
кеш ввода 12.6M
кеш вывода 0
|
180% 5ч
тариф Plus ($20)
|
Прогон → |
Референс узнаётся на десктопе, бэкенд на штатном D7 закрывает гонку за слот в базе, всё с первого прогона. Мимо — узкий мобильный экран и скомпилированный dataClass вместо Elements-класса.
Близкая копия референса и бэкенд на штатных механизмах Битрикса с первого прогона; мелочи остались во фронтенде и в стиле кода.
Битриксовый модуль по канону D7 и узнаваемый референс с первой попытки; подвела адаптивность одной секции.
Работает с первого прогона: узнаваемый первый экран и настоящая D7-архитектура с гонкой на уровне БД, но лендинг после первого экрана и английские заголовки референса тянут визуал вниз.
Узнаваемый лендинг ценой стилей, списанных с референса, и битриксовый каркас бэкенда, который обходит требования скиллов: нет Loc, legacy-работа с инфоблоками.
Убедительный лендинг по референсу поверх бэкенда, который держит контракт, но написан на один показ.
Качественный визуал по мотивам референса и рабочая запись за 0.5$, но бэкенд написан старым API в обход правил скиллов.
Лендинг узнаётся как референс с первой итерации, но код в нём не отформатирован и не читается, хотя слои D7 в нём настоящие.
Как тестировали
Каждая связка «приложение + модель + скиллы» делает одну и ту же задачу — реальный заказ веб-студии: лендинг с онлайн-записью на чистом 1С-Битрикс, с дизайном по выбранному референсу, инфоблоками и модулем записи. Работа идёт на живом стенде: автор проверяет результат руками и пишет замечания как заказчик, лимит — 10 итераций.
Потом две оценки по одной рубрике из 11 критериев — модель-ревьювер и автор, который не читает её ревью; балл критерия — среднее двух. Критерии складываются в срезы Визуал и Бэкенд по 100 баллов, общая оценка = √(Визуал · Бэкенд). Тиры — полосы балла (A от 85, B 70–84, C 50–69, D ниже 50); прогон на связку один, поэтому разница внутри тира не интерпретируется.
