Bitrix AI Challenge
Какая нейросеть лучше пишет код на 1С-Битрикс
Тест AI-агентов Claude Code, Codex, Cursor и других на реальном заказе веб-студии: каждая связка «приложение + модель + скиллы» делает задачу на живом стенде 1С-Битрикс, а результат оценивают двое — модель-ревьювер и автор.
Лучший результат — Claude Opus 5.5 в Claude Code: 89.5 из 100. Оба прогона Codex — в тире C.
Все прогоны
| Связка | Срезы | Оценка | Итер. | Мин | Токены in/out | Расход | ||
|---|---|---|---|---|---|---|---|---|
| Тир B · 70–84 | ||||||||
|
Работает с первого прогона: узнаваемый первый экран и настоящая D7-архитектура с гонкой на уровне БД, но лендинг после первого экрана и английские заголовки референса тянут визуал вниз. |
Виз
Бэк
|
71.7
√(В·Б)
|
1 | 45 |
628.2K / 146.1K
кеш ввода 17.5M
кеш вывода 0
|
2% мес.
тариф Pro ($20)
|
Прогон → |
| Тир C · 50–69 | ||||||||
|
Cursor · Gemini 4 Argon High
Google
Узнаваемый лендинг ценой стилей, списанных с референса, и битриксовый каркас бэкенда, который обходит требования скиллов: нет Loc, legacy-работа с инфоблоками. |
Виз
Бэк
|
69.5
√(В·Б)
|
1 | 32 |
1.8M / 162.8K
кеш ввода 16.0M
кеш вывода 0
|
16% мес.
тариф Pro ($20)
|
Прогон → |
Работает с первого прогона: узнаваемый первый экран и настоящая D7-архитектура с гонкой на уровне БД, но лендинг после первого экрана и английские заголовки референса тянут визуал вниз.
Узнаваемый лендинг ценой стилей, списанных с референса, и битриксовый каркас бэкенда, который обходит требования скиллов: нет Loc, legacy-работа с инфоблоками.
Как тестировали
Каждая связка «приложение + модель + скиллы» делает одну и ту же задачу — реальный заказ веб-студии: лендинг с онлайн-записью на чистом 1С-Битрикс, с дизайном по выбранному референсу, инфоблоками и модулем записи. Работа идёт на живом стенде: автор проверяет результат руками и пишет замечания как заказчик, лимит — 10 итераций.
Потом две оценки по одной рубрике из 11 критериев — модель-ревьювер и автор, который не читает её ревью; балл критерия — среднее двух. Критерии складываются в срезы Визуал и Бэкенд по 100 баллов, общая оценка = √(Визуал · Бэкенд). Тиры — полосы балла (A от 85, B 70–84, C 50–69, D ниже 50); прогон на связку один, поэтому разница внутри тира не интерпретируется.
