Один зафиксированный snapshot модели без внешних инструментов и продуктового workflow.
- pinned_model_snapshot
- frozen_prompt_protocol
- no_external_tools
Вопросы, участники, результаты, стоимость, время и оценки должны находиться в одной проверяемой цепочке. Отсутствующие данные остаются неизвестными.
Наблюдаемая сборка приложения:
da50cacfac4f
Проверенный R3 evidence snapshot не настроен для публичной выдачи.
Каждый опубликованный результат должен проходить по одной проверяемой цепочке.
Точная задача, версия и допустимые данные.
Класс системы, сборка и политика инструментов.
Ответ, артефакты, стоимость и время.
Рубрика, судьи и ограничения.
Неизменяемый пакет с подтверждёнными правами.
Откройте набор, чтобы проверить его охват, состояние доказательств и границы по каждому вопросу.
Raw-модели, chat-продукты, coding agents, agent runtimes и оркестраторы — разные участники. Официальный рейтинг строится только внутри зафиксированного протокола.
Один зафиксированный snapshot модели без внешних инструментов и продуктового workflow.
Зафиксированные модели получают одинаковый браузер, code runner и файловые инструменты.
Полные продукты, coding agents, agent runtimes и оркестраторы сравниваются как системы.
Разные классы участников сравниваются только при одинаковых лимитах денег, времени и оператора.
Ход выполнения не означает квалификацию. Идентичность сборки и доказательства проверяются отдельно.
Интерфейс — это представление данных. Эти endpoints показывают то же закрытое по умолчанию состояние для проверки.