Детали: ARC Prize сообщает: GPT-6 Astra получил 62,7% на ARC-AGI-3 Semi-Private со Standard harness

Детали:
ARC Prize сообщает: GPT-6 Astra получил 62,7% на ARC-AGI-3 Semi-Private со Standard harness за $26 098 и 99,9% с Provider Adapter за $18 817. Provider Adapter сохраняет opaque reasoning state между запросами и использует compaction, тогда как Standard harness ограничен provider-neutral интерфейсом.

Поэтому сравнивать 99,9% и 62,7% как два независимых «уровня интеллекта» некорректно. Это два evaluation condition, отвечающие на разные вопросы: как модель работает в общем интерфейсе и как — с нативной инфраструктурой управления контекстом.

Где деньги:
Растёт рынок независимых evals, benchmark-аудита, observability и инфраструктуры для context management. Для компаний это также аргумент не принимать красивую цифру без проверки harness, токенов, стоимости и доступных инструментов.

Вердикт:
Главный результат ARC-AGI-3 — не только 99,9%, а прозрачность условий. В эпоху агентных систем честный benchmark обязан публиковать интерфейс, память, инструменты, стоимость и правила сохранения состояния.

Источники: ARC Prize results разбор ARC Prize

Карта для оплаты AI: открыть бота