В бизнес-симуляции Andon Labs GPT-6 Astra заработала втрое больше Claude Fable 5.1

Новость 7 сентября 2026 · 1 мин чтения

Andon Labs прогнала GPT-6 Astra и Claude Fable 5.1 на Vending-Bench 2 — год управления торговым автоматом со стартовыми 500 $. Astra в среднем закончила с 15 515 $, Fable 5.1 — с 5422 $. Худший результат Astra, 13 272 $, выше лучшего у Fable.

Рисунок нейросети

В тесте модель сама ищет поставщиков, торгуется, заказывает товар и назначает цены; каждой дали по шесть прогонов. Главная разница — в закупках. Fable 5.1 со временем соглашается на худшие условия: средняя цена банки колы у неё выросла с 1,17 $ в первые 90 дней до 2,21 $ к концу года. У Astra она держалась около 1,15 $, а в одном эпизоде модель выбила корзину товара за 108 $ при стартовой цене поставщика 226,32 $.

Fable 5.1 ещё и повторяла известную ей ошибку: платила вперёд поставщикам, которые уже закрылись. По подсчёту Andon Labs, за шесть прогонов она потеряла на этом 14 331 $. В соревновательном режиме, где несколько агентов торгуют рядом, Astra отказалась от предложения GLM-5.3 договориться о ценах, а Fable 5.1 на сговор пошла.

Andon Labs оговаривает, что выводы касаются поведения в симуляции и не переносятся автоматически на другие задачи. Там же лаборатория сообщает, что Astra первой из моделей обошла ориентир по всем пяти частям Drone-Bench — теста, где модель пишет код для автономного полёта дрона.

Где это в наших таблицах

Первоисточник: Andon Labs

Похожие новости