AA-Briefcase

AA-Briefcase — тест на офисная работа с документами. Модель получает набор файлов и рабочее задание: свести данные, найти противоречие, подготовить справку.

Что проверяетофисная работа с документами
Моделей в выгрузке15
Первое место1
Балл лидера1 694,0
Отрыв от второго7,0 пункта
Снимок данных2 сентября 2026

Кто проходит его лучше всех

Первое место

1

1 694,0балла
  • Другие показатели этой модели в наши выгрузки не попали
Второе место

2

1 687,0балла
  • Отстаёт от первого места на 7,0 пункта
Третье место

3

1 686,0балла
  • Отстаёт от первого места на 8,0 пункта
Результаты, топ-10
  • 11 694,0
  • 21 687,0
  • 31 686,0
  • 41 685,0
  • 51 611,0
  • 61 606,0
  • 71 575,0
  • 81 572,0
  • 91 562,0
  • 101 551,0

Как читать результат

Разрыв между первым и десятым местом — 143,0 пункта: 1 694,0 против 1 551,0. Тест хорошо разводит модели по уровню.

Лидеры этого теста занимают высокие места и в общем зачёте: узко заточенных моделей он не выделяет.

Разница в один-два пункта укладывается в разброс между двумя прогонами одной и той же модели. Значимой считается разница от пяти пунктов.

Любой бенчмарк стареет: задачи попадают в открытый доступ, а оттуда — в обучающие данные новых моделей, и высокий балл начинает означать хорошую память, а не сообразительность.

Что этот тест не покрывает

Тест меряет одну способность — офисная работа с документами. Его участники в нашу основную выгрузку не попали, поэтому сравнить их место в общем рейтинге нельзя. Итоговые оценки на сайте считаются по сводным индексам из нескольких тестов.

Связанные термины