GDPval-AA

GDPval-AA — тест на реальная работа за деньги. Задания, взятые из настоящих профессий: то, за что людям платят зарплату. Оценивает не абстрактный интеллект, а годность к работе.

Что проверяетреальная работа за деньги
Моделей в выгрузке15
Первое место1
Балл лидера1 853,0
Отрыв от второго18,0 пункта
Снимок данных2 сентября 2026

Кто проходит его лучше всех

Первое место

1

1 853,0балла
  • Другие показатели этой модели в наши выгрузки не попали
Второе место

2

1 835,0балла
  • Отстаёт от первого места на 18,0 пункта
Третье место

3

1 824,0балла
  • Отстаёт от первого места на 29,0 пункта
Результаты, топ-10
  • 11 853,0
  • 21 835,0
  • 31 824,0
  • 41 797,0
  • 51 765,0
  • 61 758,0
  • 71 755,0
  • 81 743,0
  • 91 743,0
  • 101 731,0

Как читать результат

Разрыв между первым и десятым местом — 122,0 пункта: 1 853,0 против 1 731,0. Тест хорошо разводит модели по уровню.

Лидеры этого теста занимают высокие места и в общем зачёте: узко заточенных моделей он не выделяет.

Разница в один-два пункта укладывается в разброс между двумя прогонами одной и той же модели. Значимой считается разница от пяти пунктов.

Любой бенчмарк стареет: задачи попадают в открытый доступ, а оттуда — в обучающие данные новых моделей, и высокий балл начинает означать хорошую память, а не сообразительность.

Что этот тест не покрывает

Тест меряет одну способность — реальная работа за деньги. Его участники в нашу основную выгрузку не попали, поэтому сравнить их место в общем рейтинге нельзя. Итоговые оценки на сайте считаются по сводным индексам из нескольких тестов.

Связанные термины