Индекс открытости

Индекс открытости — тест на насколько модель открыта. Оценивает, что именно разработчик выложил: веса, данные обучения, код, лицензию. Модель может называться открытой, а на деле давать только файлы весов.

Что проверяетнасколько модель открыта
Моделей в выгрузке15
Первое место1
Балл лидера88,9
Отрыв от второго0,0 пункта
Снимок данных2 сентября 2026

Кто проходит его лучше всех

Первое место

1

88,9балла
  • Другие показатели этой модели в наши выгрузки не попали
Второе место

2

88,9балла
  • Отстаёт от первого места на 0,0 пункта
Третье место

3

88,9балла
  • Отстаёт от первого места на 0,0 пункта
Результаты, топ-10
  • 188,9
  • 288,9
  • 388,9
  • 488,9
  • 588,9
  • 688,9
  • 788,9
  • 888,9
  • 988,9
  • 1088,9

Как читать результат

Разрыв между первым и десятым местом — 0,0 пункта: 88,9 против 88,9. Разброс небольшой: по этому тесту модели почти неотличимы, и решать по нему одному не стоит.

Лидеры этого теста занимают высокие места и в общем зачёте: узко заточенных моделей он не выделяет.

Разница в один-два пункта укладывается в разброс между двумя прогонами одной и той же модели. Значимой считается разница от пяти пунктов.

Любой бенчмарк стареет: задачи попадают в открытый доступ, а оттуда — в обучающие данные новых моделей, и высокий балл начинает означать хорошую память, а не сообразительность.

Что этот тест не покрывает

Тест меряет одну способность — насколько модель открыта. Его участники в нашу основную выгрузку не попали, поэтому сравнить их место в общем рейтинге нельзя. Итоговые оценки на сайте считаются по сводным индексам из нескольких тестов.

Связанные термины