Индекс интеллекта — что это такое
Intelligence Index
Сводная оценка по нескольким независимым тестам.
Что это
Среднее по набору тестов, которые модели проходят в одинаковых условиях: рассуждение, знания, математика, код. Шкала не процентная: 65 баллов это результат сильнейшей модели на сегодня, а не 65% правильных ответов.
Зачем это знать при выборе модели
Годится, чтобы отсечь заведомо слабые модели. Проверку на своей задаче не заменяет: выигравшая в среднем может проигрывать именно там, где нужно вам.
Где эта величина видна на сайте
Величина показана первой колонкой общего рейтинга — посмотреть: первое место — 65,7 балла.
Другие термины
Токен · Входные и выходные токены · Кэширование запроса · Стоимость задачи · Контекстное окно · Потерянная середина · Поиск по своим документам · Выдумка модели