Оценка Elo — что это такое
Elo rating
Рейтинг из парных сравнений, как в шахматах.
Что это
Людям показывают два результата по одному запросу и спрашивают, какой лучше, не называя авторов. Из тысяч сравнений складывается число: разница в сто пунктов означает победу примерно в двух случаях из трёх, десять-двадцать пунктов — в пределах погрешности.
Зачем это знать при выборе модели
Так меряют картинки, видео и музыку, где нет правильного ответа и оценить можно только на глаз и на слух.
Где эта величина видна на сайте
Величина показана в разделах картинок, видео, музыки и озвучки — посмотреть: оценка складывается из тысяч парных сравнений.
Другие термины
Токен · Входные и выходные токены · Кэширование запроса · Стоимость задачи · Контекстное окно · Потерянная середина · Поиск по своим документам · Выдумка модели