О проекте и методике
Сайт отвечает на один вопрос: какую нейросеть брать под конкретную задачу и сколько это будет стоить в рублях. В таблицах стоят измеримые величины — результаты тестов, ставки за токены, время ответа. Там, где измерения нет, стоит прочерк, а не оценка на глаз.
Что мы измеряем сами
Доступность из России. С нашего сервера в Москве мы обращаемся к API каждого разработчика и смотрим, отвечает ли он на запрос с российского адреса. Результат попадает в колонку «Из России»: «есть» — сервер ответил, «нет» — запрос не прошёл. Замер повторяется регулярно, дата последней проверки указана на карточке модели.
Доступность сервиса. Отдельно от API мы запрашиваем сайт каждого сервиса с того же сервера. Это разные вещи: у части разработчиков API отвечает на запрос программы, а собственный сервис с российского адреса выдаёт отказ по региону — в таблице такие помечены «только API».
Реестр сервисов. Бесплатные тарифы, необходимость регистрации, язык интерфейса и приём российских карт мы проверяем руками, по одному сервису. Пока факт не проверен, в таблице стоит прочерк: обещания с сайта продукта не переписываются.
Откуда берутся оценки и цены
Баллы интеллекта, кода и агентности, скорость выдачи токенов и цены за миллион токенов приходят из независимых замеров Artificial Analysis — проекта, который прогоняет все модели по одинаковым тестам. Это принципиально отличается от сводок, где цифры переписаны из пресс-релизов разработчиков.
Цены пересчитываются в рубли по курсу ЦБ РФ на день обновления данных: курс и дата видны в подвале каждой страницы.
Как часто обновляется
Данные о моделях обновляются раз в неделю, снимки хранятся — из них со временем вырастут графики изменения цен и скорости. Реестр сервисов пересматривается раз в месяц.
Где мы можем ошибаться
Замер доступности показывает поведение сервера в конкретную минуту с конкретного адреса: у другого провайдера результат может отличаться. Индекс интеллекта — среднее по нескольким тестам, и модель, выигравшая в среднем, может проигрывать на вашей задаче. Цены у посредников отличаются от цен разработчика.
Нашли ошибку в цифре или устаревшую цену — напишите, поправим и укажем дату исправления.