Появился сервис, который каждый день сравнивает цены и качество нейросетей

Что произошло. Появился сайт, который каждый день автоматически собирает данные о ценах и качестве работы языковых моделей ИИ — так называют нейросети вроде тех, что лежат в основе чат-ботов. Сервис берёт данные из открытого источника Artificial Analysis и строит таблицы и графики: сколько стоит обработка миллиона условных единиц текста (токенов) у каждой модели и насколько хорошо она справляется с задачами по специальному индексу интеллекта. Пользователь может выбрать свой бюджет и увидеть, какая модель даёт лучший результат за эти деньги.

Что это значит для бизнеса. Если компания хочет подключить нейросеть для работы с клиентами, текстами или документами, ей не нужно разбираться самостоятельно, какая модель выгоднее. Сервис показывает не только цену за объём текста, но и примерную стоимость выполнения одной типовой задачи — у разных моделей она может сильно отличаться даже при одинаковой цене за токены, потому что одни модели «думают» дольше и тратят больше токенов на ответ. Также сервис учитывает разные режимы работы модели: более тщательный режим обычно даёт более высокое качество, но стоит дороже. Важно понимать: сайт показывает только цены и оценки качества, а не доступность конкретных моделей в России — об этом источник ничего не говорит.

Как попробовать. Сайт открыт и обновляется ежедневно, им можно пользоваться бесплатно через браузер; исходный код и данные выложены в открытом доступе на GitHub.