Что произошло: мы запустились в июне прошлого года, чтобы построить двусторонний маркетплейс для оценки AI-моделей: дать пользователям доступ к нескольким моделям и использовать это реальное взаимодействие, чтобы помогать AI-лабораториям оценивать свои модели. Мы привлекли более 1,3 млн пользователей и несколько лабораторий в качестве платящих клиентов, но не смогли достичь достаточно сильного product–market fit.

Тем временем рынок быстро изменился. Модели становятся гораздо более способными, а пользовательские сценарии смещаются в сторону агентных систем: моделей, подключенных к инструментам, памяти и внешним сервисам, а не отдельных чат-ботов. В таком мире краудсорсинговая оценка моделей на уровне чат-ботов становится все менее критичной.