Подробная карта OpenSource инструментов для создания AI агентов

→ Хабр

Обзор практических open-source инструментов с разрешительными лицензиями для разработки автономных AI-агентов.

🔹 Фреймворки для создания агентов
CrewAI — оркестрация ролевых автономных AI-агентов
Phidata — создание AI-ассистентов с памятью и инструментами
AutoGPT — автоматизация сложных процессов
LangChain и LlamaIndex — композиция элементов для AI-агентов

🔹 Работа с компьютером и браузером
Open Interpreter — преобразование естественного языка в код
Self-Operating Computer — управление компьютером через мультимодальные модели
LaVague — создание веб-агентов для взаимодействия с сайтами

🔹 Голосовые интерфейсы
Ultravox — речевое взаимодействие в реальном времени
Whisper — речь-в-текст от OpenAI
ChatTTS — единственная продакшн-готовая open-source модель текст-в-речь

🔹 Понимание документов
Qwen2-VL — мультимодальная модель для обработки документов
DocOwl2 — понимание документов без OCR

🔹 Память агентов
Mem0 — самообучающийся слой памяти для LLM
Letta (ранее MemGPT) — агенты с долгосрочной памятью

🔹 Тестирование, мониторинг и симуляция
Voice Lab — тестирование голосовых агентов
AgentOps — мониторинг и бенчмаркинг
AgentVerse — симуляция множественных LLM-агентов

🔹 Вертикальные агенты
OpenHands — платформа для агентов разработки ПО
aider — парное программирование в терминале
GPT Researcher — автономный агент для комплексных исследований