AkagawaTsurunaki/ZerolanLiveRobot
📦 Open Source ProjectAkagawaTsurunaki
Универсальный фреймворк для AI-VTuber, поддерживающий стриминг, взаимодействие в реальном времени и игру в Minecraft.
ZerolanLiveRobot представляет собой модульную экосистему для создания автономных AI-агентов, способных к сложным взаимодействиям. Используя LLM для логики диалогов, система обрабатывает мультимодальные данные для управления поведением VTuber'а. Техническая архитектура включает ASR для обработки голосовых команд, TTS для естественной речи, а также модули CV и OCR, позволяющие агенту «видеть» и интерпретировать содержимое экрана, например, состояние игры в Minecraft. Фреймворк легко расширяем и поддерживает интеграцию с различными API для работы с чатами стримов, описанием изображений и видеоаналитикой. Это позволяет разработчикам создавать агентов, которые не просто общаются, но и активно участвуют в игровых сессиях или ведут интерактивные трансляции. Проект написан на Python и ориентирован на простоту интеграции различных AI-сервисов в единую интерактивную личность.
💡Основное
- ├─Стек LLM, ASR, TTS и CV
- ├─Интеграция с Minecraft
- └─Поддержка стриминга на Bilibili
🎯Для
- ├─AI-разработчики
- ├─Создатели VTuber-контента
- └─Энтузиасты автоматизации игр