AkagawaTsurunaki/ZerolanLiveRobot
📦 オープンソースプロジェクトAkagawaTsurunaki
ライブ配信やMinecraftプレイが可能な、AI VTuber構築用オールインワンフレームワーク。
ZerolanLiveRobotは、複雑なインタラクションが可能な自律型AIエージェントを作成するためのモジュール式エコシステムです。LLMを会話ロジックの核とし、マルチモーダル入力を用いてVTuberの行動を制御します。技術スタックには、音声コマンドを処理するASR、自然な発話を実現するTTS、ゲーム画面を認識・解釈するCV/OCRモジュールが含まれています。このフレームワークは拡張性が高く、ライブチャットの取得や画像・動画キャプション生成など、多様なAPIとの統合をサポートしています。開発者は、単に会話するだけでなく、ゲームプレイに参加したり、インタラクティブな放送を行うAIエージェントを構築可能です。Pythonをベースとしており、複数のAIサービスを統合して魅力的なキャラクターを創出したい開発者にとって最適なツールです。
💡ハイライト
- ├─LLM, ASR, TTS, CVのマルチモーダル統合
- ├─Minecraftでの自律プレイ機能
- └─Bilibiliライブ配信のリアルタイム連携
🎯対象
- ├─AI開発者
- ├─VTuberコンテンツクリエイター
- └─ゲーム自動化愛好家