Olney1/ChatGPT-OpenAI-Smart-Speaker
📦 オープンソースプロジェクトOlney1
音声と視覚によるスマートスピーカー。OpenAIとLangChainエージェントを搭載し、ウェブ検索も可能。
ChatGPT-OpenAI-Smart-Speakerプロジェクトは、音声と視覚による総合的なスマートスピーカーアプリケーションです。音声入力には音声認識（STT）、応答にはテキスト読み上げ（TTS）、環境認識にはカメラ視覚を利用します。LangChainエージェントを統合し、Tavilyによるウェブ検索などの複雑なタスクをオーケストレーションし、LangSmithで監視・デバッグを行います。GPT-4をサポートし、ユーザーは質問やリアルタイム情報の取得、音声や視覚入力による対話が可能です。コードはPythonで記述され、Raspberry Piやデスクトップなどのデバイスに簡単にデプロイできるよう設計されています。主な機能は、マルチモーダルインタラクション、カスタマイズ可能なエージェントワークフロー、シームレスなOpenAI API統合です。このプロジェクトは、日常生活のデバイスにおけるAIエージェントの実用的な応用を示しています。
💡ハイライト
- ├─マルチモーダル音声＆視覚
- ├─LangChainエージェントオーケストレーション
- └─GPT-4 + Tavilyウェブ検索
🎯対象
- ├─AI開発者
- ├─スマートホーム愛好家
- └─オープンソース貢献者