valentinfrlch/ha-llmvision
📦 Open Source Projectvalentinfrlch
Превратите Home Assistant в интеллектуальную систему видеонаблюдения с помощью мультимодальных LLM для анализа в реальном времени.
ha-llmvision стирает границы между статическим видеонаблюдением и когнитивной автоматизацией дома. Это пользовательская интеграция для Home Assistant, использующая мультимодальные LLM для анализа видеопотоков или отдельных кадров. В отличие от традиционных датчиков движения, реагирующих на любое перемещение, этот инструмент способен различать конкретные события — например, «курьер оставил посылку» или «питомец на диване» — и действовать соответствующим образом.
Технически интеграция управляет конвейером захвата кадров с камер, отправки их в настроенные LLM-бэкенды (такие как OpenAI, Google Gemini или локальные модели через Ollama) и преобразования текстового ответа в атрибуты Home Assistant. Поддержка пользовательских промптов позволяет задавать специфические критерии мониторинга. Такой модульный подход обеспечивает совместимость с широким спектром камер, сохраняя гибкость интеллектуального уровня по мере развития моделей компьютерного зрения.
💡Основное
- ├─Анализ камер через мультимодальные LLM
- ├─Простая установка через HACS
- └─Поддержка пользовательских промптов
🎯Для
- ├─Энтузиасты умного дома
- └─Разработчики систем автоматизации