Artikel XDA tentang memasangkan kamera lokal dengan AI Home Assistant beresonansi karena alasan yang jelas. Default dari kebanyakan kamera pintar masih “vendor melihat rekaman terlebih dahulu”. Home Assistant ditambah Frigate ditambah LLM dalam Ollama lokal membalikkan itu: aliran RTSP mentah masuk ke server lokal, deteksi objek berjalan pada Coral atau GPU, dan LLM hanya menyentuh frame yang sudah ditandai detektor objek. Tidak ada yang keluar dari rumah.
Komponen-komponennya adalah open source dan bergerak cepat. Tujuh aplikasi desktop untuk membuat visi AI kamera Home Assistant benar-benar berfungsi, diurutkan sehingga yang pertama adalah tempat setiap instalasi dimulai dan yang terakhir adalah tempat itu berhenti penting.
Apa yang harus dicari dalam tumpukan AI kamera lokal
Pipeline dibagi menjadi empat pekerjaan:
- Terima aliran RTSP atau ONVIF tanpa menariknya melalui cloud vendor.
- Deteksi objek pada kecepatan bingkai pada perangkat keras murah. Coral Edge TPU untuk akselerator USB, Frigate untuk lapisan perangkat lunak.
- Analisis adegan dengan LLM yang dapat menjelaskan apa yang ada di kotak pembatas dalam bahasa alami (“paket di teras”, “rakun di tempat sampah”).
- Perutean acara ke Home Assistant sehingga notifikasi, otomasi, dan dashboard dapat bereaksi.
Segalanya di bawah ini berjalan sepenuhnya pada perangkat keras yang Anda miliki, di desktop atau node homelab Windows, macOS, atau Linux.
Perbandingan cepat
| Aplikasi | Terbaik untuk | Lisensi | Lantai Perangkat Keras | Menonjol |
|---|---|---|---|---|
| Home Assistant | Hub yang setiap alat lain tancapkan ke | Apache 2.0 | 2 GB RAM | Router otomasi terbaik dalam daftar ini |
| Frigate | Deteksi objek lokal pada kecepatan bingkai | MIT | 4 GB RAM, Coral atau GPU | NVR lokal tercepat yang berbicara MQTT |
| LLM Vision | Deskripsi bahasa alami dari acara kamera | MIT | Menggunakan perangkat keras LLM Anda | Mengubah kotak pembatas menjadi kalimat yang dapat dibaca |
| Scrypted | Penerimaan kamera dan jembatan HomeKit Apple | MIT | 2 GB RAM | Cara terbaik untuk mengekspos kamera non-HomeKit ke HomeKit |
| Blue Iris | NVR bawaan Windows dengan UI matang | Proprietary | Windows PC | Berat badan Windows; perekaman yang solid |
| MQTT Explorer | Alat debugging untuk pesan Frigate → Home Assistant | MIT | 200 MB RAM | Membaca lalu lintas apa pun yang dipancarkan Frigate |
| Ollama | LLM lokal yang LLM Vision berbicara | MIT | 8 GB RAM + GPU membantu | Tempat model multimodal sebenarnya berjalan |
Aplikasi-aplikasi
1. Home Assistant – Hub Terbaik
Home Assistant adalah hub yang setiap integrasi kamera dalam tumpukan ini menunjuk. Ini menangani model entitas, otomasi yang dipicu pada acara Frigate, dashboard yang menampilkan snapshot terakhir, notifikasi ke telepon, dan UI pengaturan untuk LLM Vision. Bahkan jika Anda sudah menjalankan Blue Iris atau Scrypted untuk sisi perekaman, Home Assistant adalah tempat logika “rakun di tempat sampah → nyalakan lampu → kirim notifikasi” tinggal.
Dimana itu jatuh pendek: HAOS sangat dipikirkan tentang memiliki hostnya. Di Docker Anda kehilangan add-on supervisor. Kurva pembelajaran penuh melampaui dasar-dasar.
Harga:
- Gratis, Apache 2.0
- Nabu Casa Cloud di $6,50/bulan menambahkan akses jarak jauh tanpa mengekspos port
Platform: Linux (HAOS atau Docker), Windows atau macOS melalui VM/Docker Desktop.
Unduh: Home Assistant
Garis bawah: Instal terlebih dahulu. Setiap aplikasi lain dalam daftar ini mengasumsikan itu ada di sana.
2. Frigate – NVR Lokal dan Deteksi Objek Terbaik
Frigate adalah bagian yang mengubah RTSP mentah menjadi “orang di pintu”, “mobil di jalan masuk”, atau “paket dikirim”. Itu menarik aliran dari kamera Anda, menjalankan deteksi pada Coral Edge TPU atau GPU, menerbitkan acara melalui MQTT untuk Home Assistant mengkonsumsi, dan merekam klip hanya untuk acara yang Anda pedulikan. Rilis 2026 menambahkan plug LLM asli yang menyerahkan snapshot langsung ke model multimodal.
Dimana itu jatuh pendek: Penggunaan RAM meningkat dengan jumlah kamera. Coral TPU secara resmi direkomendasikan dan tidak selalu tersedia. Konfigurasi YAML panjang pada waktu pertama.
Harga:
- Gratis, berlisensi MIT
- Frigate+ berbayar add-on model terlatih di $50/tahun adalah opsional
Platform: Linux (Docker), terbaik pada x86_64 dengan akselerator USB Coral atau GPU nVidia.
Unduh: Frigate NVR
Garis bawah: Instal yang kedua. Ini adalah alasan mengapa “kamera AI tanpa cloud” adalah kalimat nyata.
3. LLM Vision – Terbaik untuk Deskripsi Acara yang Dapat Dibaca
LLM Vision adalah integrasi Home Assistant yang menyerahkan snapshot kamera dan klip ke LLM multimodal dan mengembalikan deskripsi bahasa alami. Ini bekerja dengan Ollama, OpenAI, Anthropic, Google Gemini, dan titik akhir yang kompatibel dengan OpenAI apa pun. Dalam praktik: Frigate menandai “orang” di pintu depan, LLM Vision menanyakan Ollama “jelaskan apa yang dilakukan orang ini”, dan ringkasan mendarat sebagai notifikasi telepon.
Dimana itu jatuh pendek: Deskripsi hanya sebaik model di belakangnya. Model visi kecil kadang-kadang berhalusinasi. Latensi pada GPU rumah terlihat.
Harga:
- Gratis, MIT
Platform: Berjalan di dalam Home Assistant; LLM yang mendasar tinggal di mana pun Anda host (Ollama di Linux, LM Studio, OpenAI di cloud).
Unduh: LLM Vision di GitHub
Garis bawah: Instal setelah Frigate. Ini adalah apa yang mengubah kotak pembatas menjadi “seseorang meninggalkan tas di pintu”.
4. Scrypted – Penerimaan Kamera dan Jembatan HomeKit Terbaik
Scrypted adalah pisau tentara swiss untuk kamera yang tidak berbicara protokol yang Anda inginkan. Itu menarik dalam RTSP, ONVIF, Ring, Nest, Reolink, Amcrest, dan membuka kembali mereka sebagai HomeKit Secure Video, RTSP, atau WebRTC. Di rumah dengan campuran “kamera murah yang berbicara RTSP” dan “pengguna iPhone yang menginginkan HomeKit”, Scrypted adalah penerjemah.
Dimana itu jatuh pendek: Bukan sendiri detektor objek dengan kualitas yang sama dengan Frigate. Dua alat berjalan secara paralel adalah umum.
Harga:
- Gratis, MIT
- Plugin NVR opsional dengan langganan untuk sinkronisasi cloud
Platform: Linux (Docker), Windows, macOS.
Unduh: Scrypted
Garis bawah: Instal ketika rumah mencampur kamera dari berbagai ekosistem.
5. Blue Iris – NVR Bawaan Windows Terbaik
Blue Iris adalah veteran. Berjalan di PC Windows, merekam ke disk lokal, terintegrasi dengan Home Assistant melalui MQTT, dan dashboard-nya adalah yang paling dipoles di ruang ini. Pasangkan dengan Frigate untuk AI atau dengan integrasi DeepStack/CodeProject.AI sendiri untuk deteksi objek.
Dimana itu jatuh pendek: Hanya Windows. Proprietary. UI adalah Windows tahun 2010-an dalam jiwa.
Harga:
- Lisensi satu kali sekitar $70 (LE) hingga $130 (Full)
- Uji coba gratis tersedia
Platform: Windows.
Unduh: Blue Iris
Garis bawah: Pilihan terbaik ketika mesin Windows sudah menjadi server rumah yang selalu aktif.
6. MQTT Explorer – Alat Debugging Pipeline Terbaik
MQTT Explorer adalah alat yang Anda buka ketika Frigate memancarkan acara, Home Assistant tidak bereaksi, dan Anda perlu melihat lalu lintas di antara mereka. Itu berlangganan pohon topik apa pun, menampilkan riwayat dalam feed langsung, dan memungkinkan Anda untuk menerbitkan kembali pesan untuk menguji otomasi. Setelah pipeline stabil Anda tidak menyentuhnya; saat Anda mengaturnya itu penting.
Dimana itu jatuh pendek: Bukan benar-benar “aplikasi” yang Anda jalankan setiap hari. Sumber-tersedia daripada sepenuhnya open source.
Harga:
- Gratis
Platform: Windows, macOS, Linux.
Unduh: MQTT Explorer
Garis bawah: Instal sekali, gunakan selama seminggu saat merangkai, lupakan Anda memilikinya.
7. Ollama – LLM Lokal Terbaik untuk Mendukung LLM Vision
Ollama adalah runtime model multimodal lokal benar-benar tinggal di. LLaVA dan turunannya, Qwen2.5-VL, moondream, dan model visi kecil lainnya menarik beberapa perintah dan berjalan bahagia pada GPU atau Apple Silicon. LLM Vision menunjuk pada titik akhir Ollama dan setiap snapshot acara melakukan perjalanan bolak-balik melaluinya.
Dimana itu jatuh pendek: GPU atau Apple Silicon sangat direkomendasikan untuk kecepatan. CPU-only mungkin tetapi lambat. Pilihan model mempengaruhi kualitas deskripsi.
Harga:
- Gratis, MIT
Platform: Linux, macOS, Windows.
Unduh: Ollama
Garis bawah: Instal sebagai mesin di belakang LLM Vision ketika Anda menginginkan semuanya lokal.
Bagaimana cara memilih yang tepat
Jika Anda memulai dari awal: Home Assistant terlebih dahulu, Frigate kedua, LLM Vision ketiga dengan model visi kecil di Ollama. Itu adalah tumpukan referensi.
Jika Apple HomeKit penting: tambahkan Scrypted untuk mengekspos kamera non-HomeKit.
Jika server rumah sudah kotak Windows: Blue Iris mengambil alih peran NVR dan menyerahkan acara ke Home Assistant.
Ketika Frigate tidak memicu otomasi yang Anda harapkan: MQTT Explorer untuk melihat apa yang sebenarnya dipublikasikan.
Jika cloud LLM dapat diterima: lewati Ollama dan tunjukkan LLM Vision ke OpenAI atau Gemini untuk kualitas deskripsi yang lebih tinggi dengan biaya meninggalkan rumah.
FAQ
Bisakah Home Assistant melakukan AI kamera tanpa Frigate?
Ada integrasi yang lebih ringan (deteksi gerakan melalui integrasi kamera itu sendiri, DeepStack, CodeProject.AI). Frigate adalah tempat deteksi objek lokal kelas terbaik saat ini tinggal. Kebanyakan orang berakhir di atasnya.
Apakah saya membutuhkan Coral Edge TPU?
Sangat disarankan. Frigate berjalan di CPU tetapi pada sebagian kecil dari frame rate. Satu stick USB Coral menangani 3 hingga 5 kamera dengan nyaman. GPU juga bekerja, dengan biaya daya yang lebih tinggi.
LLM mana yang terbaik untuk LLM Vision?
Untuk lokal, Qwen2.5-VL dan moondream adalah pesaing depan saat ini pada perangkat keras yang sederhana. Untuk cloud, GPT-5 atau Gemini-2.5-Pro menghasilkan deskripsi yang jauh lebih baik dengan biaya privasi.
Bisakah saya menjalankan ini tanpa cloud sama sekali?
Ya. Home Assistant + Frigate + LLM Vision + Ollama mencakup seluruh pipeline secara lokal. Hanya notifikasi telepon yang meninggalkan rumah, dan bahkan itu dapat dirutekan melalui server Ntfy atau Gotify yang di-host sendiri.
Apakah ini berfungsi dengan kamera nirkabel?
Kamera apa pun yang memancarkan RTSP atau mendukung ONVIF berfungsi. Kamera Wi-Fi baik-baik saja; jaringan yang stabil penting lebih dari kamera berwayar.
