Smart Home AI / IoT

Asisten Ruang Pintar dengan Fitur AI Smartbox Assistant

Asisten ruang pintar berbasis IoT dan AI yang dirancang untuk membantu memantau kondisi lingkungan, mengontrol catu daya stop kontak, serta berfungsi sebagai sarana hiburan cerdas di dalam ruangan dengan asisten suara AI dua arah.

Showcase Video Demonstrasi

Interaksi suara, monitoring sensor, dan kontrol hardware Smartbox secara real-time.

Teknologi Lingkungan

Next.jsESP32-S3MQTTGemini APIOpenRouterEdge ImpulseTensorFlow LiteArduino IDETailwind CSS

Pemberdayaan AI Hybrid

Menyatukan pemrosesan suara offline (TensorFlow Lite untuk pengenalan wake word secara langsung pada hardware ESP32-S3) dengan kecerdasan cloud (Gemini API & OpenRouter untuk dialog percakapan kontekstual yang mendalam).

8 Fitur Utama Smartbox

Integrasi cerdas antara asisten AI, IoT, sensor keselamatan, dan multimedia.

Kontrol Stop Kontak Ganda

Mengatur jadwal aktif/nonaktif stop kontak 1 dan 2 yang tertanam langsung pada Smartbox untuk efisiensi daya.

Monitor Lingkungan & Alarm Gas

Memantau suhu secara real-time dan mendeteksi adanya gas berbahaya, memicu alarm darurat jika terdeteksi kebocoran.

Wake Word & Voice Command

Sistem kendali suara offline dengan wake word khusus menggunakan model TensorFlow Lite yang dilatih di Edge Impulse.

Bluetooth Speaker Mode

Dapat difungsikan sebagai speaker Bluetooth nirkabel untuk memutar lagu dan kebutuhan multimedia lainnya.

Interaksi Suara AI (STT & TTS)

Mampu berbicara langsung dengan AI terintegrasi menggunakan Gemini API & OpenRouter untuk transkripsi dan sintesis ucapan.

Penjadwalan Otomatis & Timer

Dilengkapi fitur timer presisi dan alarm terjadwal secara mandiri untuk mengontrol status daya perangkat eksternal.

Visualisasi Audio LED Pulse

Efek pencahayaan LED dinamis terintegrasi yang berdenyut dan bergema mengikuti frekuensi dan amplitudo suara.

Greeting Voice Interaktif

Secara otomatis menyapa dan memberikan informasi kepada siapa pun yang melintas di depan Smartbox menggunakan sensor jarak.

Skema & Arsitektur Sistem

Desain alur komunikasi MQTT, logika mikrokontroler, dan interaksi API cloud.

Skema Sistem Smartbox Assistant

Diagram Arsitektur Perangkat Keras

Mikrokontroler ESP32-S3 memproses audio lokal untuk Wake Word via TensorFlow Lite, mengendalikan modul stop kontak, sensor suhu/gas, dan LED pulse. Komunikasi dua arah ke antarmuka web Next.js dijembatani oleh protokol MQTT. Ketika interaksi suara aktif, audio dikirim untuk transkripsi dan sintesis respons melalui Gemini API & OpenRouter.

Demonstrasi & Integrasi Web

Tonton video operasional di YouTube dan uji coba dashboard admin Smartbox secara langsung.

▶YouTube Demo Player (Auto-play on Scroll)

Uji Operasional Alat & Fitur

Video demonstrasi menyeluruh pengujian operasional fitur hardware, kontrol relay, dan respons AI.

smartbox-asisten.vercel.app/admin
Dashboard Admin Smartbox

Dashboard Web Admin

Uji sistem kontrol dan monitor logs hardware secara langsung.

Kode Akses: