Az ESP32-CAM egy nagy teljesítményű, olcsó mikrokontroller, beépített kameramodullal, amely képes képeket rögzíteni és élő videókat streaming. A feldolgozási képességek kihasználásával és a külső gépi tanulási könyvtárak vagy keretek integrálásával engedélyezheti az objektumok észlelését közvetlenül az ESP32-CAM-on. Ez az oktatóanyag az alapvető objektum-észlelés beállításán keresztül az ESP32-CAM-szal előre kiképzett modellek segítségével.
Mire lesz szüksége
- ESP32-CAM modul
- FTDI programozó (USB-soros adapter)
- Jumper vezetékek
- Kenyérlemez (opcionális)
- Egy számítógép, amelyen az Arduino IDE telepített
- Edge impulzus vagy tensorflow lite objektumdetektálási modellekhez
1. lépés: Az Arduino IDE beállítása
1. Telepítse az ESP32 tábla csomagot
-
Nyissa meg az Arduino IDE -t.
-
Elindul Irat > Preferenciák.
-
A "További Board Manager URLS" mezőben adja hozzá:
https://dl.espressif.com/dl/package_esp32_index.json
-
Kattintás RENDBEN.
-
Elindul Szerszámok > Bizottság > Táblák menedzser.
-
Keressen az "ESP32" -re, és telepítse a csomagot az Espressif Systems segítségével.
2. Telepítse a szükséges könyvtárakat
- Telepítse az "ESP32 kamera" könyvtárat.
- Az objektumdetektálási modellekhez telepítse a "TensorFlow Lite Micro" (vagy hasonló könyvtárakat).
2. lépés: Az ESP32-CAM bekötése
ESP32-CAM PIN | FTDI programozó csap |
---|---|
GND | GND |
5 V -os | VCC (5V) |
U0R | Tx |
U0T | RX |
GND | GND (IO0 - GND a villogáshoz) |
Fontos: Csatlakoztassa az IO0 tűt a GND-hez, hogy az ESP32-CAM-ot flash módba tegye.
3. lépés: Az alapvető objektum -észlelési vázlat feltöltése
1. Válassza ki a táblát és a portot
- Elindul Szerszámok > Bizottság és válasszon Ai-thinker ESP32-CAM.
- Alatt Szerszámok, válassza ki a helyes Comport Az FTDI programozójához.
2. A kód előkészítése
Használjon egy alapvető példát egy előre kiképzett objektumdetektálási modell (például a TensorFlow Lite modell) betöltéséhez. Az alábbiakban egy mintarészlet található az objektum észlelésének integrálására:
3. Töltse fel a kódot
- Nyomja meg a Visszaállít gomb az ESP32-CAM-on, míg az IO0 csatlakozik a GND-hez.
- Kattintás Feltöltés az Arduino Ide -ben.
- Miután a feltöltés befejeződött, válassza le az IO0 -t a GND -ből, és nyomja meg a Visszaállít ismét gomb.
4. lépés: Az objektumdetektálási eredmények elérése
- Nyissa meg a soros monitort (Szerszámok > Soros monitor) és állítsa be az adatátviteli sebességet
115200
. - Tekintse meg az észlelt tárgyakat és azok megbízhatósági pontszámait a soros monitorban.
- Bővítheti ezt az eredmények megjelenítésével egy webes felületen, HTML használatával, vagy integrálva az olyan tárgyak internetein, mint az MQTT.
5. lépés: Az objektum észlelésének javítása
- Modell optimalizálás: Használjon Edge Impulse vagy TensorFlow Lite-t az ESP32-CAM számára optimalizált egyedi modellek kiképzéséhez.
- Webes felület: Fokozza a projektet az észlelt objektumok közvetlenül a böngésző felületén történő megjelenítésével.
- IOT integráció: Küldje el az észlelési eredményeket a felhőalapú szolgáltatásoknak további feldolgozási vagy riasztási rendszerekhez.
Hibaelhárítás
- Túl nagy modell: Győződjön meg arról, hogy a modell mérete illeszkedik az ESP32-CAM memóriájába.
- A kamerát nem észlelték: Ellenőrizze a vezetékeket, és ellenőrizze, hogy a kamera biztonságosan csatlakoztatva van -e.
- Alacsony pontosság: Képzze meg vagy finomítsa a modellt relevánsabb adatokkal.
Az objektumdetektálás alkalmazása az ESP32-CAM segítségével
- Biztonsági kamerák mozgással vagy objektum észlelésével
- Intelligens otthoni automatizálás (például szállítások vagy háziállatok észlelése)
- Ipari megfigyelő és számláló rendszerek
- Vadon élő állatok megfigyelése és kutatása
Következtetés
Sikeresen beállította az alapvető objektumdetektálást az ESP32-CAM segítségével. Ez a hatalmas modul, a gépi tanulási modellekkel kombinálva, végtelen lehetőségeket nyit meg a valós alkalmazások számára. Kísérletezzen különböző modellekkel, javítsa a pontosságot, és bővítse a funkcionalitást a projekt igényeinek megfelelően!