ESP32-S3-BOX-Lite AI Voice Development Kit
Uživatelská příručka
Příručka je použitelná pro sady ESP32-S3-BOX a ESP32-S3-BOX-Lite s nejnovější verzí firmwaru. V této příručce jsou souhrnně označovány jako vývojové desky řady BOX.
Začínáme
Řada vývojových desek BOX integrovaných s SoC ESP32-S3 poskytuje uživatelům platformu pro vývoj řídicího systému chytrých domácích spotřebičů pomocí hlasové asistence + ovladače s dotykovou obrazovkou, senzoru, infračerveného dálkového ovladače a inteligentní brány Wi-Fi. Řada vývojových desek BOX přichází s předpřipraveným firmwarem, který podporuje hlasové probuzení a offline rozpoznávání řeči v čínštině i angličtině. Sada ESP-BOX SDK obsahuje rekonfigurovatelnou hlasovou interakci AI, která vám umožňuje přizpůsobit příkazy pro ovládání domácích spotřebičů. Tato příručka stručně představí, co můžete dělat s nejnovější verzí firmwaru, abyste mohli začít. Po přečtení průvodce můžete začít s vývojem aplikace sami. Začněme!
Sada BOX obsahuje:
ESP32-S3-BOX | ESP32-S3-BOX-Lite |
Hlavní jednotka, která dokáže pracovat sama | Hlavní jednotka, která dokáže pracovat sama |
Modul RGB LED a vodiče Dupont pro testování | Modul RGB LED a vodiče Dupont pro testování |
Dock, příslušenství, které slouží jako stojan pro hlavní jednotku | N/A |
Požadovaný hardware:
Najděte si prosím kabel USB-C.
Připojte RGB LED modul k vašemu zařízení
Podívejte se na níže uvedenou definici pinů a připojte modul RGB LED k BOXu pomocí vodičů DuPont. Modul má čtyři kolíky, R, G, B a GND. Připojte je k zásuvkám G39, G40, G41 a GND na PMOD 1.
Zapněte zařízení
- Zapněte zařízení pomocí kabelu USB-C.
- Po zapnutí zařízení se na obrazovce přehraje animace spouštění loga Espressif.
Pojďme si hrát!
- První dvě stránky rychlého průvodce představují funkci tlačítek na vývojových deskách řady BOX. Klepnutím na Další přejděte na další stránku.
- Poslední dvě stránky stručného průvodce uvádějí, jak používat hlasové ovládání AI. Klepnutím na OK Let's Go vstupte do nabídky.
- V nabídce je pět možností: Ovládání zařízení, Síť, Přehrávač médií, Nápověda a O nás. Přejetím doleva a doprava můžete přejít na různé možnosti. Napřample, přejděte na obrazovku Ovládání zařízení a klepnutím na Světlo zapněte nebo vypněte světlo LED na modulu.
Poté se můžete vrátit do nabídky a vstoupit na obrazovku Media Player pro přehrávání hudby nebo nastavení hlasitosti.
Pouze ESP32-S3-BOX podporuje následující funkce:
- Stisknutím tlačítka ztlumení na horní straně zařízení deaktivujete buzení hlasem a rozpoznávání řeči. Dalším stisknutím je povolíte.
- Klepnutím na červený kruh pod obrazovkou se vrátíte na poslední stránku.
Offline hlasový asistent
- Zařízení můžete probudit na jakékoli obrazovce vyslovením „ahoj ESP“. Když se probudí, na obrazovce se zobrazí slovo, které jste právě použili. Pokud se slovo probuzení nezobrazí, zkuste to znovu. Níže uvedená obrazovka ukazuje, že vaše zařízení poslouchá.
- Do 6 sekund po pípnutí vyslovte příkaz, například „zapni světlo“. Uvidíte příkaz zobrazený na obrazovce a LED kontrolka na modulu se rozsvítí a uslyšíte „OK“. Přibližně o 6 sekund později opustíte obrazovku hlasového ovládání, pokud již není k dispozici žádný příkaz.
- K poslechu hudby můžete použít hlasové příkazy. Nejprve prosím probuďte zařízení a poté řekněte „přehrát hudbu“. Hudební přehrávač se otevře a začne přehrávat vestavěnou hudbu. Pomocí hlasových příkazů můžete také přeskakovat skladby nebo pozastavit hudbu. Vestavěné jsou dvě skladby.
Tipy:
• Pokud se kontrolka LED nerozsvítí, zkontrolujte, zda jsou kolíky modulu zasunuty do správných portů.
• Pokud BOX během zadaného času nerozpozná žádný příkaz, uvidíte Timeout a opustíte obrazovku přibližně za 1 sekundu.
- Výchozí příkazy jsou: zapnout světlo, vypnout světlo, zčervenat, zezelenat, zmodrat, přehrát hudbu, další skladba, pozastavit přehrávání.
Nepřetržité rozpoznávání řeči
Zajímavější je, že zařízení podporuje nepřetržité rozpoznávání řeči po probuzení. Díky této funkci je hlasová interakce přirozená a plynulá a přináší do interaktivního zážitku lidský dotek.
Jak používat
- Řekněte „hi, ES P“ pro probuzení zařízení a uslyšíte pípnutí.
- Řekněte svůj příkaz. Pokud zařízení příkaz rozpozná, uslyšíte „OK“ a poté bude pokračovat v rozpoznávání dalších příkazů.
- Pokud není rozpoznán žádný příkaz, zařízení počká. Pokud do 6 sekund nezazní žádný příkaz, zařízení automaticky opustí obrazovku hlasového ovládání a budete jej muset znovu probudit.
Pozor
Pokud zařízení mnohokrát nerozpozná váš příkaz, počkejte na vypršení časového limitu a znovu jej probuďte, abyste mohli funkci použít.
Po vyslovení slova probuzení prosím nehýbejte zařízením. V opačném případě zařízení nerozpozná váš příkaz.
Doporučujeme hlasové příkazy o délce 3-5 slov.
V současné době zařízení nedokáže rozpoznat příkazy při přehrávání výzev.
Přizpůsobení hlasových příkazů
Řada vývojových desek BOX je vybavena patentovaným systémem rozpoznávání řeči AI společnosti Espressif, který vám umožňuje přizpůsobit příkazy prostřednictvím naší aplikace ESP BOX. LED světlo na modulu budeme brát jako example, abyste ukázali, jak vytvářet vlastní hlasové příkazy. Podrobnosti o algoritmu naleznete v části Technická architektura.
- Připojte se k mobilní aplikaci ESP BOX
1.1. Zadejte Síť a klepněte na Chcete-li nainstalovat APP v pravém horním rohu. Naskenujte QR kód nebo vyhledejte „ESP BOX“ v App Store nebo Google Play a nainstalujte aplikaci.
1.2. Pokud jste v této aplikaci noví, zaregistrujte si nejprve účet.
1.3. Přihlaste se pomocí svého účtu ESP BOX a zapněte na svém telefonu Bluetooth. Klepněte na + ve spodní části obrazovky a naskenujte QR kód na vašem zařízení, abyste mohli nastavit síť.
1.4 Po přidání zařízení se zobrazí následující výzvy:
Tipy:
- Ujistěte se, že jste zařízení připojili k 2.4 GHz Wi-Fi namísto 5 GHz a zadali správné heslo Wi-Fi. Pokud je heslo Wi-Fi nesprávné, objeví se výzva „Wi-Fi Authentication failed“.
- Dlouhým stisknutím tlačítka Boot (tj. tlačítka Funkce) po dobu 5 sekund vymažete informace o síti a obnovíte tovární nastavení zařízení. Pokud po resetování zařízení nefunguje QR kód nebo Bluetooth, restartujte zařízení stisknutím tlačítka Reset.
Přizpůsobte si hlasové příkazy
- Klepněte na ikonu zařízení ESP-BOX a přejděte na obrazovku níže. Světlo můžete snadno zapnout nebo vypnout přepnutím tlačítka, jak je znázorněno na obrázku. Funkce ventilátoru a spínače můžete vyvinout sami.
- Klepněte na Světlo a na kartě Konfigurovat se zobrazí výchozí informace o pinu a příkazy. Piny pro červenou, zelenou a modrou barvu lze podle potřeby změnit.
- Na kartě Konfigurace můžete také přizpůsobit příkazy pro zapnutí nebo vypnutí světla a změnu jeho barvy. Napřample, můžete nastavit „dobré ráno“ jako příkaz pro zapnutí světla. Klepnutím na tlačítko Uložit se vrátíte na předchozí obrazovku. Poté znovu klikněte na Uložit, jak je znázorněno níže.
- Na kartě Ovládání můžete upravit barvu, jas a sytost světla.
- Nyní si můžete vyzkoušet svůj nový příkaz! Nejprve řekněte „hi ESP“, aby se zařízení probudilo. Poté řekněte „dobré ráno“ do 6 sekund, aby se světlo rozsvítilo. Nový příkaz se zobrazí na obrazovce se zapnutou kontrolkou modulu.
Aby příkazy fungovaly dobře, vezměte na vědomí:
- Délka příkazů: Příkaz by měl obsahovat 2-8 slov. Při vytváření řady příkazů se snažte udržovat je v podobné délce.
- Vyhněte se opakování: Nezahrnujte prosím kratší příkazy do delších příkazů, jinak nebudou kratší příkazy rozpoznány. NapřampPokud vytvoříte příkazy „zapnout“ i „zapnout světlo“, příkaz „zapnout“ nebude rozpoznán.
Předpisy FCC:
Toto zařízení je v souladu s částí 15 pravidel FCC. Provoz podléhá následujícím dvěma podmínkám: (1) Toto zařízení nesmí způsobovat škodlivé rušení a (2) toto zařízení musí akceptovat jakékoli přijaté rušení, včetně rušení, které může způsobit nežádoucí provoz. Toto zařízení bylo testováno a bylo zjištěno, že vyhovuje limitům pro digitální zařízení třídy B podle části 15 pravidel FCC. Tyto limity jsou navrženy tak, aby poskytovaly přiměřenou ochranu před škodlivým rušením při domácí instalaci. Toto zařízení generuje, používá a může vyzařovat vysokofrekvenční energii a pokud není instalováno a používáno v souladu s pokyny, může způsobovat škodlivé rušení rádiové komunikace. Nelze však zaručit, že při konkrétní instalaci k rušení nedojde. Pokud toto zařízení způsobuje škodlivé rušení rozhlasového nebo televizního příjmu, což lze zjistit vypnutím a zapnutím zařízení, doporučujeme uživateli, aby se pokusil napravit rušení jedním nebo více z následujících opatření:
- Přeorientujte nebo přemístěte přijímací anténu.
- Zvětšete vzdálenost mezi zařízením a přijímačem.
- Připojte zařízení do zásuvky v jiném okruhu, než ke kterému je připojen přijímač.
- Požádejte o pomoc prodejce nebo zkušeného rádiového/TV technika.
Upozornění FCC:
Změny nebo úpravy, které nejsou výslovně schváleny stranou odpovědnou za shodu, mohou zrušit oprávnění uživatele provozovat zařízení.
Informace o vystavení RF
Toto zařízení splňuje vládní požadavky na vystavení rádiovým vlnám.
Toto zařízení je navrženo a vyrobeno tak, aby nepřekračovalo emisní limity pro vystavení vysokofrekvenční (RF) energii stanovené Federálním úřadem
Komunikační komise vlády USA.
Toto zařízení vyhovuje limitům FCC pro vystavení radiaci stanoveným pro nekontrolované prostředí. Aby se předešlo možnosti překročení limitů FCC pro vystavení vysokofrekvenčnímu záření, nesmí být vzdálenost člověka od antény během normálního provozu menší než 20 cm.
Příručka vám poskytuje pouze stručnou představu o tom, jak používat nejnovější firmware na vývojových deskách řady BOX. Nyní můžete začít psát programy a vydat se na cestu IoT!
© 2022 GitHub, Inc
Dokumenty / zdroje
![]() |
ESPESSIF ESP32-S3-BOX-Lite AI Voice Development Kit [pdfUživatelská příručka ESPS3WROOM1, 2AC7Z-ESPS3WROOM1, 2AC7ZESPS3WROOM1, ESP32-S3-BOX, ESP32-S3-BOX-Lite, ESP32-S3-BOX AI Voice Development Kit, AI Voice Development Kit |