Kit di sviluppo vocale AI ESP32-S3-BOX-Lite
Manuale d'uso

La guida è applicabile ai kit ESP32-S3-BOX e ai kit ESP32-S3-BOX-Lite con l'ultima versione del firmware flash. In questa guida vengono indicati collettivamente come la serie BOX di schede di sviluppo.

Iniziare

La serie BOX di schede di sviluppo integrate con SoC ESP32-S3 fornisce agli utenti una piattaforma per sviluppare il sistema di controllo degli elettrodomestici intelligenti, utilizzando l'assistenza vocale + controller touch screen, sensore, telecomando a infrarossi e gateway Wi-Fi intelligente. La serie BOX di schede di sviluppo è dotata di firmware pre-costruito che supporta la sveglia vocale e il riconoscimento vocale offline sia in cinese che in inglese. L'ESP-BOX SDK offre un'interazione vocale AI riconfigurabile, che consente di personalizzare i comandi per controllare gli elettrodomestici. Questa guida introduce brevemente cosa puoi fare con l'ultima versione del firmware per aiutarti a iniziare. Dopo aver letto la guida, puoi iniziare a sviluppare un'applicazione da solo. Ora, iniziamo!

Il kit BOX contiene:

ESP32-S3-BOX	ESP32-S3-BOX-Lite
L'unità principale che può funzionare da sola	L'unità principale che può funzionare da sola
Un modulo LED RGB e cavi Dupont per il test	Un modulo LED RGB e cavi Dupont per il test
Dock, un accessorio che funge da supporto per l'unità principale	N / A

Hardware richiesto:
Trova un cavo USB-C.

Collega il modulo LED RGB al tuo dispositivo

Fare riferimento alla definizione dei pin di seguito e collegare il modulo LED RGB al BOX utilizzando i cavi DuPont. Il modulo ha quattro pin maschi, R, G, B e GND. Si prega di collegarli alle porte femmina G39, G40, G41 e GND su PMOD 1.

Accendi il tuo dispositivo

1. Accendi il dispositivo utilizzando il cavo USB-C.
2. Una volta acceso il dispositivo, lo schermo riprodurrà l'animazione di avvio del logo Espressif.
   

Giochiamo in giro!

1. Le prime due pagine della guida rapida introducono ciò che fanno i pulsanti sulle schede di sviluppo della serie BOX. Tocca Avanti per andare alla pagina successiva.
   
2. Le ultime due pagine della guida rapida introducono come utilizzare il controllo vocale AI. Tocca OK Andiamo per accedere al menu.
   
3. Ci sono cinque opzioni nel menu: Controllo dispositivo, Rete, Lettore multimediale, Guida e Chi siamo. Puoi passare a diverse opzioni scorrendo verso sinistra e verso destra. Per esample, accedere alla schermata Controllo dispositivo e toccare Luce per accendere o spegnere la luce LED sul modulo.
   Quindi puoi tornare al menu e accedere alla schermata del lettore multimediale per riprodurre musica o regolare il volume.
   Solo ESP32-S3-BOX supporta le seguenti funzioni:
4. Premi il pulsante muto nella parte superiore del dispositivo per disattivare la sveglia vocale e il riconoscimento vocale. Premere di nuovo per abilitarli.
   
5. Tocca il cerchio rosso sotto lo schermo per tornare all'ultima pagina.
   

Assistente vocale offline

1. Puoi dire "ciao ESP" in qualsiasi schermata per riattivare il dispositivo. Quando si riattiva, lo schermo visualizzerà la parola sveglia che hai appena usato. Se la parola sveglia non viene visualizzata, dargli un'altra possibilità. La schermata seguente indica che il tuo dispositivo è in ascolto.
   
2. Immetti un comando entro 6 secondi dal segnale acustico, ad esempio "accendi la luce". Vedrai il comando mostrato sullo schermo e la luce LED sul modulo accesa e sentirai "OK". Circa 6 secondi dopo uscirai dalla schermata di controllo vocale se non ci sono più comandi.
   
3. Puoi usare i comandi vocali per goderti la musica. Riattiva prima il dispositivo, quindi pronuncia "riproduci musica". Il lettore musicale si aprirà e inizierà a riprodurre la musica incorporata. Puoi anche usare i comandi vocali per saltare i brani o mettere in pausa la musica. Ci sono due canzoni integrate.
   Suggerimenti:
   • Se la spia LED non si accende, verificare se i pin del modulo sono inseriti nelle porte corrette.
   • Se il BOX non riconosce alcun comando entro il tempo specificato, vedrai Timeout e uscirai dalla schermata in circa 1 secondo.
   
4. I comandi predefiniti sono: accendi la luce, spegni la luce, diventa rossa, diventa verde, diventa blu, riproduci musica, brano successivo, metti in pausa la riproduzione.

Riconoscimento vocale continuo

Ancora più interessante, il dispositivo supporta il riconoscimento vocale continuo dopo il risveglio. Questa funzione rende l'interazione vocale naturale e fluida e conferisce un tocco umano all'esperienza interattiva.

Come usare

• Dì "ciao, ES P" per riattivare il dispositivo e sentirai un segnale acustico.
• Dì il tuo comando. Se il dispositivo riconosce il comando, sentirai "OK" e quindi continuerà a riconoscere altri comandi.
• Se nessun comando viene riconosciuto, il dispositivo attende. Se non viene ricevuto alcun comando entro 6 secondi, il dispositivo uscirà automaticamente dalla schermata di controllo vocale e sarà necessario riattivarlo.

Attenzione
Se il dispositivo non riesce a riconoscere il comando per molte volte, attendere il timeout e riattivarlo per utilizzare la funzione.
Dopo aver pronunciato la parola di attivazione, non spostare il dispositivo. In caso contrario, il dispositivo non riconoscerà il tuo comando.
Consigliamo comandi vocali di 3-5 parole.
Attualmente, il dispositivo non è in grado di riconoscere i comandi quando riproduce i prompt.

Personalizzazione dei comandi vocali

Le schede di sviluppo della serie BOX sono dotate del sistema di riconoscimento vocale AI proprietario di Espressif, che consente di personalizzare i comandi tramite la nostra app ESP BOX. Prenderemo la luce LED sul modulo come un example, per mostrare come creare i propri comandi vocali. Per i dettagli sull'algoritmo, fare riferimento a Architettura tecnica.

1. Connettiti all'app mobile ESP BOX
   1.1. Entra in Rete e tocca Per installare l'APP nell'angolo in alto a destra. Scansiona il codice QR o cerca "ESP BOX" nell'App Store o in Google Play per installare l'app.
   1.2. Se non conosci questa app, registrati prima un account.
   1.3. Accedi con il tuo account ESP BOX e attiva il Bluetooth sul tuo telefono. Tocca + nella parte inferiore dello schermo e scansiona il codice QR sul tuo dispositivo per configurare la rete.
   1.4 Dopo aver aggiunto il dispositivo, verranno visualizzate le seguenti richieste:
   

Suggerimenti:

• Assicurati di connettere il dispositivo a una rete Wi-Fi a 2.4 GHz anziché a 5 GHz e inserisci la password Wi-Fi corretta. Se la password Wi-Fi non è corretta, verrà visualizzato il messaggio "Autenticazione Wi-Fi non riuscita".
• Premere a lungo il pulsante di avvio (ovvero il pulsante Funzione) per 5 secondi per cancellare le informazioni di rete e ripristinare il dispositivo alle impostazioni di fabbrica. Dopo il ripristino del dispositivo, se il codice QR o il Bluetooth non funzionano, riavviare il dispositivo premendo il pulsante Ripristina.
  

Personalizza i comandi vocali

1. Tocca l'icona del dispositivo ESP-BOX e accedi alla schermata seguente. Puoi accendere o spegnere facilmente la luce attivando il pulsante come mostrato nell'immagine. Puoi sviluppare autonomamente le funzionalità Fan e Switch.
   
2. Tocca Luce e la scheda Configura mostra le informazioni e i comandi pin predefiniti. I pin per rosso, verde e blu possono essere modificati secondo necessità.
   
3. Nella scheda Configura, puoi anche personalizzare i comandi per accendere o spegnere la luce e cambiarne il colore. Per esample, puoi impostare “buongiorno” come comando per accendere la luce. Fare clic su Salva per tornare alla schermata precedente. Quindi fare nuovamente clic su Salva come mostrato di seguito.
   
4. Nella scheda Controllo, puoi regolare il colore, la luminosità e la saturazione della luce.
   
5. Ora puoi provare il tuo nuovo comando! Per prima cosa, dì "ciao ESP" per riattivare il tuo dispositivo. Quindi dì "buongiorno" entro 6 secondi per accendere la luce. Il nuovo comando apparirà sullo schermo con la luce del modulo accesa.
   

Per garantire che i comandi funzionino correttamente, si prega di notare:

• Lunghezza dei comandi: un comando dovrebbe essere composto da 2-8 parole. Quando crei una serie di comandi, cerca di mantenerli a lunghezze simili.
• Evita di ripetere: non includere comandi più brevi in ​​comandi più lunghi, altrimenti i comandi più brevi non verranno riconosciuti. Per esample, se crei entrambi i comandi "accendi" e "accendi la luce", "accendi" non verrà riconosciuto.

Normative FCC:
Questo dispositivo è conforme alla parte 15 delle norme FCC. Il funzionamento è soggetto alle due condizioni seguenti: (1) questo dispositivo non può causare interferenze dannose e (2) questo dispositivo deve accettare qualsiasi interferenza ricevuta, comprese le interferenze che potrebbero causare un funzionamento indesiderato. Questo dispositivo è stato testato ed è risultato conforme ai limiti per un dispositivo digitale di Classe B, ai sensi della Parte 15 delle Norme FCC. Questi limiti sono progettati per fornire una protezione ragionevole contro le interferenze dannose in un'installazione residenziale. Questa apparecchiatura genera, utilizza e può irradiare energia a radiofrequenza e, se non installata e utilizzata secondo le istruzioni, può causare interferenze dannose alle comunicazioni radio. Tuttavia, non vi è alcuna garanzia che non si verifichino interferenze in una particolare installazione. Se questa apparecchiatura causa interferenze dannose alla ricezione radiofonica o televisiva, che possono essere determinate spegnendo e riaccendendo l'apparecchiatura, l'utente è invitato a cercare di correggere l'interferenza adottando una o più delle seguenti misure:

• Riorientare o riposizionare l'antenna ricevente.
• Aumentare la distanza tra l'apparecchiatura e il ricevitore.
• Collegare l'apparecchiatura a una presa di corrente appartenente a un circuito diverso da quello a cui è collegato il ricevitore.
• Per assistenza, consultare il rivenditore o un tecnico radio/TV esperto.

Nota FCC Attenzione:
Cambiamenti o modifiche non espressamente approvati dalla parte responsabile della conformità potrebbero invalidare il diritto dell'utente a utilizzare l'apparecchiatura.
Informazioni sull'esposizione alle radiofrequenze
Questo dispositivo soddisfa i requisiti governativi relativi all'esposizione alle onde radio.
Questo dispositivo è progettato e fabbricato per non superare i limiti di emissione per l'esposizione all'energia a radiofrequenza (RF) stabiliti dalla Federal
Commissione per le comunicazioni del governo degli Stati Uniti.
Questo dispositivo è conforme ai limiti di esposizione alle radiazioni FCC stabiliti per un ambiente non controllato. Per evitare la possibilità di superare i limiti di esposizione alle radiofrequenze FCC, la vicinanza umana all'antenna non deve essere inferiore a 20 cm durante il normale funzionamento.
La guida fornisce solo una breve idea di come utilizzare il firmware più recente sulle schede di sviluppo della serie BOX. Ora puoi iniziare a scrivere programmi e intraprendere il tuo viaggio IoT!

© 2022 GitHub, Inc

Documenti / Risorse

ESPRESSIF ESP32-S3-BOX-Lite Kit di sviluppo vocale AI [pdf] Manuale d'uso ESPS3WROOM1, 2AC7Z-ESPS3WROOM1, 2AC7ZESPS3WROOM1, ESP32-S3-BOX, ESP32-S3-BOX-Lite, ESP32-S3-BOX Kit di sviluppo vocale AI, Kit di sviluppo vocale AI

Riferimenti

• Manuale d'uso