Development Boards ai Image Recognition Wi-fi e Bluetooth Voice Processing Esp32 Esp32-s3-eye

Para mais informações, por favor visite: https://www.espressif.com.cn/pt/support/documents/technical-documents

ESP32-S3-EYE: https://github.com/espressif/esp-who/blob/master/docs/zh_CN/get-started/ESP32-S3-EYE_Getting_Started_Guide.md

Preparação

Placa do desenvolvimento 1 × ESP-EYE V2.1

1 × cabo micro USB B

1 × PC (Windows, Linux ou Mac OS)

Introdução

ESP-EYE é uma placa de desenvolvimento para reconhecimento facial e reconhecimento de fala, equipada com chip ESP32, câmera pixel 200 W, microfone digital, 8 MB PSRAM e 4 MB Flash, que pode atender às necessidades de desenvolvimento de várias aplicações AI. Além disso, a placa de desenvolvimento também suporta transmissão de imagem Wi-Fi, depuração Micro USB e fonte de alimentação e pode realizar funções como ativação por voz, detecção e reconhecimento facial, e pode ajudar os usuários a desenvolver soluções AI altamente integradas.

Programação do software

Abaixo, tomamos o ambiente Linux como um exemplo para introduzir o processo de programação do ESP-EYE:

Primeiro, conecte o ESP-EYE ao PC e, em seguida, ligue;

Use o comando ls /dev/ttyUSB * para verificar se a placa de desenvolvimento está conectada com sucesso ao PC. Após o acesso bem-sucedido, informações semelhantes a/dev/ttyUSB0 serão adicionadas à lista;

Digite um arquivo de projeto de exemplo, como cd esp-wque/examples/single_chip/recognition_solution;

Executar make defconfig para configuração padrão;

Execute make menuconfig, defina o nome padrão do dispositivo da porta serial na configuração do serial flasher (o mesmo que o nome do dispositivo visto no segundo passo, geralmente definido como/dev/ttyUSB0), salvar e sair;

Execute fazer flash para programar o software.

Terminal para obter logs

Abaixo, tomamos o ambiente Linux como um exemplo para introduzir como visualizar o log:

Terminal aberto;

Executar fazer monitor.

Nota: Este processo irá reiniciar a placa.

1. A voz acorda

Depois que a placa do desenvolvimento é posta sobre, incorporará “a espera para despertar” o estado (a luz vermelha está sempre sobre, a luz branca está sempre fora), e o usuário precisa de acordar pela voz. Suporte &Hi Espressif& wake-up, quando o usuário fala a palavra wake-up &Hi Espressif&, a placa de desenvolvimento acorda e entra no estado &aguardando rede& (a luz vermelha está piscando, a luz branca está sempre apagada). Neste ponto, o usuário pode executar operações de rede.

2. Conecte-se à Internet

Os usuários podem se conectar ao hotspot Wi-Fi criado por ESP-EYE através do PC, telefone celular e outros dispositivos. As informações padrão para este hotspot são as seguintes:

Usuário: esp-eye-xxxx (xxxx é o endereço MAC do dispositivo)

Senha: Nenhuma senha necessária

Os usuários também podem definir seu próprio nome de usuário e senha das seguintes maneiras:

Terminal aberto;

Execute make menuconfig e configure-o como mostrado abaixo:

Conexão wi-fi

Nota: Depois que o usuário redefine o nome de usuário e a senha do hotspot Wi-Fi, o software precisa ser queimado novamente.

Detecção 3. Face

Após a rede bem sucedida, o ESP-EYE executará a &detecção facial&. Os usuários podem abrir o navegador, inserir o endereço 192.168.4.1/face_stream e ver as informações da imagem em tempo real na página da web. Neste momento, a luz vermelha da placa de desenvolvimento está desligada e a luz branca está sempre acesa.

Reconhecimento 4. Face

Quando a placa de desenvolvimento detecta uma face, se o Face ID inserido já existir, a placa de desenvolvimento executará o &reconhecimento facial&:

&Face Recognition& é correspondido com sucesso-a luz vermelha da placa de desenvolvimento pisca uma vez, e a página da Web exibe HELLO ID XXX

&Face Recognition& jogo falhou-placa de desenvolvimento não responde, página web exibe Quem&

Caso contrário, a placa de desenvolvimento só faz &detecção facial&. Neste momento, se o usuário quiser usar a função de reconhecimento facial, insira pelo menos um Face ID primeiro.

5. Entrada e exclusão do rosto

Na premissa de redes bem-sucedidas, o rosto pode ser coletado através da câmera e inserido no Face ID.

5.1 Digite o Face ID

Insira o Face ID

O usuário clica no botão de toque lateral para inserir o &Entry Face ID& (a luz vermelha está sempre acesa), e a página da web exibe:

O usuário enfrenta a câmera e começa a capturar retratos. Cada vez que uma coleção for bem-sucedida, a placa de desenvolvimento pisca a luz vermelha e a página da web exibirá os tempos de coleta correspondentes, como a 1ª AMOSTRA, etc. Por padrão, o usuário precisa capturar 3 retratos (configuráveis) para cada Face ID inserido. Durante o processo de captura de retrato, se a luz vermelha não piscar por muito tempo, recomenda-se que o usuário ajuste a postura e o ângulo e tente novamente;

Após a conclusão da coleção de retratos, a luz vermelha no quadro de desenvolvimento está sempre apagada, indicando que a entrada Face ID foi concluída. Neste ponto, a página da Web exibe: ENROLLED FACE ID xxx;

Depois que a entrada do Face ID for bem-sucedida, o sistema retornará para &Face Detection&.

Atualmente, a placa de desenvolvimento ESP-EYE pode inserir 10 Face IDs por padrão (configurável, que está relacionado à alocação de memória flash do usuário).

5.2 Excluir Face ID

O usuário clica no botão BOOT na superfície para inserir &Delete FACE ID&;

Depois de clicar duas vezes, a luz branca da placa de desenvolvimento pisca, o sistema excluirá automaticamente o primeiro FACE ID no sistema, e o terminal exibe: XXX ID(S) ESQUERDA.

Situação anormal

Quando ocorrem condições anormais, como &desconexão da rede& ou &tempo limite da rede&, a placa de desenvolvimento retornará ao estado &aguardando ativação&.

ESP32-S3-EYE

1. Circuitos Integrados

2. Esp32-s3-eye Development Boards ai Image Recognition Wi-fi