Reconhecimento avançado de gestos com câmeras IR de lentes duplas

O reconhecimento de gestos permite que os usuários controlem as interfaces sem toque.Este blog explora como funciona o reconhecimento gestual, quais os requisitos que os módulos devem satisfazer, e dicas para a sua implementação em dispositivos.

O que torna um bom hardware de reconhecimento de gestos

• Alta taxa de quadros para capturar o movimento (normalmente os movimentos rápidos da mão ou dos dedos) sem desfoque.

• A iluminação infravermelha ajuda quando a iluminação ambiente é fraca ou inconsistente.

• Lente dupla para percepção de profundidade ou consciência espacial; permite distinguir a mão do fundo ou detectar gestos tridimensionais.

Algoritmos de software

O reconhecimento de gestos depende de tubulações de processamento de imagem: subtração de fundo, detecção de movimento, mapeamento de profundidade (se for dupla lente), classificação de formas de gestos, rastreamento de trajetória.O hardware do módulo deve fornecer um nível de limpeza suficiente, imagens de baixo ruído para permitir um software robusto.

Cenários comuns de gestos

• Deslize para a esquerda / direita, para cima / para baixo: gestos direcionais simples.

• Enxaguar-zoom ou espalhar usando os dedos se estiver perto o suficiente.

• Gestos de apontar ou olhar em ambientes AR/VR.

• Controle do sistema, tais como volume, rolagem, mudança de modos nos dispositivos.

Integração em dispositivos

• Montar sensores em painéis virados para a frente, perto da zona da mão ou em molduras vestíveis.

• Calibração: mapeamento das posições das mãos para as coordenadas da tela, compensando a distância e a orientação.

• Iluminação: os LED infravermelhos devem ser posicionados de modo a evitar sombras ou brilhos das mãos ou do ambiente.

Critérios de referência de desempenho

• Precisão: falsos positivos/negativos sob várias iluminações.

• Tempo de resposta: do gesto à acção deve ser quase em tempo real (de preferência inferior a 50 ms no total).

• Robustez: tolera alterações de fundo, oclusão parcial, diferentes tons de pele.

Use Casos

• Fones de ouvido AR/VR que controlam o menu ou a visualização do conteúdo por gestos.

• Dispositivos domésticos inteligentes: gesto para ligar/desligar luzes, ajustar deslizadores, etc.

• Interfaces automotivas onde o toque é impraticável.

• Displays públicos para interação sem toque.

Desafios

• Interferência de infravermelho ambiente (luz solar ou infravermelho das lâmpadas).

• Reflexos nas mãos, especialmente em superfícies brilhantes.

• Erros de percepção de profundidade se o alinhamento ou a calibração da lente dupla forem deficientes.

OV6211 Capacidades para gestos

Os LEDs IR OV6211 ′s, alta fps, lente dupla, pequeno tamanho contribuem para uma configuração de reconhecimento de gestos capaz.A infravermelha dá iluminação mesmo em condições de pouca luzO tamanho compacto permite a incorporação perto das bordas do ecrã ou wearables.

Conclusão

O reconhecimento de gestos é cada vez mais importante nas interfaces modernas.Instalação bem colocada, e calibração, o controlo por gestos pode ser robusto e intuitivo.