Este es un kit de inteligencia artificial basado en el microcontrolador Himax WiseEye2 , con Arm Cortex-M55 y Ethos-U55. Soporta los frameworks TensorFlow y PyTorch. Compatible con Arduino IDE y “no code model deployment” y visualización inmediata de resultados de inferencia con SenseCraft AI .

El kit se compone de:

- Grove - Vision AI Module V2

- OV5647-62 FOV Camera Module

- XIAO ESP32C3 (2.4GHz WiFi, BLE 5.0) 

Características​

• Potentes capacidades de procesamiento de IA:  utiliza el procesador WiseEye2 HX6538 con un Arm Cortex-M55 de doble núcleo y una unidad de red neuronal Arm Ethos-U55 integrada.
• Compatibilidad versátil con modelos de IA: implemente fácilmente modelos de IA personalizados o listos para usar desde SenseCraft AI , incluidos Mobilenet V1, V2, Efficientnet-lite, Yolo v5 y v8. Se admiten los frameworks TensorFlow y PyTorch.
• Dispositivos periféricos enriquecidos:  incluye micrófono PDM, ranura para tarjeta SD, tipo C, interfaz Grove y otros periféricos.
• Alta compatibilidad:  Compatible con la serie XIAO, Arduino, Raspberry Pi, placa de desarrollo ESP.
• Código totalmente  abierto :  todos los códigos, archivos de diseño y esquemas están disponibles para modificación y uso.

Descripción

¿Cuáles son sus núcleos?

Grove - Vision AI V2 es un módulo de visión inteligente basado en MCU de alta eficiencia basado en el procesador Himax WiseEye2 HX6538, que cuenta con un núcleo dual Arm Cortex-M55 y un componente de red neuronal Arm Ethos-U55 integrado. Integra la tecnología Arm Helium, que está finamente optimizada para el procesamiento de datos vectoriales, lo que permite una mejora significativa en las capacidades de DSP y ML sin comprometer el consumo de energía, lo que es ideal para aplicaciones alimentadas por batería . 

Grove Vision AI V2 cuenta con un impresionante tiempo de inferencia de solo 33 milisegundos , una velocidad de fotogramas rápida de 30,30 FPS y un consumo de energía eficiente de solo 0,35 watts . Estos resultados demuestran claramente que Grove Vision AI V2 es una opción premium para el procesamiento de visión de alto rendimiento .

¿Qué hay en la placa?

Grove Vision AI V2 ahora es compatible con todas las cámaras Pi a través de una interfaz CSI estándar. 

Grove Vision AI V2 no solo está diseñado para aplicaciones de visión, sino que también cuenta con un micrófono PDM integrado para aplicaciones de sonido. Viene con una ranura para tarjeta SD  que permite almacenar cómodamente imágenes, vídeos y resultados de identificación mediante una tarjeta SD.

Con varias interfaces como IIC, UART, SPI y Type-C, esta placa tiene capacidades expansivas y se puede conectar fácilmente a productos populares como Seeed Studio XIAO, Grove, Raspberry Pi, beagleboard y productos basados ​​en ESP para un mayor desarrollo. Por ejemplo, al integrar Grove Vision AI V2 con XIAO se puede acceder sin esfuerzo a la interfaz y los datos de Grove Vision AI V2 a través de Arduino, Micropython, CircuitPython y PlatformIO, y conectarse cómodamente a la nube o servidores dedicados como Home Assistant.

¿Cómo se usa?

SenseCraft AI  es una plataforma que permite una fácil capacitación e implementación de modelos de IA sin código o con código bajo. Es compatible con los productos Seeed de forma nativa, lo que garantiza una adaptabilidad completa de los modelos entrenados a los productos Seeed. Además, la implementación de modelos a través de esta plataforma ofrece una visualización inmediata de los resultados de la identificación en el sitio web, lo que permite una evaluación rápida del rendimiento del modelo.

Ideal para aplicaciones tinyML , agregar visión AI a su sensor inteligente con Grove Vision AI V2 es fácil con SenseCraft AI . Implemente sin esfuerzo modelos de IA personalizados o listos para usar conectando el dispositivo, seleccionando un modelo y viendo los resultados de la identificación.

Aplicaciones

• Automatización industrial: inspección de calidad, mantenimiento predictivo, control por voz, etc.
• Ciudad inteligente: monitorización de equipos, gestión energética, etc.
• Transporte: seguimiento de estado, seguimiento de ubicación, etc.
• Agricultura inteligente: vigilancia ambiental, etc.
• Dispositivos móviles IoT: dispositivos portátiles, dispositivos portátiles, etc.

Documentación

• Especificaciones de la Placa y de la Cámara
  
• Datasheet HX6538
  
• Ejemplos de Himax para Seeed Grove Vision AI Module V2
• [Wiki] Grove Vision AI Module V2
• [Wiki] Connect Grove Vision AI V2 to Home Assistant
• [Wiki] Examples for Grove Vision AI V2 and XIAO ESP32
• [Wiki] Deploying Models from Datasets to Grove Vision AI V2
• [Wiki] Connect Grove Vision AI V2 to the SenseCAP Mate APP
• [Project] Computer Vision at the Edge with Grove Vision AI Module V2
• [Others] The BEST Microcontroller from AI/ML Projects | Vision AI Module V2