[EDITION ABONNES] Spécialiste des systèmes de vision neuromorphiques inspirés de l’œil humain, la société parisienne Prophesee annonce que sa technologie - qui combine un capteur HD Metavision dirigé par les événements et des algorithmes d’intelligence artificielle (IA) - est désormais disponible pour une utilisation avec le kit de démarrage Vision AI Kria KV260 d’AMD. L’ensemble, indique la société française, crée une combinaison puissante et efficace destinée à accélérer la développement d’applications de vision industrielle en périphérie de réseau (edge).

Les deux partenaires qualifient en outre leur offre conjointe comme étant le premier kit de développement pour la vision "Event-based" compatible avec une plate-forme AMD, ici un module SOM (System-On-Module) Kria K26. Ce kit permet aux utilisateurs de procéder à une évaluation, puis de passer en production avec une solution de qualité industrielle pour des applications telles que les villes intelligentes, les caméras de sécurité, l’analyse dans les magasins de détail, etc. Les SOM Kria K26 s’appuient sur une puce AMD dotée d’une architecture hétérogène qui combine processeurs Arm et FPGA (en l'occurrence, un SoC Zynq UltraScale+, lire notre article).

Selon AMD, le kit de démarrage Vision AI KV260 est conçu pour le développement d'applications de vision avancées sans nécessiter de connaissances complexes en conception matérielle ni de compétences en programmation FPGA. Les SOM AMD Kria pour les applications Edge AI fournissent en ce sens un sous-système doté d’une matrice FPGA économe en énergie, prêt pour la production, avec suffisamment d'entrées/sorties pour accélérer les tâches de vision et de robotique pour un coût raisonné.

En combinaison avec la technologie de vision dirigée par les événements de Prophesee, les développeurs de systèmes de vision industrielle peuvent alors tirer parti des caractéristiques de faible latence et de consommation réduite de la plate-forme Metavision pour expérimenter et créer des applications plus efficaces, et ce dans de nombreux cas jusqu’alors impossibles à réaliser avec des approches traditionnelles de détection visuelle, affirme l'entreprise française.

Pour rappel, la technologie Metavision de Prophesee, inspirée du fonctionnement de la rétine de l’œil humain, ne s’appuie pas sur une acquisition d’images trame par trame comme dans les capteurs Cmos traditionnels. Dans l’approche de Prophesee, tous les pixels sont indépendants les uns des autres et fonctionnent de façon totalement asynchrone. Couplé à un petit processeur analogique, chaque pixel est alors capable d’optimiser son temps d’acquisition en fonction de la dynamique de la scène, avec la possibilité de récupérer de l’information uniquement s’il y a un changement dans l’image, et ce dans un laps de temps de l’ordre de la microseconde si cela s’avère nécessaire. En d’autres termes, les capteurs reposant sur cette technologie n’enregistrent que les changements intervenant dans une scène, plutôt que la scène entière à intervalles réguliers.

A noter qu’une application de suivi de marqueurs actifs plug-and-play est incluse dans le kit de développement proposé par AMD et Prophesee. Elle permet une estimation de pose 3D à une fréquence supérieure à 1 000 Hz, avec un rejet complet de l'arrière-plan au niveau pixel, tout en offrant une extrême robustesse aux conditions d'éclairage difficiles, précise la société française qui cite des d'usage de suivi à ultrahaute vitesse tels que le suivi de contrôleurs de jeu, la sécurité sur les chantiers de construction, les systèmes anti-balancement pour charges lourdes, etc. Plusieurs algorithmes applicatifs supplémentaires prêts à l’emploi devraient en outre être disponibles au cours des prochains mois.

Ajoutons que le kit de démarrage Prophesee fournit une solution de développement rapidement opérationnelle avec le SDK Prophesee Metavision et le capteur HD dirigé par les événements IMX636 réalisé en collaboration par Prophesee et Sony ; il est censé faciliter le portage des algorithmes sur les SOM Kria de qualité professionnelle et industrielle d'AMD.

Vous pouvez aussi suivre nos actualités sur la vitrine LinkedIN de L'Embarqué consacrée à l’intelligence artificielle dans l’embarqué : Embedded-IA