
OmniVision glisse un moteur neuronal dans un Asic conçu pour la surveillance du conducteur d’un véhicule [EDITION ABONNES] Spécialiste des solutions d’imagerie numérique et des capteurs d’image Cmos, la société OmniVision Technologies a commencé l’échantillonnage d’un circuit Asic pour système de surveillance du conducteur (DMS, Driver Monitoring System) qu’elle présente comme le premier du genre à intégrer moteur neuronal, ...processeur de traitement d’image et mémoire DDR3. Référencé OAX8000 et optimisé pour les applications automobiles d’entrée de gamme, l’Asic s’appuie sur une architecture à puces empilées pour embarquer jusqu’à 1 Go de mémoire SDRam DDR3, une unité de traitement neuronal compatible avec les environnements TensorFlow, Caffe, MXNet et ONNX, ainsi qu’un bloc ISP (Image Signal Processor) apte à effectuer jusqu’à 1,1 téraopérations par seconde pour le traitement des algorithmes de perception du regard et de suivi des mouvements des yeux. Selon OmniVision, ces caractéristiques, associées à la capacité d’accélération de 1K MAC pour les réseaux de neurones à convolution (CNN), permettraient de créer les systèmes DMS les plus sobres du moment avec une consommation limitée à seulement 1 W pour l’Asic associé au capteur d’image dans des conditions typiques rencontrées dans l’automobile. Avec l’OAX8000, OmniVision cible un marché des systèmes DMS qui, selon Yole Développement, va progresser de 56% par an en moyenne entre 2020 et 2025. Une croissance due aux exigences Euro NCAP de l’Union européenne qui imposent la présence d’une caméra DMS dans toutes les voitures neuves d’ici à 2022. L’Asic OAX8000 intègre également quatre cœurs Arm Cortex-A5 avec technologie Neon pour accélérer l’encodage/décodage vidéo et les algorithmes d'analyse vidéo sur la puce, ainsi que des blocs périphériques pour le traitement d'image, l'encodage vidéo et le traitement RVB/IR. Sa capacité de traitement en plage dynamique élevée (HDR) permet en outre à l'Asic d'accepter en entrée des signaux issus de capteurs d'image RVB/IR dans des conditions de luminosité variables et de fort contraste. L'encodeur vidéo intégré accepte des résolutions en entrée jusqu'à 5 mégapixels et fournit des flux vidéo jusqu'à 2K à 30 images par seconde. Selon OmniVision, l’OAX8000 peut aussi être mis en œuvre dans des applications comme la détection d’occupation (avec alertes lorsque des objets sont laissés dans le véhicule) ou la reconnaissance de visage (pour des fonctions de sécurité et de réglage automatique de paramètres de confort).

OmniVision glisse un moteur neuronal dans un Asic conçu pour la surveillance du conducteur d’un véhicule

[EDITION ABONNES] Spécialiste des solutions d’imagerie numérique et des capteurs d’image Cmos, la société OmniVision Technologies a commencé l’échantillonnage d’un circuit Asic pour système de surveillance du conducteur (DMS, Driver Monitoring System) qu’elle présente comme le premier du genre à intégrer moteur neuronal, ...processeur de traitement d’image et mémoire DDR3.

Référencé OAX8000 et optimisé pour les applications automobiles d’entrée de gamme, l’Asic s’appuie sur une architecture à puces empilées pour embarquer jusqu’à 1 Go de mémoire SDRam DDR3, une unité de traitement neuronal compatible avec les environnements TensorFlow, Caffe, MXNet et ONNX, ainsi qu’un bloc ISP (Image Signal Processor) apte à effectuer jusqu’à 1,1 téraopérations par seconde pour le traitement des algorithmes de perception du regard et de suivi des mouvements des yeux.

Selon OmniVision, ces caractéristiques, associées à la capacité d’accélération de 1K MAC pour les réseaux de neurones à convolution (CNN), permettraient de créer les systèmes DMS les plus sobres du moment avec une consommation limitée à seulement 1 W pour l’Asic associé au capteur d’image dans des conditions typiques rencontrées dans l’automobile.

Avec l’OAX8000, OmniVision cible un marché des systèmes DMS qui, selon Yole Développement, va progresser de 56% par an en moyenne entre 2020 et 2025. Une croissance due aux exigences Euro NCAP de l’Union européenne qui imposent la présence d’une caméra DMS dans toutes les voitures neuves d’ici à 2022.

L’Asic OAX8000 intègre également quatre cœurs Arm Cortex-A5 avec technologie Neon pour accélérer l’encodage/décodage vidéo et les algorithmes d'analyse vidéo sur la puce, ainsi que des blocs périphériques pour le traitement d'image, l'encodage vidéo et le traitement RVB/IR. Sa capacité de traitement en plage dynamique élevée (HDR) permet en outre à l'Asic d'accepter en entrée des signaux issus de capteurs d'image RVB/IR dans des conditions de luminosité variables et de fort contraste. L'encodeur vidéo intégré accepte des résolutions en entrée jusqu'à 5 mégapixels et fournit des flux vidéo jusqu'à 2K à 30 images par seconde.

Selon OmniVision, l’OAX8000 peut aussi être mis en œuvre dans des applications comme la détection d’occupation (avec alertes lorsque des objets sont laissés dans le véhicule) ou la reconnaissance de visage (pour des fonctions de sécurité et de réglage automatique de paramètres de confort).