Ambarella, Lumentum et ON Semiconductor dévoilent des solutions de détection 3D pilotées par IA pour périphériques AIoT de nouvelle génération

Ambarella, entreprise de silicium pour vision IA, Lumentum, concepteur et fabricant de produits optiques et photoniques innovants, et ON Semiconductor, fournisseur de solutions de capteurs d'image CMOS, se sont associés pour produire deux nouveaux designs de référence conjoints qui, selon eux, « accéléreront le déploiement de périphériques d'intelligence artificielle des objets (AIoT) dans tous les secteurs verticaux ».

Ces designs s'appuient sur la solution conjointe précédente des entreprises pour les systèmes de contrôle d'accès sans contact.

En combinant les données des réseaux VCSEL haute performance de Lumentum et d'un capteur d'image ON Semiconductor à l'aide du SoC IA d'Ambarella, des niveaux de précision plus élevés et une prise de décision plus intelligente peuvent être atteints dans les périphériques AIoT de nouvelle génération pour le contrôle d'accès biométrique, les serrures électroniques 3D et autres applications de détection intelligente.

Destinés à l'origine au contrôle d'accès biométrique et aux serrures électroniques, ces nouveaux designs de référence peuvent également répondre aux besoins des villes intelligentes, bâtiments intelligents, maisons intelligentes et soins de santé intelligents.

De plus, le haut niveau d'intégration fourni par ces solutions conjointes réduit significativement la consommation d'énergie du système et les exigences de conception thermique tout en permettant des formats de produit beaucoup plus compacts.

Fermi Wang, président et PDG d'Ambarella, déclare : « La vision d'Ambarella est de combiner le traitement IA avec la détection 3D et visuelle pour créer un avenir intelligemment ambiant.

« Cette collaboration avec Lumentum et ON Semiconductor fera progresser la convergence de l'IA et de l'IoT pour permettre une nouvelle génération de systèmes de contrôle d'accès, tout en inspirant de nouvelles catégories de produits de détection ambiante – tous alimentés par la fusion de capteurs utilisant des processeurs de vision IA qui interagissent intelligemment et discrètement avec les gens pour répondre à leurs besoins en constante évolution. »

Téa Williams, vice-présidente senior et directrice générale, détection 3D chez Lumentum, déclare : « Nos nouvelles solutions conjointes augmenteront considérablement la précision des périphériques AIoT dans tous les secteurs d'application – en commençant par le contrôle d'accès biométrique et les serrures électroniques – leur permettant de reconnaître les gens et de prédire leurs besoins, plutôt que d'exiger une interface humaine directe.

« Beaucoup de ces applications tireront parti de la détection 3D pour injecter une nouvelle dimension de données d'entrée pour une prise de décision améliorée. Par exemple, l'utilisation d'une illumination par points VCSEL à plus haute résolution permet des portées de détection plus longues et une reconnaissance faciale plus précise.

« Les réseaux VCSEL leaders de l'industrie et haute performance de Lumentum avec zéro défaillance sur le terrain, utilisés dans ces solutions conjointes, pilotent de nouvelles applications et aident à réaliser le rêve de périphériques AIoT avec capacités de détection 3D. »

Gianluca Colli, vice-président et directeur général, division capteurs industriels et grand public (ICSD) chez ON Semiconductor, déclare : « Les capteurs d'image sont les yeux des périphériques de détection intelligente. Leur capacité à voir plus loin avec plus de détails fournit significativement plus d'informations pour la prise de décision du processeur IA dans les périphériques AIoT.

« Notre technologie de capteur RGB-IR leader de l'industrie, combinée aux capacités ISP avancées des SoC de vision IA d'Ambarella, peut apporter simultanément des images visibles et IR dans les périphériques. Pour cette deuxième génération de nos solutions conjointes, nous avons exploité les retours clients pour quadrupler la résolution de nos capteurs d'image RGB-IR à 4K (8 MP). »

Les nouvelles solutions AIoT conjointes des trois entreprises consistent en deux designs de référence et kits de développement de détection 3D additionnels, chacun configuré de manière unique pour répondre aux exigences spécifiques aux applications en matière de combinaison de traitement IA, détection de profondeur 3D et détection visuelle :

Ciblant les lecteurs de contrôle d'accès biométrique de nouvelle génération, le design de référence Vision+ est la première solution 4K de l'industrie AIoT à réaliser une détection par lumière structurée 940 nm monocaméra basée sur la technologie RGB-IR.

C'est aussi le premier à exploiter une solution monocircuits pour le traitement de profondeur, le traitement IA et le traitement vidéo. Basé sur le processeur de vision IA Ambarella CV22 CVflow, il inclut une détection par lumière structurée monocaméra alimentée par la technologie VCSEL de Lumentum, avec une portée de 2 mètres, et un capteur d'image CMOS RGB-IR 4K (8 MP) d'ON Semiconductor.

Ciblant les serrures électroniques intelligentes de nouvelle génération, ou eLocks, pour applications commerciales et résidentielles, le design de référence Saturn est le premier de l'industrie AIoT à intégrer le traitement IA pour la détection par lumière structurée monocaméra et le traitement vidéo à démarrage rapide.

Il est basé sur le processeur de vision IA Ambarella CV25 CVflow et inclut une caméra à lumière structurée alimentée par la technologie VCSEL de Lumentum et le capteur d'image RGB-IR AR0237CS 2 MP d'ON Semiconductor.

Ciblant les applications de détection intelligente avec opportunités transverses, les kits de développement basés sur les processeurs de vision IA Ambarella série CV2 CVflow peuvent désormais être équipés d'adaptateurs de capteurs ToF alimentés par les réseaux VCSEL de pointe de Lumentum. Un adaptateur de capteur d'image RGB-IR 4K optionnel est également disponible pour ces kits.

Le kit de développement logiciel (SDK) ouvert pour les processeurs de vision IA CVflow d'Ambarella permet l'intégration facile d'applications tierces tout en permettant aux OEM de répondre aux exigences régionales différentes avec une seule plateforme (par exemple, en utilisant différents algorithmes IA dans différentes régions).

De plus, ce SDK robuste basé sur Linux étend les capacités des périphériques de détection en périphérie, simplifie le développement produit et accélère la mise sur le marché grâce à :

• Capacités de développement d'applications personnalisées
• Support pour différentes modalités 3D, incluant lumière structurée et ToF. Uniquement, un seul SoC Ambarella fournit le traitement de détection 3D sans besoin de processeur de profondeur dédié ni de processeur hôte séparé
• Hautes capacités d'inférence IA sur le périphérique caméra pour permettre l'exécution simultanée de plusieurs réseaux de neurones
• Outils IA robustes pour soutenir le développement et la migration de réseaux de neurones profonds
• ISP intégré pour gérer les scènes difficiles, incluant plage dynamique élevée et scénarios de faible luminosité
• Processeurs Arm intégrés pour exécuter les applications client
• Matériel de sécurité intégré, incluant démarrage sécurisé, OTP pour stocker les clés de chiffrement et technologie Arm TrustZone pour comparaisons sécurisées de clés de chiffrement
• Support d'interfaces périphériques riches pour simplifier les conceptions système

Disponibilité

Ces designs de référence conjoints et kits de développement devraient être disponibles en juin. Plus d'informations sont disponibles auprès d'Ambarella.