Ambarella, Lumentum et ON Semiconductor collaborent sur la détection 3D basée sur le traitement de l'IA pour les appareils AIoT de nouvelle génération

Ambarella, une société de silicium de vision IA, Lumentum, un concepteur et fabricant de produits optiques et photoniques innovants, et ON Semiconductor, un fournisseur de solutions de capteurs d'image CMOS, se sont associés pour produire deux nouvelles conceptions de référence communes qui, selon eux, " accélérer le déploiement d'appareils d'intelligence artificielle des objets dans les secteurs verticaux".

Les conceptions s'appuient sur la précédente solution commune des entreprises pour les systèmes d'accès sans contact.

En combinant les données des illuminateurs à matrice VCSEL hautes performances de Lumentum et d'un capteur d'image ON Semiconductor utilisant le SoC AI d'Ambarella, des niveaux de précision plus élevés et une prise de décision plus intelligente peuvent être atteints dans les dispositifs AIoT de nouvelle génération pour le contrôle d'accès biométrique, les serrures électroniques 3D et d'autres applications de détection intelligentes.

Initialement destinés au contrôle d'accès biométrique et aux serrures électroniques, ces nouveaux designs de référence peuvent également répondre aux besoins des villes intelligentes, des bâtiments intelligents, des maisons intelligentes et des soins de santé intelligents.

De plus, le haut niveau d'intégration fourni par ces solutions conjointes réduit considérablement la consommation d'énergie du système et les exigences de conception thermique tout en permettant des facteurs de forme de produit beaucoup plus petits.

Fermi Wang, président et chef de la direction d'Ambarella, déclare :"La vision d'Ambarella est de combiner le traitement de l'IA avec la 3D et la détection de la vision pour créer un avenir intelligent ambiant.

« Cette collaboration avec Lumentum et ON Semiconductor fera encore progresser la convergence de l'IA et de l'IoT pour permettre une nouvelle génération de systèmes de contrôle d'accès, tout en inspirant de nouvelles catégories de produits de détection ambiante - tous alimentés par la fusion de capteurs utilisant des processeurs de vision IA qui interagissent intelligemment. et discrètement avec les gens pour répondre à leurs besoins en constante évolution."

Téa Williams, vice-présidente senior et directrice générale, détection 3D chez Lumentum, déclare :« Nos nouvelles solutions conjointes augmenteront considérablement la précision des appareils AIoT dans tous les secteurs d'application – à commencer par le contrôle d'accès biométrique et les serrures électroniques – leur permettant de reconnaître les personnes et de prévoir leurs besoins, plutôt que d'exiger une interface humaine directe.

"Beaucoup de ces applications tireront parti de la détection 3D pour injecter une nouvelle dimension d'entrée de données pour une meilleure prise de décision. Par exemple, l'utilisation d'un éclairage ponctuel basé sur VCSEL à plus haute résolution permet des portées de détection plus longues et une reconnaissance faciale plus précise.

"Les baies VCSEL à la pointe de l'industrie et hautes performances de Lumentum avec zéro défaillance sur le terrain, utilisées dans ces solutions conjointes, génèrent de nouvelles applications et aident à réaliser le rêve des appareils AIoT avec des capacités de détection 3D."

Gianluca Colli, vice-président et directeur général du groupe de la division des capteurs industriels et grand public (ICSD) chez ON Semiconductor, déclare :« Les capteurs d'image sont les yeux des dispositifs de détection intelligents. Leur capacité à voir plus loin avec plus de détails fournit beaucoup plus d'informations pour la prise de décision du processeur d'IA dans les appareils AIoT.

"Notre technologie de capteur RVB-IR à la pointe de l'industrie, combinée aux capacités ISP avancées des SoC de vision IA d'Ambarella, peut apporter simultanément des images visibles et IR dans les appareils. Pour cette deuxième génération de nos solutions communes, nous nous sommes appuyés sur les commentaires des clients pour quadrupler la résolution de nos capteurs d'image RVB-IR en 4K (8 MP)."

Les nouvelles solutions AIoT conjointes des trois sociétés consistent en deux conceptions de référence et des kits de développement de détection 3D supplémentaires, chacun configuré de manière unique pour répondre aux demandes spécifiques à l'application pour la combinaison du traitement de l'IA, de la détection de profondeur 3D et de la détection de vision :

Destiné aux lecteurs de contrôle d'accès biométriques de nouvelle génération, le design de référence Vision+ est la première solution 4K de l'industrie AIoT à effectuer une détection de lumière structurée à 940 nm à caméra unique basée sur la technologie RVB-IR.

Il est également le premier à tirer parti d'une solution monopuce pour le traitement en profondeur, le traitement de l'IA et le traitement vidéo. Basé sur le processeur de vision Ambarella CV22 CVflow AI, il comprend une détection de lumière structurée à caméra unique alimentée par la technologie VCSEL de Lumentum, avec une portée de 2 mètres, et un capteur d'image CMOS RVB-IR 4K (8MP) d'ON Semiconductor.

Ciblant les serrures de porte électroniques intelligentes de nouvelle génération, ou eLocks, pour les applications commerciales et résidentielles, la conception de référence Saturn est la première de l'industrie AIoT à intégrer le traitement de l'IA pour la détection de lumière structurée à caméra unique et le traitement vidéo à démarrage rapide. /P>

Il est basé sur le processeur de vision Ambarella CV25 CVflow AI et comprend une caméra à lumière structurée alimentée par la technologie VCSEL de Lumentum et le capteur d'image AR0237CS 2MP RGB-IR d'ON Semiconductor.

Ciblant les applications de détection intelligentes et offrant des opportunités dans tous les secteurs verticaux, les kits de développement basés sur le processeur de vision CVflow AI de la série CV2 d'Ambarella peuvent désormais être équipés d'adaptateurs de capteurs ToF alimentés par les baies VCSEL de pointe de Lumentum. Un adaptateur de capteur d'image 4K RVB-IR en option est également disponible pour ces kits.

Le kit de développement logiciel ouvert (SDK) pour les processeurs de vision CVflow AI d'Ambarella permet l'intégration facile d'applications tierces tout en permettant aux OEM de répondre à différentes exigences régionales avec une seule plate-forme (par exemple, en utilisant différents algorithmes d'IA dans différentes régions).

De plus, ce SDK robuste basé sur Linux étend les capacités des appareils de détection de périphérie, simplifie le développement de produits et accélère la mise sur le marché grâce à :

• Capacités de développement d'applications personnalisées
• Compatibilité avec différentes modalités 3D, y compris la lumière structurée et ToF. De manière unique, un seul SoC Ambarella fournit un traitement de détection 3D sans avoir besoin d'un processeur de profondeur dédié ou d'un processeur hôte séparé
• Capacités d'inférence IA élevées sur l'appareil photo pour permettre l'exécution simultanée de plusieurs réseaux de neurones
• Des outils d'IA robustes pour prendre en charge le développement et la migration de réseaux de neurones profonds
• FAI intégré pour gérer les scènes difficiles, y compris les scénarios à plage dynamique élevée et à faible luminosité
• Processeurs Arm intégrés pour exécuter les applications client
• Matériel de sécurité intégré, y compris démarrage sécurisé, OTP pour stocker les clés de chiffrement et technologie Arm TrustZone pour des comparaisons de clés de chiffrement sécurisées
• Prise en charge d'une interface périphérique riche pour simplifier les conceptions de système

Disponibilité

Ces conceptions de référence conjointes et ces kits de développement devraient être disponibles en juin. Plus d'informations sont disponibles auprès d'Ambarella.