Xilinx SOM cible une adoption plus large de l'IA de pointe et de la vision intégrée

Xilinx a fait un grand pas pour permettre une adoption plus large sur le marché de l'intelligence artificielle (IA) de pointe et en particulier de la vision embarquée en entrant sur le marché du système sur module (SOM), complet avec une pile logicielle pré-construite et un magasin d'applications prêt à déployer applications prédéfinies.

Le premier produit du nouveau portefeuille de SOM de la société est le Kria K26 SOM, ciblant spécifiquement les applications d'IA de vision dans les villes intelligentes et les usines intelligentes, ainsi qu'un kit de développement prêt à l'emploi à faible coût, le Kria KV260 AI vision kit de démarrage. La société a déclaré qu'elle s'attaquait à la complexité croissante de l'IA de vision ainsi qu'aux défis de la mise en œuvre de l'IA à la périphérie. Par conséquent, son prix est adapté au marché de masse, le kit de démarrage étant vendu en ligne à 199 $ et le Kria K26 SOM à 250 $ pour une version de qualité commerciale ou 350 $ pour la variante de qualité industrielle.

Xilinx a déclaré que la vision actuelle de l'IA est vraiment complexe, de nombreux développeurs n'ayant pas nécessairement l'expertise au niveau matériel. Ainsi, en passant à un niveau d'abstraction plus élevé, avec des plates-formes matérielles pré-construites avec des piles logicielles standard et une bibliothèque d'applications, il permet à des millions de développeurs de logiciels supplémentaires d'accéder aux capacités d'IA sans avoir besoin d'une expertise en conception au niveau des puces.

Cela fait partie de l'expérience de développement de Kria :fournir un chemin auto-activé pour l'exploration, la conception et, finalement, le déploiement de la production via un vaste ensemble de ressources en ligne. Les amateurs, les fabricants et les développeurs commerciaux peuvent accélérer à chaque étape du cycle de conception grâce à des didacticiels vidéo, des cours de formation et un vaste écosystème de fournisseurs proposant des applications accélérées, des services de conception, etc.

À cette fin, la société a déclaré avoir investi massivement dans ses flux d'outils pour rendre l'informatique adaptative plus accessible aux développeurs d'IA et de logiciels sans expertise matérielle. Le portefeuille Kria SOM porte cette accessibilité au niveau supérieur en couplant la plate-forme matérielle et logicielle avec des applications accélérées par vision prêtes pour la production. Ces applications clé en main éliminent tout le travail de conception de matériel FPGA et ne nécessitent que les développeurs de logiciels pour intégrer leurs modèles d'IA personnalisés, leur code d'application et éventuellement modifier le pipeline de vision - en utilisant des environnements de conception familiers, tels que les frameworks TensorFlow, Pytorch ou Café, ainsi que C , C++, OpenCL et langages de programmation Python, activés par la plate-forme et les bibliothèques de développement logiciel unifié Vitis.

Les nouveaux SOM Kria permettent également la personnalisation et l'optimisation pour les développeurs embarqués avec la prise en charge de PetaLinux standard basé sur Yocto et, pour la première fois, Xilinx annonce une collaboration à venir avec Canonical pour fournir la prise en charge d'Ubuntu Linux, la distribution Linux très populaire utilisée par AI développeurs. Cela offre une connaissance généralisée des développeurs d'IA et une interopérabilité avec les applications existantes. Les clients peuvent se développer dans l'un ou l'autre environnement et adopter l'une ou l'autre approche de la production. Les deux environnements seront pré-construits avec une infrastructure logicielle et des utilitaires utiles.

« Pour les applications de vision intelligente, les développeurs et les innovateurs veulent l'expérience Ubuntu à laquelle ils sont habitués, du cloud au bureau », a déclaré Thibaut Rouffineau, vice-président du marketing, Canonical/Ubuntu. « Ensemble avec Xilinx, nous sommes ravis de fournir aux clients de Kria SOM une productivité prête à l'emploi, une transition sans heurt du développement à la production, ainsi qu'une stabilité et une sécurité garanties sur le terrain. »

Gagnez 9 mois de développement pour l'ajout de l'IA

L'introduction de modules et d'applications prêts à déployer fait partie d'une tendance croissante à lever le mystère de l'intégration de l'IA de pointe et de l'IA de vision et de les rendre accessibles à des marchés finaux plus larges.

Selon Jeff Bier, analyste en technologie de vision par ordinateur embarquée, toutes les entreprises ne disposent pas d'un département d'apprentissage automatique ou de vision par ordinateur, ce qui entraîne un important manque de connaissances et de compétences lorsqu'il s'agit de mettre en œuvre l'IA de pointe. Bier, qui est le fondateur de Edge AI and Vision Alliance qui organise le mois prochain le sommet de la vision embarquée 2021, a expliqué dans un récent briefing avec Embedded.com que de plus en plus de fournisseurs s'efforcent de rendre la technologie accessible.

À titre d'exemple, a-t-il déclaré, peu d'entreprises ont les ressources ou les compétences nécessaires pour exploiter un réseau de neurones profonds (DNN) sur les données qu'elles récupèrent de la caméra. Par conséquent, a-t-il déclaré, de nombreuses sociétés de semi-conducteurs proposent également davantage de conceptions de référence logicielles.

Lors d'un point de presse lors de l'événement de lancement des nouveaux SOM, Chetan Khona, directeur de l'industrie, de la vision et de la santé chez Xilinx, a déclaré :« Les systèmes prêts à la production sont importants pour un déploiement rapide [de l'IA de vision embarquée]. Les clients peuvent gagner jusqu'à neuf mois en temps de développement en utilisant une conception basée sur des modules plutôt qu'une conception basée sur des appareils. Il a ajouté qu'avec le kit de démarrage, les utilisateurs peuvent démarrer en moins d'une heure, "sans avoir besoin d'une expérience FPGA". À cet égard, l'utilisateur connecte la caméra, les câbles et le moniteur, insère la carte microSD programmée et allume la carte ; l'utilisateur peut alors sélectionner une application accélérée de son choix et exécuter cette application accélérée.

Un cadre supérieur de Xilinx, Kirk Saban, a déclaré :« L'entrée de Xilinx sur le marché en plein essor des SOM s'appuie sur notre évolution au-delà de l'activité au niveau des puces qui a commencé avec nos cartes Alveo pour le centre de données et se poursuit avec l'introduction de solutions complètes au niveau des cartes pour systèmes embarqués. Saban, vice-président du marketing des produits et des plates-formes chez Xilinx, a ajouté :« Le portefeuille Kria SOM étend notre portée sur le marché à davantage d'applications de pointe et rendra la puissance du matériel adaptable accessible à des millions de développeurs de logiciels et d'IA. »

Le Kria K26 SOM repose sur l'architecture Zynq UltraScale+ MPSoC, qui comprend un processeur Arm Cortex A53 quadricœur, plus de 250 000 cellules logiques et un codec vidéo H.264/265. Le SOM dispose également de 4 Go de mémoire DDR4 et de 245 E/S, ce qui lui permet de s'adapter à pratiquement n'importe quel capteur ou interface. Xilinx a déclaré qu'avec 1,4 téra-ops de calcul IA, le Kria K26 SOM permet aux développeurs de créer des applications d'IA de vision offrant des performances plus de 3 fois supérieures avec une latence et une puissance inférieures par rapport aux SOM basés sur GPU, essentiels pour les applications de vision intelligente comme la sécurité, le trafic et caméras urbaines, analyse de la vente au détail, vision industrielle et robotique guidée par vision.

Dans le cadre de la nouvelle approche consistant à proposer des applications accélérées pour la conception logicielle, Xilinx a également annoncé le premier magasin d'applications intégré pour les applications de périphérie. Au-delà de son catalogue d'applications Alveo pour datacenter, l'App Store de Xilinx propose désormais aux clients une large sélection d'applications pour les SOM Kria de Xilinx et de ses partenaires de l'écosystème. Khona a expliqué plus loin :« Nous construisons la bibliothèque d'applications. L'App Store n'est pas encore automatisé, vous devez donc contacter le fournisseur IP [s'il provient d'un partenaire de l'écosystème]. La disponibilité des applications de Xilinx directement sont des applications accélérées open source, fournies gratuitement, et vont du suivi de caméra intelligent et de la détection de visage au traitement du langage naturel avec une vision intelligente.

Xilinx a mis en évidence certaines des premières applications qui ont déjà déployé le Kria SOM. Cela inclut Kutleng Engineering Technologies, qui a pu déployer des caméras de suivi pour la sécurité de la faune en Afrique du Sud. Kutleng a déclaré qu'il était en mesure d'accélérer le lancement de plusieurs nouveaux produits en seulement deux mois, en utilisant les fonctions de vision disponibles via les applications accélérées de Xilinx. En outre, Optimized Solutions Limited en Inde a déployé une vision basée sur l'IA pour la détection, la reconnaissance et l'identification multi-objets pour une application de ville intelligente à l'aide du Kria SOM.