Des caméras compatibles avec l'IA conduisent un essai de ville intelligente

Un essai de ville intelligente alimenté par l'IA à Rome, à l'aide d'une image Sony capteurs dotés d'une capacité d'IA dans le cadre d'un système « Smart Tip », est destiné à aider à réduire les embouteillages et la pollution dues à la circulation, à réduire les accidents de la route pour piétons et à minimiser l'encombrement dans les bus de la ville.

Un essai de ville intelligente alimenté par l'IA à Rome, utilisant des capteurs d'image Sony dotés d'une capacité d'IA dans le cadre d'un système « Smart Tip », est destiné à aider à réduire les embouteillages et la pollution de la circulation, à réduire les accidents de la route pour piétons et à minimiser l'encombrement dans les bus de la ville.

L'essai vise à s'attaquer à trois « points douloureux » communs à la plupart des villes :le volume de trafic et les embouteillages, en particulier ceux liés à la recherche d'une place de stationnement ; la sécurité des piétons lors de la traversée de la route ; et l'optimisation de la disponibilité des transports publics pour l'ère de la pandémie et au-delà.

Jusqu'à présent, trois systèmes Smart Tip de preuve de concept ont été déployés dans la Ville éternelle, au sommet des feux de circulation.

Le système Smart Tip, comprenant deux modules de caméra Sony IMX500 compatibles AI, se trouve au sommet d'un feu de circulation (Source :Sony Semiconductor Europe)

Les Smart Tips comportent chacun deux capteurs d'image Sony IMX500. Ces capteurs, lancés il y a un an, disposent notamment d'une capacité de traitement d'IA qui permet de traiter les images à la périphérie du réseau, sans que les images ne quittent le Smart Tip.

Le module IMX500 dispose d'un capteur de 12,3 mégapixels ainsi que d'une puce logique dotée d'une conception Sony DSP dédiée au traitement de l'IA, ainsi que d'une mémoire pour stocker le modèle d'IA. La capacité de traiter les images au sein de l'appareil (sans envoyer de données vers le cloud) est essentielle au fonctionnement des systèmes d'intelligence artificielle des villes intelligentes, car elle permet une latence extrêmement rapide. Il garantit également la confidentialité des consommateurs; les images ne quittent pas l'appareil, à la place, les informations sont extraites via l'IA et converties en métadonnées. Ces métadonnées peuvent inclure le nombre de personnes montant ou descendant d'un bus à un arrêt de bus, ou la présence de piétons traversant la route. (L'IMX500 a la capacité de produire des images entières ou des régions d'intérêt/des images partielles si nécessaire, mais la communication de métadonnées uniquement a été sélectionnée pour cet essai).

"Il n'y a aucune image qui sort de ce capteur, ce n'est pas un appareil photo, c'est un appareil photo utilisé comme capteur - aucune image ne sort", a déclaré Antonio Avitabile, directeur général de l'alliance d'entreprise et de l'investissement chez Sony. « Ce qui sort est juste un « oui, véhicule » ou « pas de véhicule » ou un certain nombre de personnes. L'idée ici est de servir l'objectif et de faire le travail, mais sans regarder les gens. »

Le traitement des images à la périphérie évite également d'avoir à télécharger des dizaines d'images de 12 mégapixels dans le cloud ; les métadonnées seules sont bien mieux adaptées à la transmission par le modem cellulaire du Smart Tip.

cliquez pour l'image en taille réelle

Les trois applications testées par ce projet (Source :Sony Semiconductor Europe)

Trois candidatures

"La congestion du trafic est un très gros problème dans les grandes villes", a déclaré Avitabile. « Une partie importante est à peu près corrélée aux conducteurs qui recherchent une place de stationnement disponible. »

Le système d'intelligence artificielle de la ville intelligente de Rome vise à savoir où il y a des places de stationnement disponibles en temps réel. Les emplacements GPS des espaces disponibles sont envoyés au cloud via le modem cellulaire du système. Les emplacements peuvent ensuite être communiqués aux conducteurs via une application pour téléphone mobile. L'idée est d'éviter aux conducteurs d'avoir à conduire pendant de longues périodes à la recherche d'une place, ce qui réduit à la fois les embouteillages et la pollution.

La sécurité des piétons est un autre problème majeur pour toute ville ; des milliers de piétons sont tués chaque année sur les routes européennes. La distance moyenne entre les piétons et les véhicules est une mesure clé utilisée pour mesurer la sécurité des piétons. L'essai vise à en fournir une analyse quantitative. Les Smart Tips détectent les piétons qui traversent la route, puis activent des signaux visuels ou sonores pour les véhicules lorsque les piétons traversent.

Circulation à l'extérieur du Colisée de Rome (Crédit :Boris Stroujko)

"Chaque fois qu'un piéton est identifié en traversant la route, nous avons une sorte de signal lumineux sur le passage qui alertera le conducteur que quelqu'un traverse réellement", a déclaré Avitabile. « Nous pensons que ce sera un moyen de dissuasion pour générer moins de blessures et de décès aux passages pour piétons. »

Les transports publics sont la troisième application à laquelle l'essai s'attaquera. L'exemple d'Avitabile, les arrêts de bus intelligents, seraient en mesure de vérifier combien de personnes attendaient à chaque arrêt de bus et d'utiliser ces informations pour contrôler le nombre de personnes dans chaque bus (particulièrement important pendant la pandémie en cours). Les bus pourraient également éviter de s'arrêter aux arrêts où il n'y a pas de passagers en attente. Le système peut également surveiller le nombre de personnes qui montent et descendent du bus à chaque arrêt. Ces informations peuvent être utilisées pour mieux optimiser les itinéraires et les horaires des bus.

Système backend

Le système Smart Tip de Sony comprend une plate-forme de services fonctionnant dans le cloud. Cette plate-forme gérera l'approvisionnement et l'inscription des appareils Smart Tip. Cette plate-forme gère également la formation des modèles d'IA qui seront utilisés pour détecter les voitures et les personnes, et la production de modèles pouvant tenir sur l'appareil IMX500.

L'évolutivité des systèmes est assurée en minimisant leurs besoins en bande passante (en envoyant uniquement des métadonnées comme décrit ci-dessus). Les Smart Tips eux-mêmes sont identiques dans les trois cas d'utilisation; seul le logiciel du modèle d'IA sur chacun est différent. Le modèle d'IA peut être téléchargé ou mis à jour sans fil pour améliorer l'efficacité ou s'adapter à différentes applications à l'avenir.

>> Cet article a été initialement publié sur notre site frère, EE Fois Europe.