Prophesee et Sony dévoilent un capteur vision événementiel empilé avec HDR record et pixels ultra-petits

PARIS — Prophesee, le pionnier parisien des systèmes de vision neuromorphiques, et Sony Corp. ont annoncé à la Conférence Internationale sur les Circuits à Semi-conducteurs (ISSCC) à San Francisco un capteur de vision événementiel empilé révolutionnaire qui mélange l'architecture événementielle de Prophesee avec la technologie CMOS empilée avancée de Sony.

Conçu dès le départ pour la détection d'événements asynchrones, le capteur délivre la plus petite taille de pixel de l'industrie à 4,86 µm et une plage dynamique exceptionnelle de 124 dB, permettant un fonctionnement fiable de la pleine lumière du jour aux scènes de nuit profonde (jusqu'à 40 mLx).

Puce pixel (gauche) et puce logique (source : Prophesee)

Dans une configuration empilée, la couche pixel supérieure et la couche logique inférieure sont liées via des interconnexions cuivre-cuivre, permettant un processus dense 40 nm qui atteint une résolution HD 1280×720 tout en maintenant un taux d'ouverture élevé jusqu'à 77 %. Cette architecture supporte aussi un pipeline de traitement de signal par modulation delta asynchrone efficace qui capture les changements de luminance comme événements discrets.

Pour la première fois, la collaboration offre la possibilité d'intégrer la détection IA et le traitement IA directement sur ou près du capteur, ouvrant la voie à des appareils edge véritablement intelligents tels que véhicules autonomes, robots industriels et systèmes de vision machine avancés.

Partenariat stratégique

Soy, le leader mondial des capteurs d'image CMOS, apporte son excellence de fabrication et son portefeuille IP au partenariat, donnant à la technologie de Prophesee une crédibilité commerciale. Le PDG Luca Verre note que l'alliance a commencé en 2017 et que les premiers échantillons du capteur empilé étaient prévus pour 2020.

Pour Sony, le partenariat signale un virage stratégique vers la « détection » plutôt que la simple imagerie. Cela reflète l'impact de l'acquisition de SoftKinetic en 2015, qui a permis les solutions « DepthSense » temps-de-vol (ToF) de Sony dans les smartphones Android. Le capteur événementiel positionne Sony pour capturer des flux de données plus riches dans les marchés automobile et industriel, où les consommateurs exigent des insights sensoriels plus profonds.

Analyse d'expert

Pierre Cambou de Yole Développement compare la collaboration à « l'ouverture de la boîte de Pandore ». Il souligne le potentiel pour de futurs designs empilés intégrant neurones, mémoire et traitement, vers des capteurs d'image intégrant l'IA capables d'amélioration à la volée et sortie directe événementielle.

Pierre Cambou, Yole Développement

En combinant le design de pixel neuromorphique de Prophesee avec les capacités de fabrication de Sony, le capteur commun représente un bond significatif en technologie de vision, offrant haute plage dynamique, faible bruit, et fonctionnement événementiel qui s'aligne avec l'avenir de l'informatique edge activée par l'IA.

Alors que les deux compagnies visent à amener le capteur sur le marché, le partenariat promet de débloquer de nouvelles opportunités commerciales et d'établir une nouvelle référence pour les systèmes de vision dans le monde.