Actualités Tech

Sony : un capteur d’images avec IA intégrée se passe d’analyse des nuages

Sony: Bildsensor mit integrierter KI verzichtet auf Cloud-Analyse

Sony a introduit le premier capteur d’image à offrir une intelligence artificielle pour l’analyse et le traitement des images sur la puce logique. Cela signifie que les données ne doivent pas être chargées dans le nuage et analysées en premier lieu. Cela devrait non seulement apporter des avantages en termes de rapidité, mais aussi améliorer la protection des données sensibles en particulier.

Les deux capteurs sont commercialisés par Sony sous le nom de « Intelligent Vision Sensors ». Le traitement AI sur la puce permet de réduire les données chargées dans le nuage au minimum requis, ce qui réduit les temps de latence de transmission des données, répond aux exigences de protection des données et réduit la consommation d’énergie et les coûts de communication.

Les échantillons sont déjà livrés

Toutefois, les nouveaux capteurs ne seront pas utilisés dans un premier temps pour les smartphones, où Sony occupe une position dominante avec ses propres capteurs de caméra. Ils doivent plutôt être utilisés dans des caméras compatibles avec l’IA dans les secteurs du commerce de détail ou de l’équipement industriel, par exemple. Les capteurs rétro-éclairés IMX500 et IMX501 (version packagée) offrent 12,3 mégapixels à 1/2,3 pouces et une diagonale de 7,857 mm. Les enregistrements 4K sont possibles à 60 FPS, et jusqu’à 240 FPS en Full HD. La puce logique produit des métadonnées à 30 FPS. Si la vidéo et l’AI doivent être traitées simultanément, 30 FPS sont possibles. Des échantillons de l’IMX500 seront livrés en avril et l’IMX501 devrait être lancé en juin. Le prix de l’échantillon de l’IMX500 est d’environ 87 euros, pour l’IMX501 il est de 173 euros. Comme Sony détient une part de marché d’environ 60 % dans le segment des capteurs de caméra, la technologie se répandra rapidement. Rien que l’année dernière, Sony a livré environ 1,6 milliard de capteurs de caméra. Sony prévoit que les premiers produits utilisant les nouveaux capteurs seront disponibles au cours du premier trimestre 2021.

Sony IMX500 : Capteur d'images avec IA
Sony IMX500 : Capteur d'images avec IA
Sony IMX500 : Capteur d'images avec IA
Sony IMX500 : Capteur d’images avec IA (Photo : Sony)

La puce logique ne produit que des métadonnées

Les nouveaux capteurs sont empilés et se composent d’une puce de pixel et d’une puce logique. Le signal capturé par la puce de pixel est traité par l’IA du capteur, ce qui élimine le besoin de processeurs haute performance ou de mémoire externe. Le capteur produit des métadonnées (c’est-à-dire des informations sémantiques sur les données de l’image) au lieu d’informations sur l’image, ce qui non seulement réduit la quantité de données mais répond également aux préoccupations de confidentialité puisqu’il ne contient plus d’informations personnelles uniques telles que les informations sur l’image. De plus, la capacité d’IA permet des fonctions telles que le suivi d’objets en temps réel. Par exemple, un capteur peut être utilisé pour localiser des visages, mais pas pour les reconnaître.


Sony IMX500 : Capteur d'images avec IA
Sony IMX500 : Capteur d’images avec IA

Sony IMX500 : Capteur d'images avec IA
Sony IMX500 : Capteur d’images avec IA

Enregistrement des clients et des marchandises dans le commerce de détail

Les utilisateurs peuvent écrire les modèles d’IA de leur choix dans la mémoire embarquée et peuvent également les réécrire et les mettre à jour en fonction de leurs besoins ou des conditions du lieu où se trouve le système. Par exemple, si plusieurs caméras utilisant ce capteur sont installées dans un magasin de détail, un seul type de caméra peut couvrir différents lieux, conditions, moments ou objectifs. Si la caméra est installée dans la zone d’entrée, elle peut être utilisée pour compter les clients qui entrent dans le magasin. Lorsqu’il est monté sur une étagère, il peut être utilisé pour détecter les marchandises manquantes. Si la caméra est installée au plafond, elle peut être utilisée pour créer des images thermiques afin de détecter les zones où se rassemblent de nombreux visiteurs du magasin. En outre, le modèle d’IA peut être réécrit dans une caméra de sorte que, par exemple, un modèle de détection de carte de chaleur devient un modèle de comportement du client.


Sony IMX500 : Capteur d'images avec IA
Sony IMX500 : Capteur d’images avec IA

Sony IMX500 : Capteur d'images avec IA
Sony IMX500 : Capteur d’images avec IA

Amazon Go utilise un système similaire, mais dans le nuage

Amazon poursuit une approche similaire dans ses propres magasins Amazon Go, dans lesquels des caméras enregistrent les marchandises achetées par les visiteurs afin de les facturer automatiquement lorsqu’ils quittent le magasin sans avoir besoin d’un système de caisse. Jusqu’à présent, d’énormes quantités de données ont dû être traitées dans le nuage.

Partager cet article
Robin Vigneron

About author
Robin est un passionné de nouvelles technologies et il n'hésites pas à creuser le web pour vous trouver les meilleurs bons plans et astuce High-Tech !
Articles