Segui Sony Italia

Sony presenta i primi sensori d’immagine intelligenti al mondo con funzionalità di elaborazione basata sull’intelligenza artificiale

Comunicato stampa   •   mag 14, 2020 09:30 CEST

I nuovi modelli rendono possibile un’elaborazione edge ad alta velocità basata su IA e contribuiscono alla creazione di sistemi ottimali connessi al cloud

Tokyo, Giappone — In data odierna, Sony Corporation ha annunciato l’imminente lancio di due sensori d’immagine intelligenti, i primi al mondo dotati di funzionalità di elaborazione basata su IA.*1 L’inclusione di tale funzionalità sul sensore d’immagine stesso permette un’elaborazione edge ad alta velocità basata su IA e l’estrazione dei soli dati necessari. Se abbinato all’uso di servizi cloud, tutto ciò consente di ridurre la latenza di trasmissione dei dati, di affrontare le problematiche relative alla privacy e di contenere i consumi energetici e i costi delle comunicazioni.

*1 Tra i sensori d’immagine. Secondo una ricerca condotta da Sony (all’annuncio del 14 maggio 2020).

I nuovi prodotti ampliano le possibilità di sviluppo di fotocamere dotate di intelligenza artificiale, promuovendo svariate applicazioni nel campo del retail e delle attrezzature industriali e contribuendo alla creazione di sistemi ottimali connessi al cloud.

                                                                                                                                  Sensori d’immagine intelligenti
                                                         

Nome modello Data di spedizione campione Prezzo campione (tasse escluse)
Sensore d’immagine intelligente IMX500 di tipo 1/2,3 (diagonale 7,857 mm), ca. 12,3 megapixel effettivi (solo chip) Aprile 2020 10.000 JPY
Sensore d’immagine intelligente IMX501 di tipo 1/2,3 (diagonale 7,857 mm), ca. 12,3 megapixel effettivi (package di ceramica) Giugno 2020 (da programma) 20.000 JPY

Con la diffusione dell’IoT, qualsiasi tipo di dispositivo è stato dotato di una connessione al cloud e ciò ha reso di uso comune i sistemi di elaborazione in cui le informazioni ottenute dai dispositivi stessi sono processate tramite IA su cloud. Inoltre, il crescente volume di informazioni gestite su cloud pone svariati problemi, tra cui la maggiore latenza di trasmissione dei dati, che ostacola l’elaborazione delle informazioni in tempo reale, i timori per la sicurezza legati all’archiviazione sul cloud di dati personali identificabili e altre questioni quali l’aumento dei consumi energetici e dei costi di comunicazione legati ai servizi su cloud.

I nuovi sensori presentano una configurazione a strati formata da un chip pixel e da un chip logico. Sono i primi sensori d’immagine al mondo dotati di funzionalità di elaborazione e analisi dell’immagine basate su IA su chip logico. Poiché il segnale acquisito dal chip pixel è elaborato tramite IA sul sensore, non sono più necessari processori ad alte prestazioni o memoria esterna e questo favorisce lo sviluppo di sistemi di IA edge. Il sensore invia i metadati (informazioni semantiche proprie dei dati dell’immagine) invece che l’immagine, perciò il volume dei dati è ridotto e i timori relativi alla privacy risolti. Al tempo stesso, le diverse funzionalità basate su IA presentano una notevole versatilità d’impiego, permettendo per esempio il tracking degli oggetti in tempo reale con un’elaborazione ad alta velocità fondata su IA. I diversi modelli di IA possono essere selezionati riscrivendo la memoria interna in base ai requisiti dell’utente o alle condizioni proprie del luogo di utilizzo del sistema.

Nome modello Data di spedizione campione Prezzo campione (tasse escluse)
Sensore d’immagine intelligente IMX500 di tipo 1/2,3 (diagonale 7,857 mm), ca. 12,3 megapixel effettivi (solo chip) Aprile 2020 10.000 JPY
Sensore d’immagine intelligente IMX501 di tipo 1/2,3 (diagonale 7,857 mm), ca. 12,3 megapixel effettivi (package di ceramica) Giugno 2020 (da programma) 20.000 JPY


Caratteristiche principali

■ Il primo sensore d’immagine al mondo dotato di funzionalità di elaborazione basata su IA

Il chip pixel è retroilluminato e dispone di circa 12,3 megapixel effettivi, che consentono di acquisire informazioni attraverso un ampio angolo di campo. In aggiunta al circuito operativo dei sensori d’immagine convenzionali, il chip logico è dotato di un DSP (Digital Signal Processor) originale di Sony, dedicato all’elaborazione del segnale tramite IA, e di memoria per i modelli di IA. Tale configurazione elimina la necessità di processori ad alte prestazioni o memoria esterna ed è perciò ideale per i sistemi di IA edge.


■ Output di metadati

I segnali acquisiti dal chip pixel sono processati da un ISP (Image Signal Processor) e l’elaborazione tramite IA avviene in fase di elaborazione sul chip logico. Le informazioni estratte sono inviate sotto forma di metadati, con una conseguente riduzione della quantità di dati gestiti. Assicurare che le immagini non vengano trasmesse aiuta a ridurre i rischi legati alla sicurezza e risolvere i timori relativi alla privacy. Oltre all’immagine registrata dal sensore d’immagine convenzionale, gli utenti possono selezionare il formato di output in base alle esigenze e all’uso, tra cui immagini in formato ISP (YUV/RGB) e immagini ROI (Region of Interest) con estratti di aree specifiche.

                       

                                                       Formato di output dei dati selezionabile per soddisfare diverse esigenze 

■ Elaborazione ad alta velocità fondata su IA

Registrando un video con un sensore d’immagine convenzionale, è necessario inviare i dati di ogni singolo fotogramma per permetterne l’elaborazione tramite IA: ciò determina un incremento dei dati trasmessi, che ostacola le prestazioni in tempo reale. Nei nuovi sensori di Sony, l’elaborazione ISP e l’elaborazione ad alta velocità basata su IA (elaborazione in 3,1 millisecondi per MobileNet V1*2) avvengono sul chip logico e l’intero processo viene completato in un unico frame video. Tale design rende possibile il tracking degli oggetti ad alta precisione e in tempo reale durante la registrazione di video.

*2 MobileNet V1: un modello di analisi dell’immagine basato su IA per il riconoscimento di oggetti su dispositivi mobili.

                                    Esempio di tracking in tempo reale con prodotto e task su un registratore di cassa 

■ Possibilità di selezionare i modelli di IA

Gli utenti possono salvare i modelli di IA desiderati nella memoria integrata, riscrivendoli e aggiornandoli in base ai requisiti richiesti o alle condizioni del luogo in cui il sistema viene utilizzato. Per esempio, se più fotocamere equipaggiate con il nuovo prodotto sono installate in un punto vendita, lo stesso tipo di fotocamera può essere impiegato in maniera versatile in punti, circostanze, momenti o con scopi differenti. All’ingresso di una struttura, infatti, può permettere di registrare il numero di visitatori che decidono di entrare. Sullo scaffale di un negozio, può aiutare a visualizzare i prodotti in esaurimento. All’altezza del soffitto, consente di elaborare la mappa di calore dei clienti (individuando le aree ad alta concentrazione) e così via. Inoltre, il modello di IA di una determinata fotocamera può essere riscritto per passare dall’elaborazione di mappe di calore all’identificazione del comportamento dei clienti e così via.

                                          Esempi delle modalità di utilizzo di una fotocamera all'interno di una struttura 


Specifiche tecniche principali

Nome modello IMX500 (solo chip) IMX501 (pacchetto)
Numero di pixel effettivi 4056 (oriz.) × 3040 (vert.), ca. 12,3 megapixel
Dimensioni immagine Diagonale 7,857 mm (tipo 1/2,3)
Dimensioni cella, unità 1,55 μm (oriz.) × 1,55 μm (vert.)
Frame rate Full pixel 60 fps
Video 4K (4056 × 2288) 60 fps
1080p 240 fps
Full/video + elaborazione IA 30 fps
Output di metadati 30 fps
Sensibilità (valore standard F5.6) 250LSB ca.
Livello segnale di saturazione del sensore (valore minimo) Ca. 9610e-
Alimentazione Analogica 2,7 V
Digitale 0,84 V
Interfaccia 1,8 V
Funzioni principali Funzionalità di elaborazione IA, ISP, scatto HDR
Output MIPI D-PHY 1.2 (4-lane) / SPI
Schema filtro colore Schema Bayer
Formato di output Immagine (Bayer RAW), output ISP (YUV/RGB), ROI, metadati
Package - LGA ceramica 12,5 mm (oriz.) × 15,0 mm (vert.)

Per ulteriori informazioni, contattare:

Cristina Papis – e-mail: sony.pr@eu.sony.com

Sony Europe B.V., Sede Secondaria Italiana – Via Rizzoli, 4 – 20132 Milano

Tel: 02-618.38.1

Sony Corporation

Sony Corporation è una “creative entertainment company” con solide fondamenta basate sulla tecnologia. Dal gaming e i servizi online, alla musica, al cinema, all'elettronica, ai semiconduttori e ai servizi finanziari - l’obiettivo di Sony è riempire il mondo di emozione attraverso il potere della creatività e della tecnologia. 

Per ulteriori informazioni relative a Sony è possibile visitare il sito http://www.sony.net.

File allegati

Documento PDF