Blog dell'azienda SONY IMX646-AAMR-C Sensore di visione basato su eventi ad alta velocità da 1/2.5 pollici

Shenzhen Mingjiada Electronics Co., Ltd. fornisce SonyIMX646-AAMR-C, un sensore di immagine ad alta velocità gestito da eventi da 1/2,5 pollici con circa 0,92 milioni di pixel effettivi.

La SonyIMX646-AAMR-Cè un sensore di visione basato su eventi (EVS) stacked ad alta velocità di nuova generazione sviluppato da Sony Semiconductor in collaborazione con Profhesee, caratterizzato da un formato ottico da 1/2,5 pollici (diagonale 7,1 mm). Grazie alla sua innovativa architettura pixel e al meccanismo di rilevamento degli eventi, si libera completamente dalle limitazioni del frame rate dei tradizionali sensori di immagine basati su frame. Con vantaggi fondamentali come l'acquisizione asincrona degli eventi, una latenza ultrabassa a livello di microsecondi e una gamma dinamica ultraelevata, è particolarmente adatto alle esigenze di percezione dinamica della scena ad alta velocità. Funge da componente visivo principale ad alte prestazioni per l'automazione industriale, la robotica intelligente, la sicurezza di fascia alta e le applicazioni intelligenti di misurazione e controllo.

I. Posizionamento principale e vantaggi architettonici dell'IMX646-AAMR-C

IMX646-AAMR-C è un sensore ad alta definizione, guidato dagli eventi, progettato per applicazioni di visione di fascia alta e ad alta velocità. A differenza dei tradizionali sensori CMOS, che funzionano con un frame rate fisso con esposizione sequenziale dei fotogrammi e output globale, questo sensore utilizza un'architettura di rilevamento eventi asincrona a livello di pixel. Ogni pixel monitora in modo indipendente le variazioni di luminosità in tempo reale, emettendo coordinate pixel, timestamp e dati sulla polarità della luminosità solo quando viene rilevato un improvviso cambiamento di illuminazione. Le aree statiche senza variazioni di luminosità non generano dati ridondanti, realizzando così una modalità di rilevamento di "acquisizione su richiesta, output efficiente" a livello hardware.

Dal punto di vista hardware, utilizza il maturo processo Stacked Pixel di Sony e presenta una dimensione pixel ultra-piccola leader del settore di 4,86μm. Ciò garantisce una risoluzione ad alta definizione di 1280×720 (circa 920.000 pixel effettivi) riducendo significativamente l'ingombro fisico del sensore e bilanciando la precisione dell'immagine con la necessità di un design compatto del dispositivo. Il chip integra un circuito di conversione I/V logaritmico, un'unità di rilevamento della variazione dell'illuminamento e un circuito di arbitraggio, consentendo il riconoscimento degli eventi, il filtraggio del segnale e il condizionamento dei dati senza la necessità di chip ausiliari esterni. Ciò migliora significativamente l'integrazione e riduce la complessità dello sviluppo hardware per i dispositivi finali.

II.IMX646-AAMR-CSpecifiche hardware principali e prestazioni eccezionali

Sfruttando il design proprietario dei pixel e l'ottimizzazione dei circuiti, questo sensore raggiunge prestazioni leader del settore in tre dimensioni fondamentali: velocità di risposta, gamma dinamica e prestazioni in condizioni di scarsa illuminazione. Tutti i parametri principali sono stati sottoposti a calibrazione di livello industriale per garantire l'idoneità ad ambienti operativi esigenti.

1. Latenza ultrabassa e risposta ad alta velocità

ILIMX646-AAMR-Csupera i limiti del frame rate dei sensori tradizionali per ottenere un rilevamento in tempo reale puramente basato sugli eventi. In condizioni di illuminazione standard di 1000 lux, la latenza di risposta complessiva è ≤800 μs, con una latenza di picco pari a 300 μs. Ciò consente l'acquisizione precisa delle traiettorie istantanee di bersagli in movimento ad alta velocità a intervalli di millisecondi, eliminando completamente la sfocatura da movimento e il ritardo dell'immagine associati all'imaging tradizionale. Anche in condizioni di luce estremamente scarsa, pari a 0,3 lux, la latenza rimane entro 9.000 μs, bilanciando la risposta ad alta velocità con l'adattabilità in condizioni di scarsa illuminazione. Ciò lo rende perfettamente adatto per scenari come l’ispezione della linea di produzione ad alta velocità, l’elusione dinamica degli ostacoli per i droni e il tracciamento del movimento ad alta velocità.

2. Imaging a gamma dinamica ultraelevata

Dotato di un circuito pixel con risposta logaritmica integrato, ilIMX646-AAMR-Craggiunge una gamma dinamica superiore a 110 dB, coprendo un intervallo di illuminazione eccezionalmente ampio da 30 mLux a 100 kLux. È in grado di gestire scenari complessi che coinvolgono una forte luce diretta, aree in ombra e scarsa illuminazione e transizioni rapide tra luce e buio. In condizioni di retroilluminazione, sorveglianza esterna ad alta intensità e ambienti industriali con condizioni di luce e oscurità alternate, preserva efficacemente i dettagli sia nelle aree luminose che in quelle scure, eliminando problemi di sovraesposizione e sottoesposizione, con una tolleranza dell'immagine che supera di gran lunga quella dei tradizionali sensori basati su frame.

3. Immagini stabili e a basso rumore

ILIMX646-AAMR-CIl sensore offre un'eccellente soppressione del rumore di fondo. Con un'illuminazione standard di 1000 lux, la frequenza degli eventi di fondo è di soli 0,1 Hz; in condizioni di scarsa illuminazione di 0,3 lx, la frequenza degli eventi di fondo non è superiore a 5 Hz. La non uniformità della soglia di contrasto dei pixel è ≤6%, riducendo efficacemente l'emissione di eventi di rumore spuri, alleviando il carico computazionale sugli algoritmi di filtraggio a valle e garantendo precisione e stabilità della percezione nelle scene dinamiche ad alta velocità.

4. Specifiche hardware di base

ILIMX646-AAMR-Cha un formato ottico standard da 1/2,5 pollici, con una risoluzione effettiva dei pixel di 1280 (O) × 720 (V), per un totale di circa 0,92 milioni di pixel effettivi e una dimensione dei pixel di 4,86 ​​μm × 4,86 ​​μm; Utilizza un pacchetto LGA a 156 pin con dimensioni esterne di 13 mm × 13 mm, offrendo un fattore di forma compatto adatto per l'integrazione in dispositivi miniaturizzati; l'alimentazione è composta da tre linee separate: 3,0 V per analogico, 1,1 V e 1,8 V per digitale, con un eccellente controllo del consumo energetico, che lo rende adatto al funzionamento continuo prolungato.

III. ILIMX646-AAMR-CLe numerose funzionalità intelligenti di

IMX646-AAMR-C integra molteplici funzioni proprietarie di elaborazione delle immagini e ottimizzazione degli eventi. I parametri possono essere configurati in modo flessibile tramite registri per soddisfare i requisiti di percezione personalizzati in diversi scenari, offrendo funzionalità ed espandibilità eccezionali.

- Regolazione dei parametri multidimensionali: supporta la personalizzazione delle soglie di contrasto, del ritardo di risposta e dei tempi morti. Combinato con il filtraggio analogico di riduzione del rumore, ciò consente un'ottimizzazione precisa dell'output dell'evento in base all'illuminazione della scena e alla velocità del movimento, soddisfacendo requisiti di rilevamento di varia precisione.

- Acquisizione ROI flessibile: supporta tre tipi di funzionalità ROI: definizione di regioni arbitrarie tramite matrice, modalità finestra e ritaglio digitale, consentendo il blocco delle aree di rilevamento del target e il mascheramento di regioni dell'immagine irrilevanti, riducendo così ulteriormente il volume di output dei dati e migliorando l'efficienza di rilevamento.

- Funzioni di elaborazione eventi professionali: le funzioni integrate anti-sfarfallio, filtro eventi e statistiche sulla frequenza degli eventi filtrano automaticamente gli eventi non validi causati da sfarfallio dell'illuminazione e interferenze ambientali; Supporta il mascheramento dei pixel e l'inversione della polarità degli eventi per adattarsi a diverse logiche di elaborazione algoritmica.

- Meccanismo di sincronizzazione multi-dispositivo: supporta la modalità master-slave per il funzionamento sincronizzato di più sensori, consentendo una sincronizzazione temporale precisa nei sistemi di visione multi-camera per soddisfare le esigenze di applicazioni di fascia alta come la ricostruzione 3D, la gamma stereo e il rilevamento collaborativo su larga scala.

- Assistenza per la consapevolezza ambientale: il termometro e il luxmetro integrati (doppia modalità di rilevamento per l'illuminamento assoluto e relativo) consentono la raccolta in tempo reale della temperatura operativa del dispositivo e dei dati sulla luce ambientale, fornendo supporto dati per la regolazione adattiva dei parametri di imaging e migliorando l'adattabilità ambientale del dispositivo.

IV.IMX646-AAMR-CSpecifiche dell'interfaccia ad alta velocità e dell'output dei dati

Per soddisfare i requisiti di trasmissione dei dati degli eventi ad alta velocità, ilIMX646-AAMR-Cè dotato di un'interfaccia di trasmissione ad alta velocità dual-mode, che supporta la commutazione flessibile della configurazione per accogliere dispositivi terminali con requisiti di larghezza di banda variabili. L'interfaccia include due modalità di trasmissione: MIPI (commutabile tra 1 canale e 2 canali) e SLVS (commutabile tra 2 canali e 4 canali). La larghezza di banda di trasmissione ad alta velocità garantisce l'output senza latenza di enormi volumi di dati di eventi istantanei, eliminando problemi di congestione e perdita di dati.

È inoltre compatibile sia con EVT 2.1 che con EVT 3.0, i due formati di output degli eventi principali. EVT 3.0 utilizza una modalità di compressione della codifica a 16 bit, che riduce significativamente la larghezza di banda di trasmissione dei dati e i requisiti di archiviazione. Ciò allevia efficacemente il carico computazionale sul chip host backend, migliorando la velocità di risposta e la stabilità operativa dell'intero sistema di visione e rendendolo adatto all'implementazione in dispositivi embedded leggeri.

V. Scenari applicativi principali diIMX646-AAMR-C

Sfruttando i vantaggi completi di alta velocità, bassa latenza, elevata gamma dinamica e basso consumo energetico di calcolo, questo sensore è ideale per vari scenari di rilevamento della visione dinamica ad alta velocità, con un'ampia gamma di aree di applicazione principali:

- Produzione intelligente industriale: rilevamento dei difetti della catena di montaggio ad alta velocità, misurazione dimensionale dinamica di parti di precisione, tracciamento della traiettoria di movimento in tempo reale dei bracci robotici e monitoraggio delle vibrazioni e degli spostamenti delle apparecchiature. Sfruttare la latenza a livello di microsecondi per ottenere un controllo della qualità e del movimento in tempo reale ad alta precisione.

- Robotica intelligente: evitamento dinamico degli ostacoli, modellazione ambientale in tempo reale e tracciamento umano per robot di servizio e robot mobili industriali. Consente la percezione ambientale ad alta velocità senza richiedere un'elevata potenza di calcolo, migliorando la sensibilità della risposta al movimento del robot.

- Sorveglianza di sicurezza di fascia alta: acquisizione dinamica di bersagli diurni e notturni all'aperto, tracciamento di pedoni e veicoli in rapido movimento e monitoraggio in scenari di luce retroilluminati e ad alta intensità. Con una gamma dinamica ultraelevata e una bassa latenza, risolve problemi come il motion blur nei movimenti ad alta velocità e i problemi di imaging nelle scene ad alto contrasto riscontrate dai tradizionali sistemi di sorveglianza.

- Ricerca scientifica e misurazioni specializzate: osservazione di esperimenti scientifici ad alta velocità, monitoraggio dinamico e controllo di strumenti di precisione, evitamento di ostacoli ad alta velocità a bassa quota per i droni e percezione dinamica per giochi interattivi: tutti scenari che richiedono prestazioni e precisione rigorose in tempo reale.

VI. Principali vantaggi competitivi diIMX646-AAMR-C

Rispetto ai tradizionali sensori di immagine basati su frame e sensori simili guidati da eventi, i vantaggi principali di SonyIMX646-AAMR-Csi trovano in quattro aree chiave: in primo luogo, prestazioni in tempo reale senza rivali, con una latenza di microsecondi che lo libera dai vincoli del frame rate per catturare fugaci dettagli dinamici; in secondo luogo, un'eccezionale efficienza dei dati, in grado di produrre solo eventi dinamici validi riducendo drasticamente i dati ridondanti, tagliando così i costi di calcolo e di larghezza di banda di oltre il 50%; In terzo luogo, forte adattabilità ambientale: una gamma dinamica ultra ampia combinata con un design a bassissimo rumore garantisce l'idoneità a condizioni operative complesse, tra cui giorno e notte, transizioni tra luce e buio e ambienti con illuminazione sia forte che debole; in quarto luogo, elevata integrazione e facilità di implementazione: una suite completa integrata di circuiti di elaborazione del segnale e funzioni regolabili, abbinata a interfacce standardizzate ad alta velocità, riduce significativamente il ciclo di ricerca e sviluppo per i prodotti per l'utente finale e facilita la produzione di massa su larga scala.

VII. Riassunto delIMX646-AAMR-C

Il sensore di visione guidato dagli eventi ad alta velocità Sony IMX646-AAMR-C da 1/2,5 pollici combina la tecnologia di processo stacked CMOS all'avanguardia di Sony con la tecnologia matura di rilevamento degli eventi di Profhesee, risolvendo le carenze dei sensori di visione tradizionali in scene dinamiche ad alta velocità, condizioni di illuminazione complesse e applicazioni embedded a bassa potenza di calcolo. La sua risoluzione ad alta definizione, la latenza ultrabassa a livello di microsecondo, la gamma dinamica ultraelevata e l'integrazione leggera lo rendono il componente principale preferito per i sistemi di visione di prossima generazione nell'automazione industriale, nella robotica intelligente e nelle applicazioni di sicurezza di fascia alta, guidando l'evoluzione intelligente della visione artificiale da "imaging basato su frame" a "percezione guidata dagli eventi".