VGA rispetto a SXGA Termografia: Cosa significa una risoluzione più elevata per portata, ottica e IA

Abstract

Questo articolo esamina le implicazioni a livello di sistema del passaggio dall’imaging a infrarossi a onde lunghe (LWIR) a video (VGA, 640 × 512) all’imaging a infrarossi a onde lunghe Super Extended Graphics Array (SXGA, 1280 × 1024) per applicazioni di difesa, autonome e integrate. Confronta il modo in cui una risoluzione più elevata del rilevatore influisce sui pixel sul soggetto, sul campo visivo istantaneo (IFOV), sulle prestazioni di rilevamento, riconoscimento e identificazione (DRI), sui compromessi sul campo visivo, sul design ottico, sul carico di elaborazione e sulle prestazioni della visione artificiale. L'obiettivo è quello di inquadrare la risoluzione come un elemento di un più ampio spazio commerciale ingegneristico che includa anche sensibilità, throughput ottico, larghezza di banda, latenza, alimentazione, gestione termica, requisiti di approvvigionamento, esportabilità e esigenze di prestazioni specifiche per la missione.

Introduzione e sfondo

Da oltre un decennio, le termocamere con risoluzione VGA sono lo standard per molte applicazioni nel settore della difesa, industriale e non, perché forniscono un equilibrio efficace tra prestazioni, costo del sistema e dimensioni, peso e potenza (SWaP). Con l’espansione dell’autonomia, della visione artificiale e dei requisiti di rilevamento a lungo raggio, gli architetti di sistema stanno valutando i vantaggi del passaggio a sensori termici ad alta risoluzione.

La transizione da VGA a SXGA è molto più di un semplice miglioramento della qualità dell'immagine. Con un numero di pixel quattro volte superiore, gli imager SXGA cambiano radicalmente la relazione tra risoluzione del bersaglio, campo visivo, design ottico e percezione della macchina. I moduli LWIR SXGA più recenti, come Boson® SX8 di Teledyne FLIR OEM, illustrano come le architetture dei sensori da 8 micron (μ m) possono aumentare la risoluzione, limitando al contempo le dimensioni e le sanzioni ottiche tradizionalmente associate ai sensori termici di formato più grande. Questi compromessi sono particolarmente importanti per i sistemi militari e aerospaziali in cui le prestazioni dei sensori devono essere bilanciate rispetto alle dimensioni del carico utile, all’elaborazione a bordo, alla capacità dei datalink, all’esportabilità e ai requisiti di approvvigionamento in conformità con le normative internazionali sul traffico di armi (ITAR) e il National Defense Authorization Act (NDAA). Boson®+ fornisce un utile punto di riferimento VGA per confrontare in che modo la risoluzione, il pixel pitch, il campo visivo, i vincoli di integrazione a livello di sistema e i requisiti del programma influiscono sulle prestazioni reali.

Figura 1. Esempio HFOV VGA a 18° (sinistra) rispetto a SXGA (destra) con zoom Picture-in-Picture 3×

Comprendere la differenza di risoluzione

La differenza più ovvia tra VGA e SXGA è il conteggio dei pixel. Un sensore SXGA cattura quattro volte più campioni termici per fotogramma rispetto a un sensore VGA. Questi pixel aggiuntivi possono essere utilizzati in due modi: aumentando il dettaglio del soggetto nello stesso campo visivo o aumentando il campo visivo, mantenendo al contempo il dettaglio del soggetto. La maggior parte dei sistemi reali utilizza una combinazione di entrambi.

Tabella 1. Confronto risoluzione VGA e SXGA

Il significato di una risoluzione più elevata non è semplicemente che l'immagine appare più nitida. I campioni termici aggiuntivi forniscono maggiori informazioni agli operatori umani, ai tracciatori di bersagli, ai sistemi autonomi e agli algoritmi di apprendimento automatico.

Pixel su target e prestazioni DRI

Il rilevamento, il riconoscimento e l’identificazione (DRI) descrivono livelli crescenti di prestazioni delle attività in un sistema di imaging. Rilevazione significa determinare la presenza di un oggetto; riconoscimento significa classificare il tipo di oggetto, come una persona, un veicolo o un drone; identificazione significa distinguere l’oggetto, la configurazione o la minaccia specifici. Le prestazioni DRI generalmente migliorano man mano che i campioni di immagine più risolti coprono il soggetto, ma le soglie esatte dipendono dalla dimensione del soggetto, dal contrasto, dall’atmosfera, dall’ottica, dalla sensibilità del sensore, dall’elaborazione dell’immagine, dalle condizioni di visualizzazione, dalle prestazioni dell’osservatore o dell’algoritmo e dai criteri di missione.

I modelli in stile Johnson-criteria vengono spesso utilizzati per stimare le prestazioni DRI correlando la difficoltà del compito del soggetto al campionamento spaziale attraverso la dimensione critica del soggetto, tipicamente definita come la larghezza, l’altezza o la dimensione della caratteristica utilizzata per il compito di rilevamento. In termini pixel-on-target semplificati, il rilevamento può richiedere solo un piccolo numero di campioni risolti, il riconoscimento richiede di più e l’identificazione richiede ancora dettagli più precisi.

Questi valori devono essere trattati come approssimazioni di pianificazione piuttosto che come regole fisse. Le prestazioni operative devono essere convalidate attraverso modelli specifici per la missione e, ove possibile, test sul campo.

Una metrica correlata è un campo visivo istantaneo (IFOV), che descrive la porzione angolare della scena rappresentata da un singolo pixel. Un IFOV più fine significa che ogni pixel copre un’area più piccola a un dato intervallo, consentendo un numero maggiore di pixel sul soggetto e un dettaglio spaziale migliorato per il rilevamento, il riconoscimento e l’identificazione.

Quando due sensori osservano la stessa scena con lo stesso campo visivo orizzontale (HFOV), il sensore ad alta risoluzione posiziona più pixel sul soggetto, migliorando il dettaglio spaziale e riducendo l’ambiguità.

Tabella 2. Confronto tra le prestazioni relative a VGA e SXGA DRI con lo stesso HFOV

Figura 2. Illustrazione area immagine e range di rilevamento VGA vs. SXGA

I confronti rappresentativi tra le medesime ottiche con lunghezza focale di 32 mm mostrano come una configurazione SXGA può fornire un HFOV più ampio, aumentando al contempo la copertura della scena relativa e il range di rilevamento modellato rispetto a una configurazione VGA. I valori nella Tabella 3 illustrano i relativi compromessi a livello di sistema in ipotesi equivalenti e non intendono garantire le prestazioni in tutte le condizioni operative.

Tabella 3. Confronto della lunghezza focale di Boson+ e Boson SX8 con la stessa lente

I valori del range di rilevamento e la copertura della scena relativa devono essere interpretati nel contesto delle ipotesi sottostanti, tra cui dimensione del soggetto, contrasto di temperatura da soggetto a sfondo, trasmissione atmosferica, trasmissione ottica, numero f dell’obiettivo, sensibilità del sensore, elaborazione dell’immagine, caratteristiche del display e criteri di probabilità selezionati. Per i sistemi operativi, le stime DRI devono essere confermate attraverso la modellazione specifica della missione e, ove possibile, i test sul campo.

Questo confronto illustra uno dei vantaggi più importanti della termografia SXGA. Gli ingegneri possono aumentare la copertura della scena senza sacrificare le prestazioni del bersaglio, oppure possono utilizzare i pixel aggiuntivi per migliorare la portata mantenendo campi visivi simili.

Per le applicazioni ISR, di sorveglianza perimetrale e anti-UAS, la possibilità di aumentare simultaneamente la copertura di gamme e scene può fornire un vantaggio operativo significativo.

Perché Pixel Pitch è importante

Uno degli sviluppi ingegneristici più significativi alla base delle moderne termocamere ad alta risoluzione è la riduzione del pixel pitch. Le dimensioni del sensore sono determinate da due variabili:

Dimensione sensore = Pixel passo × Numero di pixel

Storicamente, l'aumento della risoluzione richiedeva sensori più grandi. Un ipotetico sensore termico 1280 × 1024 che utilizza un passo pixel tradizionale di 12 μ m avrebbe circa quattro volte l'area del sensore di un sensore VGA e richiederebbe ottiche sostanzialmente più grandi.

Un'architettura SXGA da 8 μ m riduce l'area del rilevatore di circa il 55% rispetto a un'ipotetica implementazione SXGA da 12 μ m, contribuendo a limitare le sanzioni ottiche e meccaniche che altrimenti accompagnerebbero una risoluzione più elevata.

Tabella 4. Confronto dell'architettura del sensore per rilevatori VGA da 12 μ m e SXGA da 8 μ m

Anche se il sensore SXGA rimane più grande di un sensore VGA, è sostanzialmente più piccolo di quanto una tradizionale implementazione SXGA da 12 μ m richiederebbe. Questa riduzione è ciò che rende pratica la moderna termografia ad alta risoluzione per le piattaforme vincolate SWaP.

La risoluzione non è l'unico fattore che determina le prestazioni della termografia. La differenza di temperatura equivalente al rumore (NETD o NEdT), il rapporto segnale/rumore, la trasmissione ottica, il numero f dell'obiettivo, la qualità di calibrazione e l'elaborazione delle immagini influenzano la sensibilità e la fiducia di rilevamento. Pixel più piccoli possono migliorare il campionamento spaziale e consentire un IFOV più fine, ma i progettisti di sistema devono anche valutare se il sensore, le ottiche e la catena di elaborazione preservano un contrasto termico sufficiente per la missione prevista.

L'impatto sull'ottica

Il passo dei pixel influisce più delle dimensioni del sensore. Influenza direttamente il design ottico. L'obiettivo deve proiettare un'immagine sufficientemente grande da coprire il rilevatore. I sensori più grandi richiedono tipicamente elementi dell'obiettivo più grandi, più materiale ottico con un peso dell'obiettivo maggiore, che aumenta anche il volume meccanico.

Figura 3. Componenti del modulo termocamera LWIR

Storicamente, il passaggio dalla classe VGA a quella megapixel spesso comportava ottiche significativamente più grandi e supportava la struttura del carico utile. I pixel pitch più piccoli aiutano a ridurre queste sanzioni. Riducendo le dimensioni del rilevatore, la tecnologia da 8 μ m limita la crescita in:

• Diametro ottico
• Massa obiettivo
• Peso carico utile integrato
• Dimensioni pacchetto termico
• Complessità meccanica
• Requisiti di stabilizzazione

Il risultato pratico è che le termocamere ad alta risoluzione possono ora essere integrate in droni, dispositivi palmari, sistemi autonomi e cacciatori di missili senza richiedere la drastica crescita ottica che avrebbe accompagnato sensori ad alta risoluzione di prima generazione. La Figura 4 seguente include immagini in scala dei moduli termocamera Boson+ e Boson SX8, che sono simili per dimensioni rispetto ai modelli con lunghezza focale di 32 mm.

Figura 4. Confronto di dimensioni e peso dei moduli VGA e SXGA con lunghezza focale da 32 mm

Visione artificiale e sistemi autonomi

I vantaggi di una risoluzione più elevata vanno oltre l'osservazione umana. Poiché le termocamere fungono sempre più da input per algoritmi di machine learning, tracker di bersagli e sistemi autonomi, la quantità di informazioni disponibili per il software diventa sempre più importante.

La risoluzione SXGA nativa offre vantaggi per le applicazioni di machine learning che non possono essere completamente replicate attraverso l'upscaling dell'immagine o tecniche di super risoluzione. Le informazioni aggiuntive sulla scena possono migliorare:

• Rilevamento di oggetti
• Classificazione oggetti
• Tracciamento multi-obiettivo
• Fusione del sensore
• Navigazione autonoma
• Prestazioni IA Edge

Per i sistemi integrati, il passaggio da VGA a SXGA aumenta il numero di pixel per fotogramma di circa 4×, il che può influenzare l’elaborazione del segnale immagine, la codifica video, la larghezza di banda dell’interfaccia, la latenza, l’archiviazione e il carico di lavoro IA edge. Gli architetti di sistema devono valutare se il processore host, FPGA, GPU o acceleratore IA possono elaborare i dati aggiuntivi entro il budget di potenza, termico e latenza della piattaforma. In molte applicazioni per la difesa, il vantaggio del rilevamento ad alta risoluzione deve essere bilanciato con le risorse di calcolo disponibili, la capacità di datalink e i requisiti decisionali in tempo reale. I moduli termocamera integrati più recenti, tra cui Boson SX8, supportano sempre più questi flussi di lavoro attraverso interfacce digitali ad alta velocità come un’interfaccia MIPI CSI-2, una GUI disponibile e la compatibilità con il software intelligente integrato Prism™ OEM di Teledyne FLIR per l’IA ai margini.

Riepilogo tecnico: Risoluzione corrispondente alla missione

Il passaggio da VGA a SXGA non è semplicemente una questione di qualità dell'immagine. Cambia i compromessi tra campo visivo, risoluzione del bersaglio, dimensione ottica, requisiti di elaborazione e prestazioni di portata. La scelta ottimale dipende dai requisiti della missione e da come il sistema intende utilizzare i dati termici.

Tabella 5. compromessi a livello di sistema tra la termografia VGA e SXGA

Una risoluzione più elevata fornisce maggiori informazioni, ma tali informazioni devono essere elaborate, trasmesse, archiviate e utilizzate. La domanda tecnica non è se SXGA genera più dati, ma se l'applicazione beneficia di tali informazioni aggiuntive.

Applicazioni consigliate per la termografia VGA e SXGA

VGA rimane una soluzione eccellente quando la missione non richiede la massima risoluzione del bersaglio o capacità di identificazione a lungo raggio. In queste applicazioni, VGA fornisce spesso informazioni termiche sufficienti, riducendo al minimo i requisiti di elaborazione, la larghezza di banda, l’archiviazione e la complessità complessiva del sistema.

SXGA offre il massimo valore quando la risoluzione del bersaglio, la copertura della scena o la percezione della macchina influenzano direttamente il successo della missione. Queste applicazioni possono beneficiare di ulteriori informazioni spaziali, opzioni di campo visivo più ampie e ingressi di machine learning più ricchi, a condizione che il sistema possa supportare i requisiti di elaborazione, larghezza di banda, alimentazione, temperatura e costi associati.

Tabella 6. Esempi di applicazioni per termocamere VGA e SXGA

Considerazioni su NDAA e ITAR

Per i programmi OEM di difesa, governativi e internazionali, la risoluzione e le prestazioni sono solo una parte della decisione di progettazione del sistema. Anche la garanzia della catena di fornitura, l’idoneità all’approvvigionamento, l’esportabilità e il rischio di integrazione possono influenzare la selezione delle telecamere. I moduli termocamera conformi NDAA e privi di ITAR possono aiutare a semplificare l'approvvigionamento, supportare un più ampio accesso al programma e ridurre la complessità amministrativa per gli integratori di sistemi statunitensi e alleati. Per le piattaforme che richiedono un rilevamento LWIR ad alta risoluzione senza aggiungere vincoli di controllo delle esportazioni o di approvvigionamento, queste considerazioni possono essere un fattore significativo nella scelta di un’architettura SXGA.

Punti chiave e conclusioni

La scelta tra la termografia VGA e SXGA deve essere guidata dai requisiti della missione, dall'architettura del sistema e dai vincoli del programma. VGA rimane una scelta pratica quando costo, SWaP, carico di calcolo, larghezza di banda, semplicità di integrazione e compatibilità legacy sono considerazioni principali. SXGA è più convincente quando la missione beneficia di una discriminazione a lungo raggio, di una copertura della scena più ampia, di un potenziale DRI migliorato o di dati termici nativi più densi per il rilevamento automatizzato, il tracciamento e la percezione della macchina. I pixel più piccoli da 8 μ m aiutano a rendere più pratica la termografia ad alta risoluzione, riducendo le penalità ottiche e del sensore tradizionalmente associate ai sensori di formato più grande, consentendo la progettazione di moduli termocamera SXGA ottimizzati per SWaP.

Per i progettisti di sistemi, la domanda chiave è se l'applicazione può utilizzare efficacemente le informazioni aggiuntive fornite da SXGA rimanendo entro i limiti della piattaforma per ottiche, elaborazione, larghezza di banda, alimentazione, gestione termica, costi, approvvigionamento ed esportabilità. Laddove tali compromessi siano in linea con la missione, SXGA offre vantaggi tecnici significativi rispetto alle architetture VGA tradizionali. Per saperne di più sul nuovo SXGA Boson SX8 ottimizzato per SWaP, conforme a NDAA e senza ITAR, visitate oem.flir.com/bosonsx8.