Imagens Térmicas VGA vs. SXGA: O que significa uma resolução mais alta para alcance, óptica e IA

Resumo

Este artigo examina as implicações no nível do sistema de mudar da imagem de infravermelho de onda longa (LWIR) de matriz de gráficos de vídeo (VGA, 640 × 512) para matriz de gráficos superestendida (SXGA, 1280 × 1024) para aplicações de detecção de defesa, autônomas e integradas. Ele compara como uma resolução mais alta do detector afeta pixels no alvo; campo de visão instantâneo (IFOV); desempenho de detecção, reconhecimento e identificação (DRI); compensações do campo de visão; design óptico; carga de processamento; e desempenho de visão de máquina. O objetivo é enquadrar a resolução como um elemento de um espaço comercial de engenharia mais amplo que também inclui sensibilidade, taxa de transferência óptica, largura de banda, latência, energia, gerenciamento térmico, requisitos de aquisição, exportabilidade e necessidades de desempenho específicas da missão.

Introdução e histórico

Por mais de uma década, os geradores de imagens térmicas com resolução VGA têm sido o padrão para muitas aplicações de defesa, industriais e não tripuladas porque fornecem um equilíbrio eficaz de desempenho, custo do sistema e tamanho, peso e potência (SWaP). À medida que os requisitos de autonomia, visão de máquina e detecção de longo alcance continuam a se expandir, os arquitetos de sistemas estão avaliando os benefícios de mudar para sensores térmicos de alta resolução.

A transição de VGA para SXGA é mais do que uma simples melhoria na qualidade da imagem. Com quatro vezes a contagem de pixels, os geradores de imagens SXGA alteram fundamentalmente a relação entre a resolução do alvo, o campo de visão, o design óptico e a percepção da máquina. Os módulos SXGA LWIR mais recentes, como o Boson® SX8 da Teledyne FLIR OEM, ilustram como as arquiteturas de detectores de 8 mícrons (μ m) podem aumentar a resolução, limitando o tamanho e as penalidades ópticas tradicionalmente associadas a sensores térmicos de formato maior. Essas compensações são especialmente importantes para sistemas militares e aeroespaciais, onde o desempenho do sensor deve ser equilibrado em relação ao tamanho da carga útil, processamento integrado, capacidade de datalink, exportabilidade e requisitos de aquisição em conformidade com os Regulamentos Internacionais de Tráfego de Armas (ITAR) e a Lei Nacional de Autorização de Defesa (NDAA). O Boson®+ fornece um ponto de referência VGA útil para comparar como a resolução, o passo de pixel, o campo de visão, as restrições de integração no nível do sistema e os requisitos do programa afetam o desempenho do mundo real.

Figura 1. Exemplo de VGA HFOV de 18° (esquerda) vs. SXGA (direita) com Picture-in-Picture de zoom de 3×

Entendendo a diferença de resolução

A diferença mais óbvia entre VGA e SXGA é a contagem de pixels. Um sensor SXGA captura quatro vezes mais amostras térmicas por quadro do que um sensor VGA. Esses pixels adicionais podem ser usados de duas maneiras: aumentar os detalhes do alvo no mesmo campo de visão ou aumentar o campo de visão, mantendo os detalhes do alvo. A maioria dos sistemas do mundo real usa uma combinação de ambos.

Tabela 1. Comparação de Resolução VGA e SXGA

A importância da resolução mais alta não é simplesmente que a imagem pareça mais nítida. As amostras térmicas adicionais fornecem mais informações para operadores humanos, rastreadores de alvos, sistemas autônomos e algoritmos de aprendizado de máquina.

Pixels no desempenho alvo e DRI

Detecção, reconhecimento e identificação (DRI) descrevem níveis crescentes de desempenho de tarefas em um sistema de imagem. Detecção significa determinar que um objeto está presente; reconhecimento significa classificar o tipo de objeto, como uma pessoa, veículo ou drone; e identificação significa distinguir o objeto, configuração ou ameaça específica. O desempenho de DRI geralmente melhora à medida que mais amostras de imagem resolvidas abrangem o alvo, mas os limites exatos dependem do tamanho do alvo, contraste, atmosfera, óptica, sensibilidade do sensor, processamento de imagem, condições de exibição, desempenho do observador ou algoritmo e critérios de missão.

Os modelos estilo critérios de Johnson são frequentemente usados para estimar o desempenho de DRI relacionando a dificuldade da tarefa alvo à amostragem espacial em toda a dimensão crítica do alvo, normalmente definida como a largura, altura ou tamanho da característica relevante usada para a tarefa de detecção. Em termos simplificados de pixels no alvo, a detecção pode exigir apenas um pequeno número de amostras resolvidas, o reconhecimento requer mais e a identificação requer detalhes ainda mais precisos.

Esses valores devem ser tratados como aproximações de planejamento em vez de regras fixas. O desempenho operacional deve ser validado por meio de modelagem específica da missão e, sempre que possível, testes de campo.

Uma métrica relacionada é o campo de visão instantâneo (IFOV), que descreve a parte angular da cena representada por um único pixel. Um IFOV mais fino significa que cada pixel cobre uma área menor em uma determinada faixa, permitindo mais pixels no alvo e detalhes espaciais aprimorados para detecção, reconhecimento e identificação.

Quando dois sensores observam a mesma cena com o mesmo campo de visão horizontal (HFOV), o sensor de resolução mais alta coloca mais pixels no alvo, melhorando os detalhes espaciais e reduzindo a ambiguidade.

Tabela 2. Comparação do desempenho relacionado a DRI VGA e SXGA com o mesmo HFOV

Figura 2. Ilustração da área de imagem e faixa de detecção VGA vs. SXGA

Comparações representativas de mesma lente usando uma distância focal de 32 mm mostram como uma configuração SXGA pode fornecer um HFOV mais amplo, aumentando a cobertura relativa da cena e a faixa de detecção modelada em comparação com uma configuração VGA. Os valores na Tabela 3 ilustram compensações relativas no nível do sistema sob suposições equivalentes e não se destinam a garantir o desempenho em todas as condições operacionais.

Tabela 3. Comparação do comprimento focal da mesma lente de Boson+ e Boson SX8

Os valores da faixa de detecção e a cobertura relativa da cena devem ser interpretados no contexto das suposições subjacentes, incluindo tamanho do alvo, contraste de temperatura alvo-para-fundo, transmissão atmosférica, transmissão óptica, número f da lente, sensibilidade do sensor, processamento de imagem, características de exibição e critérios de probabilidade selecionados. Para sistemas operacionais, as estimativas de DRI devem ser confirmadas por meio de modelagem específica da missão e, sempre que possível, testes de campo.

Esta comparação ilustra um dos benefícios mais importantes das imagens térmicas SXGA. Os engenheiros podem aumentar a cobertura da cena sem sacrificar o desempenho do alvo ou podem usar os pixels adicionais para melhorar o alcance, mantendo campos de visão semelhantes.

Para aplicações de ISR, vigilância de perímetro e contra drones, a capacidade de aumentar simultaneamente a cobertura de alcance e cena pode fornecer uma vantagem operacional significativa.

Por que o tom de pixel é importante

Um dos desenvolvimentos de engenharia mais significativos por trás das modernas câmeras termográficas de alta resolução é a redução no passo de pixel. As dimensões do sensor são determinadas por duas variáveis:

Dimensão do Sensor = Passo de Pixel × Número de Pixels

Historicamente, o aumento da resolução exigia sensores maiores. Um detector térmico hipotético de 1280 × 1024 usando um passo de pixel tradicional de 12 μ m teria aproximadamente quatro vezes a área do detector de um sensor VGA e exigiria óptica substancialmente maior.

Uma arquitetura SXGA de 8 μ m reduz a área do detector em aproximadamente 55% em relação a uma implementação SXGA hipotética de 12 μ m, ajudando a limitar as penalidades de tamanho óptico e mecânico que, de outra forma, acompanhariam uma resolução mais alta.

Tabela 4. Comparação da arquitetura do sensor para detectores VGA de 12 μ m e SXGA de 8 μ m

Embora o detector SXGA permaneça maior do que um detector VGA, ele é substancialmente menor do que uma implementação SXGA tradicional de 12 μm exigiria. Essa redução é o que torna as imagens térmicas modernas de alta resolução práticas para plataformas restritas a SWaP.

A resolução não é o único fator determinante do desempenho das imagens térmicas. A diferença de temperatura equivalente ao ruído (NETD ou NEdT), a relação sinal-ruído, a transmissão óptica, o número f da lente, a qualidade da calibração e o processamento de imagem afetam a sensibilidade e a confiança da detecção. Pixels menores podem melhorar a amostragem espacial e permitir IFOV mais fino, mas os designers de sistemas também devem avaliar se o detector, a óptica e a cadeia de processamento preservam contraste térmico suficiente para a missão pretendida.

O impacto na óptica

O passo de pixel afeta mais do que o tamanho do detector. Ele influencia diretamente o design óptico. A lente deve projetar uma imagem grande o suficiente para cobrir o detector. Detectores maiores normalmente exigem elementos de lente maiores, mais material óptico com maior peso da lente, que também geram maior volume mecânico.

Figura 3. Componentes do módulo de câmera térmica LWIR

Historicamente, mudar de VGA para imagens térmicas de classe megapixel muitas vezes resultava em óptica significativamente maior e suporte à estrutura de carga útil. Menores tons de pixel ajudam a reduzir essas penalidades. Ao reduzir as dimensões do detector, a tecnologia de 8 μ m limita o crescimento em:

• Diâmetro óptico
• Massa da Lente
• Peso integrado da carga útil
• Tamanho do pacote térmico
• Complexidade mecânica
• Requisitos de Estabilização

O resultado prático é que os geradores de imagens térmicas de alta resolução agora podem ser integrados a drones, dispositivos portáteis, sistemas autônomos e caçadores de mísseis sem exigir o crescimento óptico dramático que teria acompanhado os sensores de alta resolução de geração anterior. A Figura 4 abaixo inclui imagens em escala dos módulos de câmera Boson+ e Boson SX8, que são semelhantes em tamanho ao comparar os modelos de distância focal de 32 mm.

Figura 4. Comparação de tamanho e peso do módulo VGA e SXGA de comprimento focal de 32 mm

Sistemas autônomos e de visão de máquina

Os benefícios da resolução mais alta vão além da observação humana. À medida que as câmeras termográficas servem cada vez mais como entradas para algoritmos de aprendizado de máquina, rastreadores de alvo e sistemas autônomos, a quantidade de informações disponíveis para o software se torna cada vez mais importante.

A resolução SXGA nativa oferece vantagens para aplicativos de aprendizado de máquina que não podem ser totalmente replicados por meio de técnicas de upscaling de imagem ou super-resolução. As informações adicionais da cena podem melhorar:

• Detecção de objetos
• Classificação de objetos
• Rastreamento de vários alvos
• Fusão de sensores
• Navegação Autônoma
• Desempenho de IA de Borda

Para sistemas integrados, a mudança de VGA para SXGA aumenta o número de pixels por quadro em aproximadamente 4×, o que pode afetar o processamento de sinais de imagem, codificação de vídeo, largura de banda da interface, latência, armazenamento e carga de trabalho de IA de borda. Os arquitetos de sistema devem avaliar se o processador host, FPGA, GPU ou acelerador de IA podem processar os dados adicionais dentro do orçamento de energia, térmica e latência da plataforma. Em muitas aplicações de defesa, o benefício da detecção de alta resolução deve ser equilibrado em relação aos recursos de computação disponíveis, capacidade de datalink e requisitos de decisão em tempo real. Os módulos de câmera termográfica incorporados mais recentes, incluindo o Boson SX8, suportam cada vez mais esses fluxos de trabalho por meio de interfaces digitais de alta velocidade, como uma interface MIPI CSI-2, uma GUI disponível e compatibilidade com o software inteligente embarcado Prism (prisma inteligente do OEM da Teledyne FLIR) para IA na borda.

Resumo de engenharia: Resolução correspondente à missão

A transição de VGA para SXGA não é simplesmente uma questão de qualidade de imagem. Ela muda as compensações entre o campo de visão, a resolução do alvo, o tamanho óptico, os requisitos de processamento e o desempenho da faixa. A escolha ideal depende dos requisitos da missão e de como o sistema pretende usar os dados térmicos.

Tabela 5. Compensações no nível do sistema entre imagens térmicas VGA e SXGA

A resolução mais alta fornece mais informações, mas essas informações devem ser processadas, transmitidas, armazenadas e utilizadas. A questão da engenharia não é se o SXGA gera mais dados, mas se a aplicação se beneficia dessas informações adicionais.

Aplicações recomendadas para imagens térmicas VGA e SXGA

A VGA continua sendo uma excelente solução quando a missão não requer resolução máxima do alvo ou capacidade de identificação de longo alcance. Nessas aplicações, a VGA geralmente fornece informações térmicas suficientes, minimizando os requisitos de processamento, largura de banda, armazenamento e complexidade geral do sistema.

O SXGA oferece o maior valor quando a resolução do alvo, a cobertura da cena ou a percepção da máquina influenciam diretamente o sucesso da missão. Essas aplicações podem se beneficiar de informações espaciais adicionais, opções de campo de visão mais amplas e entradas de aprendizado de máquina mais ricas, desde que o sistema possa suportar os requisitos associados de processamento, largura de banda, energia, temperatura e custo.

Tabela 6. Exemplos de aplicações para câmeras termográficas VGA e SXGA

Considerações sobre NDAA e ITAR

Para programas OEM de defesa, governamentais e internacionais, a resolução e o desempenho são apenas parte da decisão de projeto do sistema. Garantia da cadeia de suprimentos, elegibilidade para aquisição, exportabilidade e risco de integração também podem influenciar a seleção da câmera. Os módulos de câmera termográfica em conformidade com NDAA e sem ITAR podem ajudar a simplificar o fornecimento, oferecer suporte a um acesso mais amplo ao programa e reduzir a complexidade administrativa para integradores de sistemas dos EUA e aliados. Para plataformas que exigem detecção LWIR de alta resolução sem adicionar restrições de controle de exportação ou fornecimento, essas considerações podem ser um fator significativo na seleção de uma arquitetura SXGA.

Principais conclusões

A escolha entre as imagens térmicas VGA e SXGA deve ser orientada pelos requisitos da missão, arquitetura do sistema e restrições do programa. A VGA continua sendo uma escolha prática quando custo, SWaP, carga de computação, largura de banda, simplicidade de integração e compatibilidade legada são considerações principais. A SXGA é mais atraente quando a missão se beneficia de discriminação de longo alcance, cobertura de cena mais ampla, potencial de DRI aprimorado ou dados térmicos nativos mais densos para detecção automatizada, rastreamento e percepção da máquina. Pixels menores de 8 μ m ajudam a tornar as imagens térmicas de maior resolução mais práticas, reduzindo o detector e as penalidades ópticas tradicionalmente associadas a sensores de formato maior, permitindo designs de módulo de câmera térmica SXGA otimizados para SWaP.

Para os projetistas de sistemas, a questão principal é se o aplicativo pode usar efetivamente as informações adicionais fornecidas pelo SXGA, mantendo-se dentro das restrições da plataforma para óptica, processamento, largura de banda, energia, gerenciamento térmico, custo, fornecimento e exportabilidade. Onde essas compensações se alinham com a missão, a SXGA oferece vantagens técnicas significativas em relação às arquiteturas VGA tradicionais. Para saber mais sobre o novo SXGA Boson SX8 otimizado para SWaP, compatível com NDAA e sem ITAR, acesse oem.flir.com/bosonsx8.