Imágenes térmicas VGA frente a SXGA: Qué significa una resolución más alta para el rango, la óptica y la IA

Resumen

Este artículo examina las implicaciones a nivel de sistema de pasar de la imagen de matriz de gráficos de vídeo (VGA, 640 × 512) a la de matriz de gráficos superampliada (SXGA, 1280 × 1024) de infrarrojos de onda larga (LWIR) para aplicaciones de detección de defensa, autónomas e integradas. Compara cómo afecta una mayor resolución del detector a los píxeles del objetivo; campo de visión instantáneo (IFOV); rendimiento de detección, reconocimiento e identificación (DRI); compensaciones del campo de visión; diseño óptico; carga de procesamiento y rendimiento de visión artificial. El objetivo es encuadrar la resolución como un elemento de un espacio comercial de ingeniería más amplio que también incluya sensibilidad, rendimiento óptico, ancho de banda, latencia, energía, gestión térmica, requisitos de adquisición, exportabilidad y necesidades de rendimiento específicas de la misión.

Introducción y antecedentes

Durante más de una década, los generadores de imágenes térmicas con resolución VGA han sido el estándar para muchas aplicaciones de defensa, industriales y no tripuladas porque proporcionan un equilibrio efectivo de rendimiento, coste del sistema y tamaño, peso y potencia (SWaP). A medida que los requisitos de autonomía, visión artificial y detección de largo alcance continúan expandiéndose, los arquitectos de sistemas están evaluando los beneficios de pasar a sensores térmicos de alta resolución.

La transición de VGA a SXGA es más que una simple mejora de la calidad de imagen. Con cuatro veces el recuento de píxeles, los generadores de imágenes SXGA cambian fundamentalmente la relación entre la resolución del objetivo, el campo de visión, el diseño óptico y la percepción de la máquina. Los módulos SXGA LWIR más recientes, como Boson® SX8 de Teledyne FLIR OEM, ilustran cómo las arquitecturas de detectores de 8 micras (μ m) pueden aumentar la resolución al tiempo que limitan las sanciones de tamaño y óptica tradicionalmente asociadas con los sensores térmicos de mayor formato. Estas compensaciones son especialmente importantes para los sistemas militares y aeroespaciales donde el rendimiento del sensor debe equilibrarse con el tamaño de la carga útil, el procesamiento a bordo, la capacidad del enlace de datos, la exportabilidad y los requisitos de adquisición de conformidad con el Reglamento Internacional de Tráfico de Armas (ITAR) y la Ley de Autorización de Defensa Nacional (NDAA). Boson®+ proporciona un punto de referencia VGA útil para comparar cómo la resolución, el paso de píxel, el campo de visión, las restricciones de integración a nivel de sistema y los requisitos del programa afectan al rendimiento del mundo real.

Figura 1. Ejemplo de HFOV VGA de 18° (izquierda) frente a SXGA (derecha) con imagen en imagen con zoom de 3 aumentos

Comprensión de la diferencia de resolución

La diferencia más obvia entre VGA y SXGA es el recuento de píxeles. Un sensor SXGA captura cuatro veces más muestras térmicas por fotograma que un sensor VGA. Estos píxeles adicionales se pueden utilizar de dos formas: aumentando el detalle del objetivo en el mismo campo de visión o aumentando el campo de visión mientras se mantiene el detalle del objetivo. La mayoría de los sistemas del mundo real utilizan una combinación de ambos.

Tabla 1. Comparación de resolución VGA y SXGA

La importancia de una mayor resolución no es simplemente que la imagen parezca más nítida. Las muestras térmicas adicionales proporcionan más información a operadores humanos, rastreadores de objetivos, sistemas autónomos y algoritmos de aprendizaje automático.

Píxeles en el objetivo y rendimiento de HRD

La detección, el reconocimiento y la identificación (DRI) describen niveles cada vez mayores de rendimiento de tareas en un sistema de imágenes. Detección significa determinar que un objeto está presente; reconocimiento significa clasificar el tipo de objeto, como una persona, vehículo o UAS; e identificación significa distinguir el objeto, la configuración o la amenaza específicos. El rendimiento del DRI generalmente mejora a medida que las muestras de imagen más resueltas abarcan el objetivo, pero los umbrales exactos dependen del tamaño del objetivo, el contraste, la atmósfera, la óptica, la sensibilidad del sensor, el procesamiento de imágenes, las condiciones de visualización, el rendimiento del observador o algoritmo y los criterios de misión.

Los modelos de estilo Johnson-criteria se utilizan a menudo para estimar el rendimiento del DRI relacionando la dificultad de la tarea objetivo con el muestreo espacial en toda la dimensión crítica del objetivo, normalmente definido como el ancho, la altura o el tamaño de la característica relevante utilizada para la tarea de detección. En términos simplificados de píxeles en el objetivo, la detección puede requerir solo un pequeño número de muestras resueltas, el reconocimiento requiere más y la identificación requiere aún más detalles.

Estos valores deben tratarse como aproximaciones de planificación en lugar de reglas fijas. El rendimiento operativo debe validarse mediante modelos específicos de la misión y, cuando sea posible, pruebas de campo.

Un indicador relacionado es el campo de visión instantáneo (IFOV), que describe la parte angular de la escena representada por un solo píxel. Un IFOV más fino significa que cada píxel cubre un área más pequeña en un rango determinado, lo que permite más píxeles en el objetivo y un detalle espacial mejorado para la detección, el reconocimiento y la identificación.

Cuando dos sensores observan la misma escena con el mismo campo de visión horizontal (HFOV), el sensor de alta resolución coloca más píxeles en el objetivo, lo que mejora el detalle espacial y reduce la ambigüedad.

Tabla 2. Comparación del mismo campo de visión del rendimiento relacionado con VGA y SXGA DRI

Figura 2. Ilustración de área de imagen y rango de detección VGA frente a SXGA

Las comparaciones representativas de la misma lente utilizando una distancia focal de 32 mm muestran cómo una configuración SXGA puede proporcionar un campo de visión más amplio al tiempo que aumenta la cobertura relativa de la escena y el rango de detección modelado en comparación con una configuración VGA. Los valores de la Tabla 3 ilustran las compensaciones relativas a nivel de sistema bajo suposiciones equivalentes y no están destinados a garantizar el rendimiento en todas las condiciones de funcionamiento.

Tabla 3. Comparación de longitud focal de la misma lente de Boson+ y Boson SX8

Los valores del rango de detección y la cobertura relativa de la escena deben interpretarse en el contexto de los supuestos subyacentes, incluidos el tamaño del objetivo, el contraste de temperatura de objetivo a fondo, la transmisión atmosférica, la transmisión óptica, el número f de la lente, la sensibilidad del sensor, el procesamiento de imágenes, las características de visualización y los criterios de probabilidad seleccionados. Para los sistemas operativos, las estimaciones de HRD deben confirmarse mediante modelos específicos de la misión y, cuando sea posible, pruebas de campo.

Esta comparación ilustra una de las ventajas más importantes de la termografía SXGA. Los ingenieros pueden aumentar la cobertura de la escena sin sacrificar el rendimiento del objetivo, o pueden utilizar los píxeles adicionales para mejorar el alcance mientras mantienen campos de visión similares.

Para aplicaciones ISR, de vigilancia perimetral y contra UAS, la capacidad de aumentar simultáneamente el alcance y la cobertura de la escena puede proporcionar una ventaja operativa significativa.

Por qué es importante el paso de píxeles

Uno de los desarrollos de ingeniería más significativos detrás de las cámaras térmicas modernas de alta resolución es la reducción del paso de píxeles. Las dimensiones del sensor se determinan mediante dos variables:

Dimensiones del sensor = Paso de píxeles × Número de píxeles

Históricamente, aumentar la resolución requería sensores más grandes. Un detector térmico hipotético de 1280 × 1024 que utiliza un paso de píxel tradicional de 12 μ m tendría aproximadamente cuatro veces el área del detector de un sensor VGA y requeriría una óptica sustancialmente mayor.

Una arquitectura SXGA de 8 μ m reduce el área del detector en aproximadamente un 55 % en relación con una implementación hipotética de SXGA de 12 μ m, lo que ayuda a limitar las sanciones de tamaño óptico y mecánico que de otro modo acompañarían a una resolución más alta.

Tabla 4. Comparación de arquitectura de sensores para detectores VGA de 12 μ m y SXGA de 8 μ m

Aunque el detector SXGA sigue siendo más grande que un detector VGA, es sustancialmente más pequeño de lo que requeriría una implementación SXGA tradicional de 12 μ m. Esta reducción es lo que hace que la termografía moderna de alta resolución sea práctica para plataformas con restricciones SWaP.

La resolución no es el único impulsor del rendimiento de la termografía. La diferencia de temperatura equivalente al ruido (NETD o NEdT), la relación señal-ruido, la transmisión óptica, el número f de la lente, la calidad de calibración y el procesamiento de imágenes afectan a la sensibilidad y la confianza en la detección. Los píxeles más pequeños pueden mejorar el muestreo espacial y permitir un IFOV más fino, pero los diseñadores de sistemas también deben evaluar si el detector, la óptica y la cadena de procesamiento conservan suficiente contraste térmico para la misión prevista.

El impacto en la óptica

El paso de píxel afecta más que el tamaño del detector. Influye directamente en el diseño óptico. La lente debe proyectar una imagen lo suficientemente grande como para cubrir el detector. Los detectores más grandes suelen requerir elementos de lente más grandes, más material óptico con mayor peso de lente, que también impulsan un mayor volumen mecánico.

Figura 3. Componentes del módulo de cámara térmica LWIR

Históricamente, el paso de la termografía de clase VGA a la de megapíxeles a menudo daba como resultado una óptica significativamente mayor y una estructura de carga útil compatible. Los pasos de píxel más pequeños ayudan a reducir esas sanciones. Al reducir las dimensiones del detector, la tecnología de 8 μ m limita el crecimiento en:

• Diámetro óptico
• Masa de la lente
• Peso de carga útil integrado
• Tamaño del paquete térmico
• Complejidad mecánica
• Requisitos de estabilización

El resultado práctico es que los generadores de imágenes térmicas de mayor resolución ahora se pueden integrar en drones, dispositivos portátiles, sistemas autónomos y buscadores de misiles sin requerir el drástico crecimiento óptico que habría acompañado a los sensores de alta resolución de la generación anterior. La Figura 4 a continuación incluye imágenes a escala de los módulos de cámara Boson+ y Boson SX8, que son de tamaño similar al comparar los modelos de distancia focal de 32 mm.

Figura 4. Comparación de tamaño y peso de los módulos VGA y SXGA de longitud focal de 32 mm

Visión artificial y sistemas autónomos

Los beneficios de una resolución más alta van más allá de la observación humana. A medida que las cámaras térmicas sirven cada vez más como entradas para algoritmos de aprendizaje automático, rastreadores de objetivos y sistemas autónomos, la cantidad de información disponible para el software es cada vez más importante.

La resolución SXGA nativa proporciona ventajas para aplicaciones de aprendizaje automático que no se pueden replicar completamente a través de técnicas de escalado de imágenes o superresolución. La información adicional de la escena puede mejorar:

• Detección de objetos
• Clasificación de objetos
• Seguimiento multiobjetivo
• Fusión del sensor
• Navegación autónoma
• Rendimiento de IA perimetral

Para los sistemas integrados, el cambio de VGA a SXGA aumenta el número de píxeles por fotograma en aproximadamente 4×, lo que puede afectar al procesamiento de la señal de imagen, la codificación de vídeo, el ancho de banda de la interfaz, la latencia, el almacenamiento y la carga de trabajo de IA perimetral. Los arquitectos de sistemas deben evaluar si el procesador anfitrión, FPGA, GPU o acelerador de IA pueden procesar los datos adicionales dentro del presupuesto de potencia, térmica y latencia de la plataforma. En muchas aplicaciones de defensa, el beneficio de la detección de alta resolución debe equilibrarse con los recursos informáticos disponibles, la capacidad del enlace de datos y los requisitos de decisión en tiempo real. Los módulos de cámara térmica integrados más recientes, incluida la Boson SX8, admiten cada vez más estos flujos de trabajo a través de interfaces digitales de alta velocidad como una interfaz MIPI CSI-2, una interfaz gráfica de usuario disponible y compatibilidad con el software integrado inteligente Prism™ de Teledyne FLIR OEM para IA en el perímetro.

Resumen de ingeniería: Relacionar la resolución con la misión

La transición de VGA a SXGA no es solo una cuestión de calidad de imagen. Cambia las compensaciones entre el campo de visión, la resolución del objetivo, el tamaño óptico, los requisitos de procesamiento y el rendimiento de rango. La opción óptima depende de los requisitos de la misión y de cómo el sistema pretende utilizar los datos térmicos.

Tabla 5. Repartos a nivel de sistema entre la termografía VGA y SXGA

Una resolución más alta proporciona más información, pero esa información debe procesarse, transmitirse, almacenarse y utilizarse. La cuestión de ingeniería no es si SXGA genera más datos, sino si la aplicación se beneficia de esa información adicional.

Aplicaciones recomendadas para la termografía VGA y SXGA

VGA sigue siendo una solución excelente cuando la misión no requiere una resolución máxima del objetivo o capacidad de identificación de largo alcance. En estas aplicaciones, VGA a menudo proporciona suficiente información térmica al tiempo que minimiza los requisitos de procesamiento, el ancho de banda, el almacenamiento y la complejidad general del sistema.

SXGA proporciona el mayor valor cuando la resolución del objetivo, la cobertura de la escena o la percepción de la máquina influyen directamente en el éxito de la misión. Estas aplicaciones pueden beneficiarse de información espacial adicional, opciones de campo de visión más amplio y entradas de aprendizaje automático más ricas, siempre que el sistema pueda admitir los requisitos asociados de procesamiento, ancho de banda, potencia, térmico y coste.

Tabla 6. Ejemplos de aplicaciones para cámaras térmicas VGA y SXGA

Consideraciones de NDAA e ITAR

Para programas de OEM internacionales, gubernamentales y de defensa, la resolución y el rendimiento son solo parte de la decisión de diseño del sistema. La garantía de la cadena de suministro, la elegibilidad de adquisición, la exportabilidad y el riesgo de integración también pueden influir en la selección de la cámara. Los módulos de cámara térmica compatibles con NDAA y sin ITAR pueden ayudar a simplificar el abastecimiento, admitir un acceso más amplio al programa y reducir la complejidad administrativa para integradores de sistemas estadounidenses y aliados. Para plataformas que requieren detección LWIR de alta resolución sin añadir restricciones de control de exportación o abastecimiento, estas consideraciones pueden ser un factor significativo para seleccionar una arquitectura SXGA.

Conclusiones y conclusiones clave

La elección entre la termografía VGA y SXGA debe basarse en los requisitos de la misión, la arquitectura del sistema y las restricciones del programa. VGA sigue siendo una opción práctica cuando el coste, SWaP, la carga de computación, el ancho de banda, la simplicidad de integración y la compatibilidad heredada son consideraciones principales. SXGA es más convincente cuando la misión se beneficia de la discriminación de largo alcance, una cobertura de escena más amplia, un mejor potencial de HRD o datos térmicos nativos más densos para la detección automatizada, el seguimiento y la percepción de la máquina. Los píxeles más pequeños de 8 μ m ayudan a hacer que la termografía de mayor resolución sea más práctica al reducir el detector y las sanciones ópticas tradicionalmente asociadas con sensores de mayor formato, lo que permite diseños de módulos de cámara térmica SXGA optimizados para SWaP.

Para los diseñadores de sistemas, la pregunta clave es si la aplicación puede utilizar eficazmente la información adicional proporcionada por SXGA mientras se mantiene dentro de las limitaciones de la plataforma para óptica, procesamiento, ancho de banda, energía, gestión térmica, coste, abastecimiento y exportabilidad. Donde esas compensaciones se alinean con la misión, SXGA ofrece ventajas técnicas significativas sobre las arquitecturas VGA tradicionales. Para obtener más información sobre el nuevo SXGA Boson SX8 optimizado para SWaP, compatible con NDAA y sin ITAR, visite oem.flir.com/bosonsx8.