VGA vs. SXGA Wärmebildgebung: Was eine höhere Auflösung für Reichweite, Optik und KI bedeutet

Abstract

Dieser Artikel untersucht die Auswirkungen der Umstellung von Video Graphics Array (VGA, 640 × 512) auf Super Extended Graphics Array (SXGA, 1280 × 1024) Langwellen-Infrarot (LWIR)-Bildgebung für Verteidigungs-, autonome und eingebettete Erfassungsanwendungen auf Systemebene. Sie vergleicht, wie sich eine höhere Detektorauflösung auf Pixel auf dem Ziel auswirkt; Instant-Sichtfeld (IFOV); Erkennungs-, Erkennungs- und Identifizierungsleistung (DRI); Kompromisse beim Sichtfeld; optisches Design; Verarbeitungslast und Maschinensichtleistung. Ziel ist es, die Auflösung als ein Element eines breiteren technischen Handelsraums zu betrachten, der auch Empfindlichkeit, optischen Durchsatz, Bandbreite, Latenz, Leistung, Wärmemanagement, Beschaffungsanforderungen, Exportierbarkeit und missionsspezifische Leistungsanforderungen umfasst.

Einführung und Hintergrund

Seit mehr als einem Jahrzehnt sind Wärmebildkameras mit VGA-Auflösung der Standard für viele Verteidigungs-, Industrie- und unbefestigte Anwendungen, da sie ein effektives Gleichgewicht zwischen Leistung, Systemkosten und Größe, Gewicht und Leistung (SWaP) bieten. Da die Anforderungen an Autonomie, maschinelles Sehen und Fernbereichserfassung weiter zunehmen, bewerten Systemarchitekten die Vorteile der Umstellung auf höher auflösende Temperatursensoren.

Der Übergang von VGA zu SXGA ist mehr als nur eine einfache Verbesserung der Bildqualität. Mit der vierfachen Pixelzahl verändern SXGA-Imager grundlegend die Beziehung zwischen Zielauflösung, Sichtfeld, optischem Design und Maschinenwahrnehmung. Neuere SXGA LWIR-Module, wie Boson® SX8 von Teledyne FLIR OEM, veranschaulichen, wie 8-Mikron (μ m) Detektorarchitekturen die Auflösung erhöhen und gleichzeitig die Größe und die Optikeinbußen begrenzen können, die traditionell mit größeren Temperatursensoren verbunden sind. Diese Kompromisse sind besonders wichtig für Militär- und Luft- und Raumfahrtsysteme, bei denen die Sensorleistung in Übereinstimmung mit den International Traffic in Arms Regulations (ITAR) und dem National Defense Authorization Act (NDAA) gegen die Nutzlastgröße, die Onboard-Verarbeitung, die Datenverbindungskapazität, die Exportfähigkeit und die Beschaffungsanforderungen abgewogen werden muss. Boson®+ bietet einen nützlichen VGA-Referenzpunkt zum Vergleich, wie Auflösung, Pixelabstand, Sichtfeld, Integrationsbeschränkungen auf Systemebene und Programmanforderungen die reale Leistung beeinflussen.

Abbildung 1. Beispiel 18° HFOV VGA (links) vs. SXGA (rechts) mit 3× Zoom Picture-in-Picture

Verständnis des Lösungsunterschieds

Der offensichtlichste Unterschied zwischen VGA und SXGA ist die Pixelzahl. Ein SXGA-Sensor erfasst viermal mehr thermische Proben pro Rahmen als ein VGA-Sensor. Diese zusätzlichen Pixel können auf zwei Arten verwendet werden: Erhöhen der Zieldetails im gleichen Sichtfeld oder Erhöhen des Sichtfelds unter Beibehaltung der Zieldetails. Die meisten realen Systeme verwenden eine Kombination aus beidem.

Tabelle 1. Vergleich der VGA- und SXGA-Auflösung

Die Bedeutung einer höheren Auflösung liegt nicht nur darin, dass das Bild schärfer erscheint. Die zusätzlichen thermischen Proben liefern mehr Informationen für menschliche Bediener, Zieltracker, autonome Systeme und Maschinenlernalgorithmen.

Pixel auf Ziel- und DRI-Leistung

Detektion, Erkennung und Identifizierung (DRI) beschreiben ein zunehmendes Maß an Aufgabenleistung in einem Bildgebungssystem. Erkennung bedeutet das Bestimmen, dass ein Objekt vorhanden ist; Erkennung bedeutet das Klassifizieren des Objekttyps, wie beispielsweise eine Person, ein Fahrzeug oder ein UAS; und Identifizierung bedeutet das Unterscheiden des spezifischen Objekts, der Konfiguration oder der Bedrohung. Die DRI-Leistung verbessert sich im Allgemeinen, da sich mehr aufgelöste Bildproben über das Ziel erstrecken, aber genaue Schwellenwerte hängen von der Zielgröße, dem Kontrast, der Atmosphäre, der Optik, der Sensorempfindlichkeit, der Bildverarbeitung, den Anzeigebedingungen, der Leistung des Beobachters oder Algorithmus und den Einsatzkriterien ab.

Johnson-Kriterien-ähnliche Modelle werden häufig verwendet, um die DRI-Leistung zu schätzen, indem die Zielaufgabenschwierigkeiten mit der räumlichen Abtastung über die kritische Dimension des Ziels in Verbindung gebracht werden, typischerweise definiert als die relevante Breite, Höhe oder Merkmalsgröße, die für die Erkennungsaufgabe verwendet wird. In vereinfachten Pixel-on-Target-Begriffen erfordert die Erkennung möglicherweise nur eine kleine Anzahl von aufgelösten Proben, die Erkennung erfordert mehr und die Identifizierung erfordert noch feinere Details.

Diese Werte sollten eher als Planungsannäherungen als als als feste Regeln behandelt werden. Die operative Leistung sollte durch missionsspezifische Modellierung und, wenn möglich, Feldtests validiert werden.

Eine verwandte Metrik ist das unmittelbare Sichtfeld (IFOV), das den Winkelabschnitt der Szene beschreibt, der durch ein einzelnes Pixel dargestellt wird. Ein feineres IFOV bedeutet, dass jedes Pixel einen kleineren Bereich in einem bestimmten Bereich abdeckt, wodurch mehr Pixel auf dem Ziel und verbesserte räumliche Details zur Erkennung, Erkennung und Identifizierung ermöglicht werden.

Wenn zwei Sensoren dieselbe Szene mit demselben horizontalen Sichtfeld (HFOV) beobachten, platziert der Sensor mit höherer Auflösung mehr Pixel über das Ziel, wodurch räumliche Details verbessert und Mehrdeutigkeiten reduziert werden.

Tabelle 2. Gleicher HFOV-Vergleich der VGA- und SXGA-DRI-bezogenen Leistung

Abbildung 2. VGA vs. SXGA Bildbereich und Erfassungsbereich

Repräsentative Vergleiche der gleichen Linse mit einer Brennweite von 32 mm zeigen, wie eine SXGA-Konfiguration ein breiteres HFOV bereitstellen kann, während die relative Szenenabdeckung und der modellierte Erfassungsbereich im Vergleich zu einer VGA-Konfiguration erhöht werden. Die Werte in Tabelle 3 veranschaulichen die relativen Kompromisse auf Systemebene unter äquivalenten Annahmen und sollen nicht die Leistung unter allen Betriebsbedingungen garantieren.

Tabelle 3. Vergleich der Brennweite der gleichen Linse zwischen Boson+ und Boson SX8

Detektionsbereichswerte und relative Szenenabdeckung sollten im Kontext der zugrunde liegenden Annahmen interpretiert werden, einschließlich Zielgröße, Ziel-Hintergrund-Temperaturkontrast, atmosphärische Übertragung, optische Übertragung, Linsen-F-Nummer, Sensorempfindlichkeit, Bildverarbeitung, Anzeigeeigenschaften und ausgewählte Wahrscheinlichkeitskriterien. Für Betriebssysteme sollten DRI-Schätzungen durch missionsspezifische Modellierung und, wenn möglich, Feldtests bestätigt werden.

Dieser Vergleich veranschaulicht einen der wichtigsten Vorteile der SXGA-Thermobildgebung. Ingenieure können die Szenenabdeckung erhöhen, ohne die Zielleistung zu beeinträchtigen, oder sie können die zusätzlichen Pixel verwenden, um die Reichweite zu verbessern und gleichzeitig ähnliche Sichtfelder beizubehalten.

Für ISR-, Perimeterüberwachungs- und Gegen-UAS-Anwendungen kann die Fähigkeit, Reichweite und Szenenabdeckung gleichzeitig zu erhöhen, einen bedeutenden operativen Vorteil bieten.

Warum Pixelabstand wichtig ist

Eine der bedeutendsten technischen Entwicklungen hinter modernen hochauflösenden Wärmebildkameras ist die Reduzierung des Pixelabstands. Die Sensorabmessungen werden durch zwei Variablen bestimmt:

Sensorabmessung = Pixelsteigung × Anzahl der Pixel

Historisch gesehen erforderte eine zunehmende Auflösung größere Sensoren. Ein hypothetischer 1280 × 1024 thermischer Detektor, der einen herkömmlichen Pixelabstand von 12 μm verwendet, hätte etwa das Vierfache des Detektorbereichs eines VGA-Sensors und würde eine wesentlich größere Optik erfordern.

Eine 8 μm SXGA-Architektur reduziert die Detektorfläche um etwa 55 % im Vergleich zu einer hypothetischen 12 μm SXGA-Implementierung, was dazu beiträgt, die optischen und mechanischen Größeneinbußen zu begrenzen, die ansonsten mit einer höheren Auflösung einhergehen würden.

Tabelle 4. Vergleich der Sensorarchitektur für VGA 12 μm- und SXGA 8 μm-Detektoren

Während der SXGA-Detektor größer bleibt als ein VGA-Detektor, ist er wesentlich kleiner als eine herkömmliche SXGA-Implementierung von 12 μm. Diese Reduzierung macht moderne hochauflösende Wärmebildgebung für SWaP-beschränkte Plattformen praktisch.

Die Auflösung ist nicht der einzige Treiber für die Wärmebildleistung. Die rauschäquivalente Temperaturdifferenz (NETD oder NEdT), das Signal-Rausch-Verhältnis, die optische Übertragung, die Linsen-F-Nummer, die Kalibrierqualität und die Bildverarbeitung beeinflussen die Empfindlichkeit und die Erkennungssicherheit. Kleinere Pixel können die räumliche Abtastung verbessern und ein feineres IFOV ermöglichen, aber Systemdesigner müssen auch beurteilen, ob der Detektor, die Optik und die Verarbeitungskette genügend thermischen Kontrast für die beabsichtigte Mission beibehalten.

Die Auswirkungen auf die Optik

Pixelabstand wirkt sich mehr aus als nur auf die Detektorgröße. Es beeinflusst das optische Design direkt. Die Linse muss ein Bild projizieren, das groß genug ist, um den Detektor abzudecken. Größere Detektoren erfordern in der Regel größere Linsenelemente, mehr optisches Material mit erhöhtem Linsengewicht, die auch ein größeres mechanisches Volumen bewirken.

Abbildung 3. Komponenten des LWIR Thermokameramoduls

Historisch gesehen führte der Wechsel von VGA zur Wärmebildgebung der Megapixelklasse oft zu einer signifikant größeren Optik und unterstützte die Nutzlaststruktur. Kleinere Pixel-Pitches tragen dazu bei, diese Strafen zu reduzieren. Durch die Reduzierung der Detektorabmessungen begrenzt die 8-μm-Technologie das Wachstum in folgenden Bereichen:

• Optischer Durchmesser
• Linsenmasse
• Integriertes Nutzlastgewicht
• Größe des thermischen Pakets
• Mechanische Komplexität
• Stabilisierungsanforderungen

Das praktische Ergebnis ist, dass Wärmebildkameras mit höherer Auflösung jetzt in Drohnen, Handgeräte, autonome Systeme und Raketensuchende integriert werden können, ohne das dramatische optische Wachstum zu erfordern, das mit hochauflösenden Sensoren früherer Generationen einherging. Abbildung 4 unten enthält maßstabsgetreue Bilder der Kameramodule Boson+ und Boson SX8, die im Vergleich zu den Modellen mit 32 mm Brennweite ähnlich groß sind.

Abbildung 4. Vergleich von Größe und Gewicht des 32-mm-Fokallängen-VGA- und SXGA-Moduls

Maschinelle Vision und autonome Systeme

Die Vorteile einer höheren Auflösung gehen über die menschliche Beobachtung hinaus. Da Wärmebildkameras zunehmend als Input für Maschinenlernalgorithmen, Zieltracker und autonome Systeme dienen, wird die Menge an Informationen, die der Software zur Verfügung stehen, immer wichtiger.

Die native SXGA-Auflösung bietet Vorteile für maschinelle Lernanwendungen, die durch Bild-Upscaling- oder Super-Resolution-Techniken nicht vollständig repliziert werden können. Die zusätzlichen Szeneninformationen können Folgendes verbessern:

• Objekterkennung
• Objektklassifizierung
• Verfolgung mehrerer Ziele
• Sensor-Fusion
• Autonome Navigation
• Edge-KI-Leistung

Bei eingebetteten Systemen erhöht der Wechsel von VGA zu SXGA die Anzahl der Pixel pro Frame um etwa 4×, was sich auf die Bildsignalverarbeitung, Videocodierung, Schnittstellenbandbreite, Latenz, Speicher und Edge-KI-Workload auswirken kann. Systemarchitekten sollten bewerten, ob der Hostprozessor, FPGA, GPU oder KI-Beschleuniger die zusätzlichen Daten innerhalb des Leistungs-, thermischen und Latenzbudgets der Plattform verarbeiten kann. In vielen Verteidigungsanwendungen muss der Vorteil einer Erfassung mit höherer Auflösung mit den verfügbaren Rechenressourcen, der Datenverbindungskapazität und den Entscheidungsanforderungen in Echtzeit abgeglichen werden. Neuere eingebettete Thermokameramodule, einschließlich des Boson SX8, unterstützen diese Workflows zunehmend durch digitale Hochgeschwindigkeitsschnittstellen wie eine MIPI CSI-2-Schnittstelle, eine verfügbare GUI und Kompatibilität mit der intelligenten eingebetteten Prism™-Software für KI von Teledyne FLIR OEM in der Peripherie.

Technische Zusammenfassung: Anpassung der Lösung an die Mission

Der Übergang von VGA zu SXGA ist nicht nur eine Frage der Bildqualität. Sie verändert die Kompromisse zwischen Sichtfeld, Zielauflösung, optischer Größe, Verarbeitungsanforderungen und Reichweitenleistung. Die optimale Wahl hängt von den Einsatzanforderungen ab und davon, wie das System die thermischen Daten verwenden möchte.

Tabelle 5. Kompromisse auf Systemebene zwischen VGA und SXGA-Wärmebildgebung

Eine höhere Auflösung liefert mehr Informationen, aber diese Informationen müssen verarbeitet, übertragen, gespeichert und verwendet werden. Die technische Frage ist nicht, ob SXGA mehr Daten generiert, sondern ob die Anwendung von diesen zusätzlichen Informationen profitiert.

Empfohlene Anwendungen für VGA und SXGA Thermal Imaging

VGA bleibt eine hervorragende Lösung, wenn die Mission keine maximale Zielauflösung oder Fähigkeit zur Identifizierung über große Entfernungen erfordert. In diesen Anwendungen stellt VGA oft ausreichend thermische Informationen bereit und minimiert gleichzeitig die Verarbeitungsanforderungen, die Bandbreite, den Speicher und die Gesamtsystemkomplexität.

SXGA bietet den größten Wert, wenn Zielauflösung, Szenenabdeckung oder Maschinenwahrnehmung den Erfolg des Einsatzes direkt beeinflussen. Diese Anwendungen können von zusätzlichen räumlichen Informationen, breiteren Sichtfeldoptionen und reichhaltigeren maschinellen Lerneingaben profitieren, vorausgesetzt, das System kann die zugehörigen Verarbeitungs-, Bandbreiten-, Leistungs-, thermischen und Kostenanforderungen unterstützen.

Tabelle 6. Anwendungsbeispiele für VGA- und SXGA-Thermokameras

Überlegungen zu NDAA und ITAR

Bei Verteidigungs-, Regierungs- und internationalen OEM-Programmen sind Auflösung und Leistung nur Teil der Entscheidung über das Systemdesign. Lieferkettensicherung, Beschaffungsberechtigung, Exportierbarkeit und Integrationsrisiko können ebenfalls die Kameraauswahl beeinflussen. NDAA-konforme und ITAR-freie Wärmebildkameramodule können dazu beitragen, die Beschaffung zu vereinfachen, einen breiteren Programmzugriff zu unterstützen und die administrative Komplexität für US- und verwandte Systemintegratoren zu reduzieren. Für Plattformen, die eine LWIR-Erfassung mit höherer Auflösung erfordern, ohne Exportkontroll- oder Beschaffungsbeschränkungen hinzuzufügen, können diese Überlegungen ein bedeutender Faktor bei der Auswahl einer SXGA-Architektur sein.

Wichtige Erkenntnisse und Schlussfolgerungen

Die Wahl zwischen VGA- und SXGA-Wärmebildgebung sollte von den Missionsanforderungen, der Systemarchitektur und den Programmbeschränkungen bestimmt werden. VGA bleibt eine praktische Wahl, wenn Kosten, SWaP, Rechenlast, Bandbreite, Einfachheit der Integration und Kompatibilität mit älteren Produkten im Vordergrund stehen. SXGA ist überzeugender, wenn die Mission von längerer Entfernungsdiskriminierung, breiterer Szenenabdeckung, verbessertem DRI-Potenzial oder dichteren nativen thermischen Daten für automatisierte Erkennung, Verfolgung und Maschinenwahrnehmung profitiert. Kleinere 8-μm-Pixel tragen dazu bei, die Wärmebildgebung mit höherer Auflösung praktischer zu machen, indem sie die Detektor- und optischen Strafen reduzieren, die traditionell mit Sensoren mit größerem Format verbunden sind, wodurch SWaP-optimierte SXGA-Wärmebildkameramoduldesigns ermöglicht werden.

Für Systemdesigner ist die Schlüsselfrage, ob die Anwendung die zusätzlichen Informationen, die von SXGA bereitgestellt werden, effektiv nutzen kann, während sie sich innerhalb der Plattformbeschränkungen für Optik, Verarbeitung, Bandbreite, Strom, Wärmemanagement, Kosten, Beschaffung und Exportierbarkeit befindet. Wo diese Kompromisse mit der Mission übereinstimmen, bietet SXGA bedeutende technische Vorteile gegenüber herkömmlichen VGA-Architekturen. Um mehr über den neuen SWaP-optimierten, NDAA-konformen und ITAR-freien SXGA Boson SX8 zu erfahren, besuchen Sie bitte oem.flir.com/bosonsx8.