VGA 대 SXGA 열화상 이미징: 범위, 광학 장치 및 AI에 더 높은 해상도가 의미하는 것

초록

이 문서에서는 국방, 자율 및 임베디드 감지 응용 분야를 위해 비디오 그래픽 어레이(VGA, 640 × 512)에서 슈퍼 확장 그래픽 어레이(SXGA, 1280 × 1024) 장파 적외선(LWIR) 이미징으로 전환할 때 시스템 차원의 영향을 살펴봅니다. 더 높은 감지기 해상도가 표적의 픽셀, 순간 시야각(IFOV), 감지, 인식 및 식별(DRI) 성능, 시야각 트레이드오프, 광학 설계, 처리 부하 및 머신 비전 성능에 미치는 영향을 비교합니다. 목표는 해상도를 광범위한 트레이드 영역의 한 요소로 바라보는 것이며, 여기에는 감도, 광학 처리량, 대역폭, 지연 시간, 전력, 열 관리, 조달 요건, 수출 가능성 및 임무별 성능 요구 사항도 포함됩니다.

서론 및 배경

VGA 해상도 열화상 장비는 성능, 시스템 비용 및 크기, 무게 및 전력(SWaP)의 효과적인 균형을 제공하기 때문에 10년 이상 많은 국방, 산업 및 무인 응용 분야의 표준이 되었습니다. 자율 기능, 머신 비전 및 장거리 감지 요구 사항이 계속 확장됨에 따라 시스템 설계자는 고해상도 열화상 센서로 전환할 때의 이점을 평가하고 있습니다.

VGA에서 SXGA로의 전환은 단순한 이미지 품질 개선 이상의 것입니다. SXGA 이미저는 4배의 픽셀 수를 가져 표적 해상도, 시야각, 광학 설계 및 기계 인식 간의 관계를 근본적으로 변화시킵니다. Teledyne FLIR OEM의 Boson® SX8과 같은 최신 SXGA LWIR 모듈은 8마이크론(µm) 감지기 아키텍처가 해상도를 높이는 동시에 기존의 대형 열 센서와 관련된 크기 및 광학적 단점을 제한하는 방법을 보여줍니다. 이러한 트레이드오프는 센서 성능이 페이로드 크기, 온보드 처리, 데이터링크 용량, 수출 가능성 및 국제 무기 거래 규정(ITAR) 및 국방수권법(NDAA)에 따른 조달 요구 사항과 균형을 이루어야 하는 군사 및 항공우주 시스템에 특히 중요합니다. Boson®+는 해상도, 픽셀 피치, 시야각, 시스템 수준 통합 제약 조건 및 프로그램 요구 사항이 실제 성능에 미치는 영향을 비교하는 데 유용한 VGA 기준점을 제공합니다.

그림 1. 3×의 Zoom Picture-in-Picture 기능이 적용된 18° HFOV VGA(왼쪽)와 SXGA(오른쪽)의 예시

해상도 차이 이해

VGA와 SXGA의 가장 분명한 차이는 픽셀 수입니다. SXGA 센서는 VGA 센서보다 프레임당 4배 더 많은 열화상 샘플을 캡처합니다. 이러한 추가 픽셀은 두 가지 방식으로 사용할 수 있습니다. 즉, 동일한 시야각에서 표적의 세부 정보를 늘리거나 표적 세부 정보를 유지하면서 시야각을 늘릴 수 있습니다. 대부분의 실제 시스템은 이 두 가지 조합을 사용합니다.

표 1. VGA 및 SXGA 해상도 비교

고해상도의 중요성은 단순히 이미지가 더 선명하게 보인다는 것이 아닙니다. 추가적인 열화상 샘플은 인간 작업자, 표적 추적기, 자율 시스템 및 기계 학습 알고리즘에 더 많은 정보를 제공합니다.

표적에 대한 픽셀 및 DRI 성능

감지, 인식 및 식별(DRI)은 이미징 시스템에서 점점 높아지는 수준에서 작업의 성능을 설명합니다. 감지는 개체가 존재하는지를 결정하는 것을 의미하며, 인식은 사람, 차량 또는 UAS와 같은 개체 유형을 분류하는 것을 의미하며, 식별은 특정 개체, 구성 또는 위협을 구별하는 것을 의미합니다. DRI 성능은 일반적으로 표적에 대해 더 많은 해상도를 가진 이미지 샘플이 확보될수록 향상되지만, 정확한 임계값은 표적 크기, 대비, 대기, 광학 장치, 센서 감도, 이미지 처리, 디스플레이 조건, 관찰자 또는 알고리즘 성능 및 임무 기준에 따라 달라집니다.

Johnson 기준 스타일 모델은 일반적으로 표적의 중요 치수에 걸친 공간 샘플링과 표적 작업 난이도의 관계를 바탕으로 DRI 성능을 추정하는 데 사용됩니다. 중요한 치수란 보통 감지 작업에 사용되는 관련 너비, 높이 또는 기능 크기로 정의됩니다. 단순화된 표적의 픽셀 수 관점에서 감지는 적은 수의 분해된 샘플만 필요할 수 있으며, 인식에는 더 많은 샘플이 필요하고, 식별에는 그보다 더 세밀한 정보가 필요합니다.

이러한 값은 고정된 규칙이라기 보다는 계획 수립을 위한 근사치로 취급해야 합니다. 운영 성능은 임무별 모델링 및 가능한 경우 현장 테스트를 통해 검증해야 합니다.

관련 지표는 단일 픽셀이 나타내는 장면의 각도 범위를 의미하는 순간 시야각(IFOV)입니다. 더 작은 IFOV는 각 픽셀이 주어진 범위에서 더 작은 영역을 커버하여, 표적에 픽셀이 더 많아지고 감지, 인식 및 식별을 위한 공간 세부 정보가 개선됨을 의미합니다.

두 센서가 동일한 수평 시야각(HFOV)으로 동일한 장면을 관찰하면, 고해상도 센서가 표적에 더 많은 픽셀을 배치하여 공간 세부 사항을 개선하고 모호성을 줄입니다.

표 2. VGA 및 SXGA DRI 관련 성능의 동일한 FOV 비교

그림 2. VGA 대 SXGA 이미지 영역 및 감지 범위 그림

32mm 초점 길이를 사용한 대표적인 동일 렌즈 비교는 SXGA 구성이 VGA 구성에 비해 상대 장면 커버리지와 모델링된 감지 범위를 증가시키면서 더 넓은 HFOV를 제공할 수 있는 방법을 보여줍니다. 표 3의 값은 동등한 가정 하에서의 상대적 시스템 수준 트레이드오프를 보여주며, 모든 작동 조건에서의 성능을 보장하기 위한 것은 아닙니다.

표 3. Boson+ 및 Boson SX8의 동일한 렌즈 초점 길이 비교

감지 범위 값 및 상대 장면 커버리지는 표적 크기, 표적-배경 온도 대비, 대기 투과율, 광학 투과율, 렌즈 f-값, 센서 감도, 이미지 처리, 디스플레이 특성 및 선택된 확률 기준을 포함한 기본 가정의 맥락에서 해석해야 합니다. 운영 시스템의 경우, DRI 추정치는 임무별 모델링 및 가능한 경우 현장 테스트를 통해 확인해야 합니다.

이 비교는 SXGA 열화상 촬영의 가장 중요한 이점 중 하나를 보여줍니다. 엔지니어는 표적 성능을 저하시키지 않고도 장면 커버리지를 넓힐 수 있으며, 추가 픽셀을 사용하여 유사한 시야를 유지하면서 범위를 개선할 수 있습니다.

ISR, 경계 감시 및 C-UAS 응용 분야의 경우 범위와 장면 커버리지를 동시에 증가시킬 수 있는 기능이 의미 있는 운영상의 이점을 제공할 수 있습니다.

픽셀 피치가 중요한 이유

최신 고해상도 열화상 카메라의 가장 중요한 설계상의 발전 중 하나는 픽셀 피치 감소입니다. 센서 치수는 다음 두 가지 변수에 의해 결정됩니다.

센서 치수 = 픽셀 피치 × 픽셀 수

역사적으로 해상도를 높이려면 더 큰 센서가 필요했습니다. 기존의 12µm 픽셀 피치를 사용하는 가상의 1280 × 1024 열감지기는 VGA 센서보다 감지기 면적이 약 4배 더 크며 실질적으로 더 큰 광학 장치가 필요합니다.

8µm SXGA 아키텍처는 가상의 12µm SXGA 구현에 비해 감지기 영역을 약 55% 줄여 더 높은 해상도에 수반되는 광학적 및 기계적 크기의 페널티를 제한하는 데 도움이 됩니다.

표 4. VGA 12µm 및 SXGA 8µm 감지기에 대한 센서 아키텍처 비교

SXGA 감지기는 VGA 감지기보다 더 크지만 기존의 12µm SXGA 구현에 필요한 것보다 훨씬 작습니다. 이러한 감소로 인해 SWaP 제약 플랫폼에서 최신 고해상도 열화상 촬영이 실현됩니다.

해상도가 열화상 성능의 유일한 동인은 아닙니다. 잡음 등가 온도차(NETD 또는 NEdT), 신호 대 잡음비, 광학 투과율, 렌즈 f-값, 보정 품질 및 이미지 처리는 모두 감도 및 감지 신뢰도에 영향을 미칩니다. 작은 픽셀은 공간 샘플링을 개선하고 더 작은 IFOV를 가능하게 할 수 있지만, 시스템 설계자는 또한 감지기, 광학 장치 및 이미 처리 체인이 의도한 임무에 충분한 열 대비를 유지하는지도 평가해야 합니다.

광학 장치에 미치는 영향

픽셀 피치는 감지기 크기 이상에 영향을 미칩니다. 광학 설계에 직접적인 영향을 미칩니다. 렌즈는 감지기를 덮을 수 있을 정도로 큰 이미지를 투사해야 합니다. 더 큰 감지기는 일반적으로 더 큰 렌즈 요소와 더 많은 광학 소재를 필요로 하므로 렌즈 중량이 증가하고, 이로 인해 기계적 부피도 커집니다.

그림 3. LWIR 열화상 카메라 모듈 구성 요소

역사적으로, VGA에서 메가픽셀급 열화상 이미징으로 전환하면 종종 광학 장치 및 이를 지원하는 페이로드 구조가 더 커졌습니다. 픽셀 피치가 작을수록 이러한 페널티를 줄이는 데 도움이 됩니다. 감지기 치수를 줄임으로써 8µm 기술은 다음 영역에서의 증가를 제한합니다.

• 광학 직경
• 렌즈 질량
• 통합 페이로드 무게
• 열 패키지 크기
• 기계적 복잡성
• 안정화 요건

그 실질적인 결과는 고해상도 열화상 장비를 이제 이전 세대의 고해상도 센서에 수반되었을 큰 광학 장치 증가 없이 드론, 핸드헬드 장치, 자율 시스템 및 미사일 시커에 통합할 수 있다는 것입니다. 아래 그림 4는 32mm 초점 길이 모델을 비교할 때 크기가 유사한 Boson+ 및 Boson SX8 카메라 모듈의 실제 크기 비율에 맞춰 표시한 이미지를 포함합니다.

그림 4. 32mm 초점 길이 VGA 및 SXGA 모듈 크기 및 중량 비교

머신 비전 및 자율 시스템

고해상도의 이점은 인간의 관찰 범위를 넘어섭니다. 열화상 카메라가 머신 러닝 알고리즘, 표적 추적기 및 자율 시스템에 대한 입력 장치로서의 역할을 점점 더 많이 수행함에 따라 소프트웨어에 사용할 수 있는 정보의 양이 점점 더 중요해지고 있습니다.

기본 SXGA 해상도는 이미지 업스케일링 또는 초고해상도 기술을 통해 완전히 복제할 수 없는 머신 러닝 응용 분야에 이점을 제공합니다. 추가 장면 정보는 다음 사항을 개선할 수 있습니다.

• 개체 감지
• 개체 분류
• 다중 표적 추적
• 센서 융합
• 자율 항법
• 엣지 AI 성능

임베디드 시스템의 경우 VGA에서 SXGA로 이동하면 프레임당 픽셀 수가 약 4배 증가하여 이미지 신호 처리, 비디오 인코딩, 인터페이스 대역폭, 지연 시간, 스토리지 및 에지 AI 워크로드에 영향을 줄 수 있습니다. 시스템 설계자는 호스트 프로세서, FPGA, GPU 또는 AI 가속기가 플랫폼의 전력, 열 및 지연 시간 예산 내에서 추가 데이터를 처리할 수 있는지 평가해야 합니다. 많은 국방 응용 분야에서 고해상도 감지의 이점은 사용 가능한 컴퓨팅 리소스, 데이터링크 용량 및 실시간 결정 요구 사항과 균형 있게 고려해야 합니다. Boson SX8을 포함한 최신 임베디드 열화상 카메라 모듈은 MIPI CSI-2 인터페이스, 사용 가능한 GUI와 같은 고속 디지털 인터페이스 및 엣지 AI용 Teledyne FLIR OEM의 Prism™ 지능형 임베디드 소프트웨어와의 호환성을 통해 이러한 워크플로를 점점 더 많이 지원합니다.

엔지니어링 요약: 임무에 맞는 해상도 맞춤

VGA에서 SXGA로의 전환은 단순히 이미지 품질에 대한 문제가 아닙니다. 시야각, 표적 해상도, 광학 크기, 처리 요구 사항 및 범위 성능 간의 트레이드오프가 바뀝니다. 최적의 선택은 임무 요구 사항과 시스템이 열 데이터를 사용하는 방법에 따라 달라집니다.

표 5. VGA와 SXGA 열화상 이미징 간의 시스템 수준 트레이드오프

해상도가 높을수록 더 많은 정보를 제공하지만, 해당 정보는 처리, 전송, 저장 및 활용되어야 합니다. 엔지니어링 문제는 SXGA가 더 많은 데이터를 생성하는지 여부가 아니라 응용 분야에서 추가 정보를 통해 이점을 얻는지 여부입니다.

VGA 및 SXGA 열화상 이미징을 위한 권장 응용 분야

임무에 최대 표적 해상도 또는 장거리 식별 기능이 필요하지 않은 경우 VGA는 여전히 탁월한 솔루션입니다. 이러한 응용 분야에서 VGA는 대개 처리 요구 사항, 대역폭, 스토리지 및 전반적인 시스템 복잡성을 최소화하면서 충분한 열 정보를 제공합니다.

SXGA는 표적 해상도, 장면 커버리지 또는 기계 인식이 임무 성공에 직접적인 영향을 미칠 때 가장 큰 가치를 제공합니다. 이러한 응용 분야는 시스템이 관련 처리, 대역폭, 전력, 열 및 비용 요구 사항을 지원할 수 있는 경우 추가 공간 정보, 더 넓은 시야각 옵션 및 더 풍부한 머신 러닝 입력의 이점을 활용할 수 있습니다.

표 6. VGA 및 SXGA 열화상 카메라용 응용 분야의 예

NDAA 및 ITAR 고려사항

국방, 정부 및 국제 OEM 프로그램의 경우, 해상도 및 성능은 시스템 설계 결정의 일부일 뿐입니다. 공급망 보증, 조달 적합성, 수출 가능성 및 통합 위험도 카메라 선택에 영향을 미칠 수 있습니다. NDAA 준수 및 ITAR 비적용 열화상 카메라 모듈은 조달을 간소화하고, 광범위한 프로그램 접근을 지원하며, 미국 및 동맹국의 시스템 통합업체가 감당할 행정적 복잡성을 줄이는 데 도움이 될 수 있습니다. 수출 통제 또는 조달 제약 사항이 추가되지 않는 고해상도 LWIR 감지가 필요한 플랫폼의 경우, 이러한 고려 사항은 SXGA 아키텍처를 선택하는 데 의미 있는 요인이 될 수 있습니다.

주요 요점 및 결론

VGA 및 SXGA 열화상 이미징은 임무 요구 사항, 시스템 아키텍처 및 프로그램 제약 조건에 따라 선택해야 합니다. 비용, SWaP, 컴퓨팅 부하, 대역폭, 통합 단순성 및 레거시 호환성이 주요 고려 사항일 때 VGA는 여전히 실용적인 선택입니다. 임무에서 더 긴 거리에서의 식별 능력, 더 넓은 장면 커버리지, 향상된 DRI 잠재력 또는 자동화된 탐지, 추적 및 머신 인식을 위한 더 높은 밀도의 기본 열화상 데이터의 장점을 활용할 때 SXGA는 더 매력적인 선택입니다. 더 작은 8µm 픽셀은 기존에 대형 센서와 관련된 감지기 및 광학 페널티를 줄여 고해상도 열화상 이미징을 더욱 실용적으로 만들 수 있어 SWaP에 최적화된 SXGA 열화상 카메라 모듈 설계가 가능합니다.

시스템 설계자에게 핵심적인 질문은 응용 분야가 광학, 처리, 대역폭, 전력, 열 관리, 비용, 조달 및 수출 가능성에 대한 플랫폼 제약 내에서 SXGA가 제공하는 추가 정보를 효과적으로 사용할 수 있는지 여부입니다. SXGA는 이러한 균형이 임무와 일치하는 경우 기존 VGA 아키텍처에 비해 의미 있는 기술적 이점을 제공합니다. 새로운 SWaP 최적화, NDAA 준수 및 ITAR 비적용 SXGA Boson SX8에 대해 자세히 알아보려면 oem.flir.com/bosonsx8에서 확인하십시오.