적외선 비디오에서 Gain과 Offset 결합 보정을 통한 고정패턴잡음 제거기법 = Fixed Pattern Noise Reduction in Infrared Videos Based on Joint Correction of Gain and Offset

국문 초록 (Abstract)

대부분의 최근 적외선 센서는 focal-plane array (FPA) 구조로 되어있다. 이러한 구조의 센서는 공간적 불균일 응답성을 갖는 것으로 알려져 있고, 이로 인해 고정패턴잡음을 발생시킴으로써 영상열화를 가져온다. 따라서 적외선 영상의 고정패턴잡음을 제거하기 위해서는 픽셀 불균일 보정을 해야 한다. 픽셀 불균일 보정기법은 참조물체기반 접근법과 영상기반 접근법으로 나눌 수 있다. 참조물체기반 접근법에서는 흑체와 같은 균일한 온도를 갖는 물체를 이용해서 고정패턴잡음을 분리시킬 수 있는 방법이다. 하지만 센서의 응답성은 시간이 지나면서 변할 수 있기 때문에, 최근에는 비디오 영상을 이용하는 영상기반 접근법이 많이 연구되고 있다. 영상기반 접근법들 중에서 칼만 필터를 기반으로 하는 최신 알고리듬은 영상 간에 움직임 보상 시에 한 방향 워핑을 이용하고 센서의 offset 불균일성만을 보상해준다. 하지만 한 방향 워핑을 이용한 시스템 모델은 영상의 경계 부근에서 고정패턴잡음을 효과적으로 제거하지 못한다. 게다가, offset만 보정하는 접근법은 gain의 불균일성의 영향을 많이 받는 영상에서는 성능이 악화될 수 있다. 그러므로 본 논문에서는 양방향 워핑을 이용하여 시스템 모델링을 하고, gain과 offset의 결합 보정을 수행하는 알고리듬을 제안한다. 모사 영상과 실제 영상에 대한 실험 결과들은 제안하는 알고리듬이 기존 알고리듬들보다 더 효과적으로 고정패턴잡음을 제거하는 것을 확인할 수 있다.

다국어 초록 (Multilingual Abstract)

Most recent infrared (IR) sensors have a focal-plane array (FPA) structure. Spatial non-uniformity of a FPA structure, however, introduces unwanted fixed pattern noise (FPN) to images. This non-uniformity correction (NUC) of a FPA can be categorized into target-based and scene-based approaches. In a target-based approach, FPN can be separated by using a uniform target such as a black body. Since the detector response randomly drifts along the time axis, however, several scene-based algorithms on the basis of a video sequence have been proposed. Among those algorithms, the state-of-the-art one based on Kalman filter uses one-directional warping for motion compensation and only compensates for offset non-uniformity of IR camera detectors. The system model using one-directional warping cannot correct the boundary region where a new scene is being introduced in the next video frame. Furthermore, offset-only correction approaches may not completely remove the FPN in images if it is considerably affected by gain non-uniformity. Therefore, for FPN reduction in IR videos, we propose a joint correction algorithm of gain and offset based on bi-directional warping. Experiment results using simulated and real IR videos show that the proposed scheme can provide better performance compared with the state-of-the art in FPN reduction.

목차 (Table of Contents)

• 요약
• Abstract
• Ⅰ. 서론
• Ⅱ. 본론
• Ⅲ. 실험
• Ⅳ. 결론
• 참고문헌

참고문헌 (Reference)

1 조창호, "웨이브렛 변환 영역에서 적응문턱값을 이용한 적외선영상의 잡음제거" 대한전자공학회 43 (43): 65-75, 2006

2 A. Averbuch, "Scene based non-uniformity correction inthermal images using Kalman filter" 25 (25): 833-851, 2007

3 이원석, "Retinex 처리에 기반한 적외선 열상 이미지의 화질 개선" 대한전자공학회 48 (48): 32-39, 2011

4 S. S. Channappayya, "Rate bounds on SSIM index of quantized images" 17 (17): 1624-1639, 2008

5 M. Schultz, "Non uniformity correction and correctability of infrared focal plane arrays" 36 (36): 763-777, 1995

6 B. Dierickx, "Missing pixel correction algorithm for image sensors" 3410 : 200-203, 1998

7 G. H. Golub, "Matrix computations, Chap. 10" Johns Hopkins 1996

8 A. F. Milton, "Influence of nonuniformity on infrared focalplane array performance" 24 (24): 855-862, 1985

9 B. M. Ratliff, "Generalized algebraic scene based nonuniformitycorrection algorithm" 22 (22): 239-249, 2005

10 S. Periaswamy, "Elastic registration in the presence of intensity variations" 22 (22): 865-874, 2003

11 W. Gross, "Correctability of the spatial non-uniformity invarious infrared focal plane arrays" 3436 : 203-213, 1998

12 B. M. Ratliff, "An algebraic algorithm for nonuniformity correction in focal-plane arrays" 19 (19): 1737-1747, 2002

13 A. H. Sayed, "Adaptive filters, Chap. 7" Wiley Inter-Science 2008