관심영역 기반 와핑을 이용한 3D 동영상 안정화 기법 = ROI-Based 3D Video Stabilization Using Warping

국문 초록 (Abstract)

가정용 캠코더의 보급으로 인해서 손떨림이나 카메라 흔들림을 보상하기 위해 다양한 동영상 안정화 기법들이 연구되고 있다. 동영상 안정화 기법은 초기에 2차원 움직임만을 고려하였지만, 최근에는 3차원 움직임까지 고려하여서 더 좋은 성능을 얻을 수 있게 되었다. 이러한 기법들 중 가장 좋은 성능을 보이는 것으로 알려진 기법이 바로 content preserving warping을 이용한 기법인데 이것은 뛰어난 성능을 보이지만 방대한 연산량이 단점이다. 그래서, 우리는 ROI 측면에서 종래 기술 대비 동등한 화질을 보이면서도 연산량이 적은 full frame warping을 제안한다. 먼저, 목표로 하는 깊이 정보를 바탕으로 관심 영역을 설정하고, 설정된 관심 영역을 기반으로 full frame warping을 수행한다.

다국어 초록 (Multilingual Abstract)

As the portable camcorder becomes popular, various video stabilization algorithms for de-shaking of camera motion have been developed. In the past, most video stabilization algorithms were based on 2-dimensional camera motion, but recent algorithms show much better performance by considering 3-dimensional camera motion. Among the previous video stabilization algorithms, 3D video stabilization algorithm using content-preserving warps is known as the state-of-the art owing to its superior performance. But, the major demerit of the algorithm is its high computational complexity. So, we present a computationally light full-frame warping algorithm based on ROI (region-of-interest) while providing comparable visual quality to the state-of-the art in terms of ROI. First, a proper ROI with a target depth is chosen for each frame, and full-frame warping based on the selected ROI is applied.

목차 (Table of Contents)

• 요약
• Abstract
• Ⅰ. 서론
• Ⅱ. 제안 기법
• Ⅲ. 실험
• Ⅳ. 결론
• 참고문헌

참고문헌 (Reference)

1 J. M. Wang, "Video stabilization for a hand-held camera based on 3d motion model" 3477-3480, 2009

2 G. Zhang, "Video stabilization based on a 3D perspectivecamera model"

3 S. Avidan, "Seam carving for content-aware image resizing" 26 (26): 2007

4 S. Battiato, "SIFT features tracking for video stabilization" 825-830, 2007

5 K. Ratakonda, "Real-time digital video stabilization for multi-media applications" 69-72, 1998

6 R. I. Hartley, "Multiple view geometry in computer vision" Cambridge University Press 2000

7 J. More, "Levenberg-Marquardt algorithm, implementation, and theory, In numerical analysis edition" Springer-Verlag 1977

8 S. Schaefer, "Image deformation using moving least squares" 25 (25): 533-540, 2006

9 J. Lee, "General construction of time-domain filters for orientation data" IEEE COMPUTER SOC 8 (8): 119-128, 2002

10 P. S. Heckbert, "Fundamentals of texture mapping and image warping" UC Berkeley 1989

11 Y. Matsushita, "Full-frame video stabilization with motion inpainting" 28 (28): 1150-1163, 2006

12 R. Gal, "Feature-aware texturing" 297-303, 2006

13 F. Liu, "Content-preserving warps for 3D videostabilization" 1-9, 2009

14 B. Triggs, "Bundle adjustment—a modern synthesis" 298-373, 1999

15 T. Igarashi, "As-rigid-as-possible shape manipulation" 1134-1141, 2005

16 M. Alexa, "As-rigid-as-possible shape interpolation" 157-164, 2000

17 Y. M. Yeh, "A digital camcorder image stabilizer based on gray coded bit-plane block matching" 244-251, 2000

18 T. Jebara, "3D structure from 2D motion" 16 (16): 66-84, 1999