HDR 영상 취득 기법-2장의 LDR 이미지 사용

두 장의 LDR 영상을 이용한 HDR 영상 취득 기법

두 장의 초기 입력 LDR(Low Dynamic Range) 영상을 이용하여 장면의 밝기에 대한 노출 곡선을 초기 추정한 후, 장면 밝기 변화에 따른

최적의 셔터 속도를 시간 변화에 따라 지속적으로 추정하는 기법을 사용함. 이를 통해서 HDR 이미지를 취득

카메라의 CCD(빛의 세기를 전기적 신호로 변환)나 CMOS 센서를 통해서 실세계 장면의 밝기 범위를 모두 표현할 수 없다.

이런 카메라의 제한된 동적범위를 향상시키기 위해 HDR 영상 취득 연구가 진행중이다. 

대표적인 기법

1. 여러 장의 LDR 영상을 취득 후 각 영상의 복사량(radiance) 맵을 생성한 후, 각 복사량의 맵을 결합시켜 한 장의 HDR 영상을 생성시킨다.

2. 영상의 화소값과 장면의 방사량(irradiance)의 관계를 이용하여 HDR 영상을 생성하는 방법도 존재한다.

이런 기법들은 노출이 다른 여러 장의 LDR 영상을 취득해야 한 장의 HDR 영상을 만들기 때문에 많은 시간이 소요된다.

또한 주변광의 밝기가 변하는 환경이나 움직이는 물체에 대해서는 적용이 어렵다.

위 문제의 해결책

Meylan 등은 Retinex 이론에 근거하여 한 장의 LDR 영상의 명암 대비도를 향상시키며 후광효과를 보완한 

HDR 영상을 생성하는 방법을 제안하였다. 

-> BUT 후광효과를 보완하는 대신 에지의 디테일 보존이 어렵다.

박대근 등은 장면의 밝기 값에 대한 두 장의 셔터 속도를 얻기 위해 노출 이 다른 3장의 입력 영상을 이용한다.

따라서 한 장의 HDR 영상을 취득하기 위해 총 5장의 영상을 필요로 하므 로 고속 HDR 취득이 어려운 단점을 가진다.

Barakat 등은 장면의 최대/최소 방사량을 이용하여 최적의 노출 집합을 취득

Hirakawa 등은 영상의 화소와 방사량의 관계를 확률 모델을 이용하여 최적의 노출 집합을 취득하였다.

특정한 비율을 가지는 서로 다른 두 개의 셔터 속도에 의해 취득된 영상의 화소와 장면에서 카메라 센서에 

단위면적당 입사하는 방사도의 관계를 정의한다. 이를 바탕으로 화소와 각 화소간의 노출 증가량의 관계를

정의하는 카메라 노출 곡선을 추정한다.

추정된 노출 곡선을 이용하여 장면의 평균 밝기의 변화에 따라 적응적으로 최적의 셔터 속도를 가진 두 장의 LDR 영상을

취득하는 알고리즘을 제안한다.

기술적인 내용

1. 두 장의 초기 영상만을 이용하여 영상의 각 화소값 사이의 상대적인 노출 비율을 나타내는 노출 곡선을 추정한다. 

2. 추정된 노출 곡선을 이용하여 주어진 장면의 밝기에 가장 바람직한 두 장의 셔터 속도를 구함으로써 최적에 근사하는 LDR 영상 2장을 선별한다. 

3. HDR 영상을 생성한다

(핵심은 언제 찍을지 최적의 셔터 속도를 찾음으로  최적의 LDR영상 2장을 생성해야함)

주변광의 밝기가 연 속적으로 변하는 환경에서도 이전 평균 밝기 값과 현재 평균 밝기 값 사이의 상대적인 노출 비율을 이용하여 지속적으로 

최적의 LDR 영상을 취득함으로써 HDR 비디오 취득이 가능하다.

reference: http://image.inha.ac.kr/paper/HDR.pdf