베이지안 최적화를 이용한 카메라 속성 제어 방법 및 장치
APPARATUS AND METHOD FOR CONTROLLING CAMERA ATTRIBUTE USING BAYESIAN OPTIMIZATION
특허 요약
다양한 실시예들에 따른 베이지안 최적화를 이용한 카메라 속성 제어 방법 및 장치는, 카메라를 통하여 획득된 영상으로부터 검출되는 노이즈 성분에 기반하여, 카메라의 노출 시간 및 이득과 관련된 메트릭을 계산하고, 메트릭을 기반으로, 노출 시간 및 이득을 제어하도록 구성될 수 있다.
청구항
번호청구항
1

베이지안 최적화(Bayesian optimization)를 이용한 카메라 속성 제어 방법에 있어서, 카메라를 통하여 획득된 영상으로부터 검출되는 노이즈 성분에 기반하여, 상기 카메라의 노출 시간 및 이득과 관련된 메트릭을 계산하는 동작; 및상기 메트릭을 기반으로, 상기 노출 시간 및 이득을 제어하는 동작을 포함하는 방법.

2

제 1 항에 있어서, 상기 메트릭 계산 동작은,상기 노출 시간과 관련된 제 1 메트릭을 계산하는 동작;상기 노이즈 성분을 이용하여, 상기 이득과 관련된 제 2 메트릭을 계산하는 동작; 및상기 제 1 메트릭과 제 2 메트릭을 합하여, 상기 메트릭을 계산하는 동작을 포함하는 방법.

3

제 1 항에 있어서, 상기 노출 시간 및 이득 제어 동작은,상기 메트릭에 기반하여, 상기 노출 시간 및 이득의 최적값을 예측하는 동작; 및상기 노출 시간 및 이득을 상기 최적값으로 제어하는 동작을 포함하는 방법.

4

제 3 항에 있어서, 상기 최적값을 예측하는 동작은,상기 메트릭에 기반하여, 상기 노출 시간 및 이득과 관련된 함수를 도출하는 동작; 및상기 함수에 베이지안 최적화를 적용하여, 상기 최적값을 예측하는 동작을 포함하는 방법.

5

제 3 항에 있어서, 상기 최적값을 예측하는 동작은,상기 노출 시간 및 이득과 관련하여, 상기 영상으로부터 다수 개의 합성 영상들을 생성하는 동작; 및상기 합성 영상들을 비교하여, 상기 최적값을 예측하는 동작을 포함하는 방법.

6

제 5 항에 있어서, 상기 합성 영상들 생성 동작은,상기 노출 시간 및 이득과 관련하여, 다수 개의 후보값들을 추정하는 동작; 및상기 후보값들을 이용하여, 상기 영상으로부터 다수 개의 합성 영상들을 생성하는 동작을 포함하고, 상기 최적값은 상기 후보값들 중 어느 하나로 선택되는 방법.

7

제 1 항에 있어서, 상기 노이즈 성분은 상기 영상으로부터 계산되는 신호 대 잡음비(signal to noise ratio; SNR)에 따라 결정되는 방법.

8

제 5 항에 있어서, 상기 합성 영상들 생성 동작은, 상기 노출 시간과 관련된 제 1 스케일링 계수를 계산하는 동작; 상기 이득과 관련된 제 2 스케일링 계수를 계산하는 동작; 및상기 제 1 스케일링 계수와 제 2 스케일링 계수를 상기 영상에 적용하여, 상기 합성 영상들을 생성하는 동작을 포함하는 방법.

9

제 8 항에 있어서, 상기 제 1 스케일링 계수와 제 2 스케일링 계수는 상기 영상의 픽셀 별로 계산되어 적용되는 방법.

10

제 8 항에 있어서, 상기 제 1 스케일링 계수 계산 동작은,상기 영상에 기반하여, 카메라 응답 함수(camera response function; CRF)를 도출하는 동작; 및상기 카메라 응답 함수로부터 상기 제 1 스케일링 계수를 계산하는 동작을 포함하는 방법.

11

베이지안 최적화(Bayesian optimization)를 이용한 카메라 속성 제어 장치에 있어서,영상을 획득하도록 구성되는 카메라; 및상기 카메라에 연결되고, 상기 카메라를 제어하도록 구성되는 프로세서를 포함하며, 상기 프로세서는, 상기 영상으로부터 검출되는 노이즈 성분에 기반하여, 상기 카메라의 노출 시간 및 이득과 관련된 메트릭을 계산하고, 상기 메트릭을 기반으로, 상기 노출 시간 및 이득을 제어하도록 구성되는 장치.

12

제 11 항에 있어서, 상기 프로세서는,상기 노출 시간과 관련된 제 1 메트릭을 계산하고, 상기 노이즈 성분을 이용하여, 상기 이득과 관련된 제 2 메트릭을 계산하고, 상기 제 1 메트릭과 제 2 메트릭을 합하여, 상기 메트릭을 계산하도록 구성되는 장치.

13

제 11 항에 있어서, 상기 프로세서는, 상기 메트릭에 기반하여, 상기 노출 시간 및 이득의 최적값을 예측하고, 상기 노출 시간 및 이득을 상기 최적값으로 제어하도록 구성되는 장치.

14

제 13 항에 있어서, 상기 프로세서는, 상기 메트릭에 기반하여, 상기 노출 시간 및 이득과 관련된 함수를 도출하고, 상기 함수에 베이지안 최적화를 적용하여, 상기 최적값을 예측하도록 구성되는 장치.

15

제 13 항에 있어서, 상기 프로세서는, 상기 노출 시간 및 이득과 관련하여, 상기 영상으로부터 다수 개의 합성 영상들을 생성하고, 상기 합성 영상들을 비교하여, 상기 최적값을 예측하도록 구성되는 장치.

16

제 15 항에 있어서, 상기 프로세서는,상기 노출 시간 및 이득과 관련하여, 다수 개의 후보값들을 추정하고, 상기 후보값들을 이용하여, 상기 영상으로부터 다수 개의 합성 영상들을 생성하고, 상기 후보값들 중 어느 하나를 상기 최적값으로 선택하도록 구성되는 장치.

17

제 11 항에 있어서, 상기 프로세서는, 상기 영상으로부터 계산되는 신호 대 잡음비(signal to noise ratio; SNR)에 따라, 상기 노이즈 성분을 결정하도록 구성되는 장치.

18

제 15 항에 있어서, 상기 프로세서는, 상기 노출 시간과 관련된 제 1 스케일링 계수를 계산하고, 상기 이득과 관련된 제 2 스케일링 계수를 계산하고, 상기 제 1 스케일링 계수와 제 2 스케일링 계수를 상기 영상에 적용하여, 상기 합성 영상들을 생성하도록 구성되는 장치.

19

제 18 항에 있어서, 상기 프로세서는, 상기 제 1 스케일링 계수와 제 2 스케일링 계수를 상기 영상의 픽셀 별로 계산하여 적용하도록 구성되는 장치.

20

제 13 항에 있어서, 상기 프로세서는,상기 영상에 기반하여, 카메라 응답 함수(camera response function; CRF)를 도출하고, 상기 카메라 응답 함수로부터 상기 제 1 스케일링 계수를 계산하도록 구성되는 장치.