3차원 위치 추정을 이용한 광각 렌즈 영상의 왜곡 보정 장치 및 그 방법
DISTORTION COMPENSATION APPARATUS AND METHOD FOR WIDE-ANGLE IMAGING LENS USING THREE-DIMENSIONAL POSITION ESTIMATE
특허 요약
3차원 위치 추정을 이용한 광각 렌즈 영상의 왜곡 보정 장치 및 그 방법이 개시된다. 왜곡 보정 방법은 광각 렌즈를 이용하여 생성한 입력 영상에서 전경을 추출하는 단계; 상기 전경과 상기 광각 렌즈 간의 거리를 이용하여 상기 전경의 3차원 위치를 추정하는 단계; 및 상기 전경의 3차원 위치를 상기 입력 영상에 원근 투영(perspective projection)하여 왜곡이 보상된 출력 영상을 생성하는 단계를 포함할 수 있다.
청구항
번호청구항
1

광각 렌즈를 이용하여 생성한 입력 영상에서 전경을 추출하는 단계;상기 전경과 상기 광각 렌즈 간의 거리를 이용하여 상기 전경의 3차원 위치를 추정하는 단계; 및상기 전경의 3차원 위치를 상기 입력 영상에 원근 투영(perspective projection)하여 왜곡이 보정된 출력 영상을 생성하는 단계를 포함하고,상기 3차원 위치를 추정하는 단계는,오브젝트의 실제 3차원 위치와 렌즈 중심을 연결하는 가상의 직선과 상기 렌즈의 중심 축간의 각도를 측정하는 단계;상기 입력 영상의 좌표와 주점(principal point)간의 거리를 측정하는 단계;상기 렌즈의 중심 축간의 각도와 상기 주점 간의 거리 간의 트랜스퍼 커브(transfer curve)를 결정하는 단계; 복수의 광각 렌즈의 모델들 중 상기 트랜스퍼 커브와 가장 유사도가 높은 광각 렌즈의 모델을 상기 광각 렌즈의 모델로 추정하는 단계;상기 광각 렌즈의 모델을 기초로 상기 광각 렌즈가 포함된 카메라의 파라미터를 추정하는 단계; 및상기 전경과 상기 광각 렌즈 간의 거리 및 상기 카메라의 파라미터를 이용하여 상기 전경의 2차원 위치에 전경의 3차원 위치를 매핑하는 단계를 포함하는 왜곡 보정 방법.

2

삭제

3

삭제

4

제1항에 있어서, 상기 카메라의 파라미터를 추정하는 단계는,초점 거리 및 주점(principal point)들 중에서 상기 렌즈 모델과의 오차를 최소화하는 초점 거리 및 주점을 상기 카메라의 파라미터로 추정하는 왜곡 보정 방법.

5

제1항에 있어서, 상기 출력 영상을 생성하는 단계는,상기 전경의 3차원 위치를 기초로 원근 투영 파라미터를 결정하는 단계; 및상기 원근 투영 파라미터를 이용하여 상기 전경의 3차원 위치가 매핑될 상기 입력 영상의 2차원 좌표를 결정하는 단계를 포함하는 왜곡 보정 방법.

6

제5항에 있어서, 상기 원근 투영 파라미터를 결정하는 단계는,상기 전경의 3차원 위치와 전경 간의 거리를 결정하는 단계;상기 전경의 크기 및 상기 전경과 상기 광각 렌즈 간의 거리에 따른 물체의 비율 조절 파라미터를 결정하는 단계;상기 전경의 3차원 위치와 전경 간의 거리 및 상기 비율 조절 파라미터를 이용하여 상기 원근 투영 파라미터를 결정하는 단계를 포함하는 왜곡 보정 방법.

7

광각 렌즈를 이용하여 생성한 입력 영상에서 전경을 추출하는 전경 추출부;상기 전경과 상기 광각 렌즈 간의 거리를 이용하여 상기 전경의 3차원 위치를 추정하는 3차원 위치 추정부; 및상기 전경의 3차원 위치를 상기 입력 영상에 원근 투영(perspective projection)하여 왜곡이 보정된 출력 영상을 생성하는 출력 영상 생성부를 포함하고,상기 3차원 위치 추정부는,오브젝트의 실제 3차원 위치와 렌즈 중심을 연결하는 가상의 직선과 상기 렌즈의 중심 축간의 각도를 측정하고, 상기 입력 영상의 좌표와 주점(principal point)간의 거리를 측정하며, 상기 렌즈의 중심 축간의 각도와 상기 주점 간의 거리 간의 트랜스퍼 커브(transfer curve)를 결정하고, 복수의 광각 렌즈의 모델들 중 상기 트랜스퍼 커브와 가장 유사도가 높은 광각 렌즈의 모델을 상기 광각 렌즈의 모델로 추정하는 렌즈 모델 추정부;상기 광각 렌즈의 모델을 기초로 상기 광각 렌즈가 포함된 카메라의 파라미터를 추정하는 카메라 파라미터 추정부; 및상기 전경과 상기 광각 렌즈 간의 거리 및 상기 카메라의 파라미터를 이용하여 상기 전경의 2차원 위치에 전경의 3차원 위치를 매핑하는 3차원 위치 매핑부를 포함하는 왜곡 보정 장치.

8

삭제

9

삭제

10

제7항에 있어서, 상기 카메라 파라미터 추정부는,초점 거리 및 주점(principal point)들 중에서 상기 렌즈 모델과의 오차를 최소화하는 초점 거리 및 주점을 상기 카메라의 파라미터로 추정하는 왜곡 보정 장치.

11

제7항에 있어서, 상기 출력 영상 생성부는,상기 전경의 3차원 위치를 기초로 원근 투영 파라미터를 결정하고, 상기 원근 투영 파라미터를 이용하여 상기 전경의 3차원 위치가 매핑될 상기 입력 영상의 2차원 좌표를 결정하는 왜곡 보정 장치.