카메라 장치에서 개인의 프라이버시 보호가 가능하도록 하는 프라이버시 프로세서 및 그의 동작 방법
PRIVACY PROCESSOR ENABLE PERSONAL PRIVACY PROTECTION IN CAMERA DEVICE AND OPERATION METHOD OF THE SAME
특허 요약
본 개시는 카메라 장치에서 개인의 프라이버시 보호가 가능하도록 하는 프라이버시 프로세서 및 그의 동작 방법을 제공한다. 카메라 장치는 원시 픽셀 데이터를 수집하도록 구성되는 이미지 센서를 갖는 카메라 모듈, 이미지 센서로부터의 원시 픽셀 데이터를 프라이버시 보호를 위해 처리하도록 구성되는 프라이버시 프로세서, 및 프라이버시 프로세서로부터의 원시 픽셀 데이터를 이용하여 영상 정보를 생성하도록 구성되는 이미지 신호 프로세서를 포함한다. 구체적으로, 프라이버시 프로세서는, 이미지 센서를 통해 수집되는 제 1 원시 픽셀 데이터로부터 기본 배경 데이터를 검출하고, 기본 배경 데이터를 이용하여, 이미지 센서를 통해 수집되는 제 2 원시 픽셀 데이터에서 프라이버시 노출 영역을 검출하고, 프라이버시 노출 영역을 마스킹하여, 제 2 원시 픽셀 데이터를 처리하고, 이미지 신호 프로세서로 처리된 제 2 원시 픽셀 데이터를 전달하도록 구성된다.
청구항
번호청구항
1

카메라 장치의 프라이버시 보호 방법에 있어서, 영상 데이터가 생성되기 전에, 이미지 센서를 통해 수집되는 제 1 원시 픽셀 데이터로부터 기본 배경 데이터를 검출하는 단계; 상기 기본 배경 데이터를 이용하여, 상기 이미지 센서를 통해 수집되는 제 2 원시 픽셀 데이터에서 프라이버시 노출 영역을 검출하는 단계; 상기 프라이버시 노출 영역을 마스킹하여, 상기 제 2 원시 픽셀 데이터를 처리하는 단계; 및이미지 신호 프로세서로 상기 처리된 제 2 원시 픽셀 데이터를 전달하는 단계를 포함하는, 방법.

2

제 1 항에 있어서, 상기 프라이버시 노출 영역을 검출하는 단계는,상기 기본 배경 데이터와 상기 제 2 원시 픽셀 데이터를 비교하여 픽셀별 상관계수를 계산하는 단계; 및상기 상관계수를 기반으로 상기 제 2 원시 픽셀 데이터의 픽셀들 중 적어도 하나를 상기 프라이버시 노출 영역으로 검출하는 단계를 포함하는,방법.

3

제 1 항에 있어서, 상기 제 1 원시 픽셀 데이터로부터 상기 기본 배경 데이터를 검출하는 중에, 상기 이미지 센서가 상기 제 1 원시 픽셀 데이터 수집 시 생성되는 메타 데이터, 및 상기 이미지 신호 프로세서에서 상기 제 1 원시 픽셀 데이터에 대해 계산되는 통계 데이터를 저장하는 단계를 더 포함하는,방법.

4

제 3 항에 있어서, 상기 제 2 원시 픽셀 데이터를 처리하는 단계는,상기 메타 데이터 및 상기 통계 데이터를 이용하여 상기 프라이버시 노출 영역을 마스킹하는 단계를 포함하는,방법.

5

제 2 항에 있어서, 상기 상관계수를 계산하는 단계는, 미리 정해지는 윈도우 크기에 따라, 상기 기본 배경 데이터와 상기 제 2 원시 픽셀 데이터를 부분적으로 또는 전체적으로 비교하여 상기 상관계수를 계산하는 단계를 포함하는,방법.

6

제 2 항에 있어서,상기 프라이버시 노출 영역으로 검출하는 단계는,상기 제 2 원시 픽셀 데이터의 픽셀들의 각각에 대해, 상기 상관계수가 미리 정해진 임계값 이하이면, 상기 프라이버시 노출 영역으로 검출하는 단계를 포함하는,방법.

7

제 1 항에 있어서,상기 처리된 제 2 원시 픽셀 데이터를 전달하는 단계는,상기 처리된 제 2 원시 픽셀 데이터에 대해 비트 연산을 수행하여 상기 처리된 제 2 원시 픽셀 데이터의 크기를 처리 전의 크기로 복원하는 단계; 및상기 이미지 신호 프로세서로 상기 처리된 제 2 원시 픽셀 데이터를 전달하는 단계를 포함하는,방법.

8

카메라 장치에서 프라이버시 보호가 가능하도록 하는 프라이버시 프로세서에 있어서,이미지 센서를 갖는 카메라 모듈과의 인터페이스를 위해 구성되는 인터페이스 모듈; 및상기 인터페이스 모듈과 연결되며, 상기 이미지 센서를 통해 수집되는 원시 픽셀 데이터를 처리하도록 구성되는 이미지 콘트롤러를 포함하고,상기 이미지 콘트롤러는, 상기 이미지 센서를 통해 수집되는 제 1 원시 픽셀 데이터로부터 기본 배경 데이터를 검출하고, 상기 기본 배경 데이터를 이용하여, 상기 이미지 센서를 통해 수집되는 제 2 원시 픽셀 데이터에서 프라이버시 노출 영역을 검출하고, 상기 프라이버시 노출 영역을 마스킹하여, 상기 제 2 원시 픽셀 데이터를 처리하고, 이미지 신호 프로세서로 상기 처리된 제 2 원시 픽셀 데이터를 전달하도록 구성되는,프라이버시 프로세서.

9

제 8 항에 있어서,상기 이미지 콘트롤러는,상기 기본 배경 데이터와 상기 제 2 원시 픽셀 데이터를 비교하여 픽셀별 상관계수를 계산하고, 상기 상관계수를 기반으로 상기 제 2 원시 픽셀 데이터의 픽셀들 중 적어도 하나를 상기 프라이버시 노출 영역으로 검출하도록 구성되는,프라이버시 프로세서.

10

제 8 항에 있어서, 상기 이미지 콘트롤러는, 상기 제 1 원시 픽셀 데이터로부터 상기 기본 배경 데이터를 검출하는 중에, 상기 이미지 센서가 상기 제 1 원시 픽셀 데이터 수집 시 생성되는 메타 데이터, 및 상기 이미지 신호 프로세서에서 상기 제 1 원시 픽셀 데이터에 대해 계산되는 통계 데이터를 저장하도록 구성되는,프라이버시 프로세서.

11

제 10 항에 있어서, 상기 이미지 콘트롤러는,상기 메타 데이터 및 상기 통계 데이터를 이용하여 상기 프라이버시 노출 영역을 마스킹하도록 구성되는,프라이버시 프로세서.

12

제 9 항에 있어서, 상기 이미지 콘트롤러는, 미리 정해지는 윈도우 크기에 따라, 상기 기본 배경 데이터와 상기 제 2 원시 픽셀 데이터를 부분적으로 또는 전체적으로 비교하여 상기 상관계수를 계산하도록 구성되는,프라이버시 프로세서.

13

제 9 항에 있어서,상기 이미지 콘트롤러는,상기 제 2 원시 픽셀 데이터의 픽셀들의 각각에 대해, 상기 상관계수가 미리 정해진 임계값 이하이면, 상기 프라이버시 노출 영역으로 검출하도록 구성되는,프라이버시 프로세서.

14

제 8 항에 있어서,상기 이미지 콘트롤러는,상기 처리된 제 2 원시 픽셀 데이터에 대해 비트 연산을 수행하여 상기 처리된 제 2 원시 픽셀 데이터의 크기를 처리 전의 크기로 복원하고, 상기 이미지 신호 프로세서로 상기 처리된 제 2 원시 픽셀 데이터를 전달하도록 구성되는,프라이버시 프로세서.

15

프라이버시 보호를 위한 카메라 장치에 있어서,원시 픽셀 데이터를 수집하도록 구성되는 이미지 센서를 갖는 카메라 모듈; 상기 이미지 센서로부터의 상기 원시 픽셀 데이터를 프라이버시 보호를 위해 처리하도록 구성되는 프라이버시 프로세서; 및상기 프라이버시 프로세서로부터의 상기 원시 픽셀 데이터를 이용하여 영상 정보를 생성하도록 구성되는 이미지 신호 프로세서를 포함하고,상기 프라이버시 프로세서는, 상기 이미지 센서를 통해 수집되는 제 1 원시 픽셀 데이터로부터 기본 배경 데이터를 검출하고, 상기 기본 배경 데이터를 이용하여, 상기 이미지 센서를 통해 수집되는 제 2 원시 픽셀 데이터에서 프라이버시 노출 영역을 검출하고, 상기 프라이버시 노출 영역을 마스킹하여, 상기 제 2 원시 픽셀 데이터를 처리하고, 상기 이미지 신호 프로세서로 상기 처리된 제 2 원시 픽셀 데이터를 전달하도록 구성되는,카메라 장치.