인공지능 영상 조작 검출 방법 및 장치
APPARATUS AND METHODS FOR DETECTING IMAGE MANIPULATED BY ARTIFICIAL INTELLIGENCE
특허 요약
본 발명은 전자 장치의 인공지능 영상 조작 검출 방법에 관한 것으로서, 영상 조작 검출 방법은 대상 영상에서 연속된 프레임을 추출하는 단계; 각 프레임에 대하여 얼굴 영역을 검출하는 단계; 상기 각 프레임에 대하여 복수개의 얼굴 경계 윈도우를 생성하는 단계; 상기 각 프레임에 대하여 얼굴 영역을 제거한 배경 영역에 존재하는 하나 이상의 물체들을 검출하고, 하나 이상의 물체들의 배경 경계 윈도우를 생성하는 단계; 상기 각 프레임에 대하여 얼굴 경계 윈도우의 픽셀값과 배경 경계 윈도우의 픽셀값에 기초하여 얼굴 경계 특성과 배경 경계 특성을 추출하고 통합한 통합 데이터를 생성하는 단계; 및 상기 통합 데이터를 분석하여 인공지능 영상 조작여부를 판정하는 단계를 포함하는 것을 특징으로 한다.
청구항
번호청구항
12

제7항에 있어서,상기 조작 검출부는, 상기 통합 데이터를 딥러닝 모델에 적용함으로써 인공지능 영상 조작여부를 판정하는 것을 특징으로 하는 영상 조작 검출 장치.

1

전자 장치의 인공지능 영상 조작 검출 방법으로서, 대상 영상에서 연속된 프레임을 추출하는 단계; 각 프레임에 대하여 얼굴 영역을 검출하는 단계; 상기 각 프레임에 대하여 복수개의 얼굴 경계 윈도우를 생성하는 단계; 상기 각 프레임에 대하여 얼굴 영역을 제거한 배경 영역에 존재하는 하나 이상의 물체들을 검출하고, 하나 이상의 물체들의 배경 경계 윈도우를 생성하는 단계;상기 각 프레임에 대하여 얼굴 경계 윈도우의 픽셀값과 배경 경계 윈도우의 픽셀값에 기초하여 얼굴 경계 특성과 배경 경계 특성을 추출하고 통합한 통합 데이터를 생성하는 단계; 및상기 통합 데이터를 분석하여 인공지능 영상 조작여부를 판정하는 단계를 포함하는 영상 조작 검출 방법.

2

제1항에 있어서,상기 얼굴 경계 윈도우를 생성하는 단계는 검출된 얼굴 영역에서 얼굴 경계선을 기준으로 얼굴 경계의 수직 선분을 생성하고, 생성된 수직 선분당 평행한 선분을 일정 간격으로 생성하고, 상기 수직 선분과 생성된 평행한 선분의 집합을 포함하는 얼굴 경계 윈도우를 생성하는 것을 특징으로 하는 영상 조작 검출 방법.

3

제1항에 있어서,상기 하나 이상의 물체들의 배경 경계 윈도우를 생성하는 단계에서, 하나의 프레임에서 상기 검출된 얼굴 영역을 제거하고, 얼굴 영역이 제거된 배경 영역에 존재하는 각 물체들의 경계선을 기준으로 물체 경계의 수직 선분을 생성하고, 생성된 수직 선분당 평행한 선분을 일정 간격으로 생성하고, 상기 수직 선분과 생성된 평행한 선분의 집합을 포함하는 배경 경계 윈도우를 생성하는 것을 특징으로 하는 영상 조작 검출 방법.

4

제3항에 있어서,상기 검출된 얼굴 영역을 제거할 때, 검출된 얼굴 영역에서 미리 설정된 픽셀만큼 얼굴 외측으로 확장된 얼굴 영역을 생성하고, 확장된 얼굴 영역을 상기 프레임으로부터 제거하는 것을 특징으로 하는 영상 조작 검출 방법.

5

제1항에 있어서,상기 통합 데이터를 생성하는 단계는, 상기 얼굴 경계 윈도우 각각에 대하여, 얼굴 경계 윈도우 내에 있는 픽셀값을 산출하고, 각 픽셀값들에 대하여 경계선에 수직한 수직방향으로 이웃하는 픽셀값과의 차이를 계산하여 제1 차분값을 생성하고, 상기 제1 차분값을 얼굴 경계 특성으로 하는 단계; 상기 배경 경계 윈도우 각각에 대하여, 배경 경계 윈도우 내에 있는 픽셀값을 산출하고, 각 픽셀값들에 대하여 경계선에 수직한 수직방향으로 이웃하는 픽셀값과의 차이를 계산하여 제2 차분값을 생성하고, 하나의 프레임에 포함된 모든 배경 경계 윈도우에 대한 제2 차분값들의 평균값을 계산하는 단계; 각 얼굴 경계 윈도우에 대한 제1 차분값과 상기 제2 차분값들의 평균값의 차이값을 계산하여 배경 경계 특성을 생성하는 단계; 및 상기 얼굴 경계 특성과 상기 배경 경계 특성을 합하여 통합 특성을 생성하는 단계를 포함하는 것을 특징으로 하는 영상 조작 검출 방법.

6

제1항에 있어서,상기 통합 데이터를 분석하여 인공지능 영상 조작여부를 판정하는 단계는, 상기 통합 데이터를 딥러닝 모델에 적용함으로써 인공지능 영상 조작여부를 판정하는 것을 특징으로 하는 영상 조작 검출 방법.

7

대상 영상을 획득하는 영상 획득부; 상기 대상 영상에서 연속된 프레임을 추출하고, 각 프레임에 대하여 얼굴 영역을 검출하여, 상기 각 프레임에 대하여 복수개의 얼굴 경계 윈도우를 생성하고, 상기 각 프레임에 대하여 얼굴 영역을 제거한 배경 영역에 존재하는 하나 이상의 물체들을 검출하고, 하나 이상의 물체들의 배경 경계 윈도우를 생성하며, 상기 각 프레임에 대하여 얼굴 경계 윈도우의 픽셀값과 배경 경계 윈도우의 픽셀값에 기초하여 얼굴 경계 특성과 배경 경계 특성을 추출하고 통합한 통합 데이터를 생성하는 특성 추출부; 및상기 통합 데이터를 분석하여 인공지능 영상 조작여부를 판정하는 조작 검출부를 포함하는 영상 조작 검출 장치.

8

제7항에 있어서,상기 특성 추출부는, 검출된 얼굴 영역에서 얼굴 경계선을 기준으로 얼굴 경계의 수직 선분을 생성하고, 생성된 수직 선분당 평행한 선분을 일정 간격으로 생성하고, 상기 수직 선분과 생성된 평행한 선분의 집합을 포함하는 얼굴 경계 윈도우를 생성하는 것을 특징으로 하는 영상 조작 검출 장치.

9

제7항에 있어서,상기 특성 추출부는, 하나의 프레임에서 상기 검출된 얼굴 영역을 제거하고, 얼굴 영역이 제거된 배경 영역에 존재하는 서 각 물체들의 경계선을 기준으로 물체 경계의 수직 선분을 생성하고, 생성된 수직 선분당 평행한 선분을 일정 간격으로 생성하고, 상기 수직 선분과 생성된 평행한 선분의 집합을 포함하는 배경 경계 윈도우를 생성하는 것을 특징으로 하는 영상 조작 검출 장치.

10

제9항에 있어서,상기 검출된 얼굴 영역을 제거할 때, 검출된 얼굴 영역에서 미리 설정된 픽셀만큼 얼굴 외측으로 확장된 얼굴 영역을 생성하고, 확장된 얼굴 영역을 상기 프레임으로부터 제거하는 것을 특징으로 하는 영상 조작 검출 장치.

11

제7항에 있어서,상기 특성 추출부는, 상기 얼굴 경계 윈도우 각각에 대하여, 얼굴 경계 윈도우 내에 있는 픽셀값을 산출하고, 각 픽셀값들에 대하여 경계선에 수직한 수직방향으로 이웃하는 픽셀값과의 차이를 계산하여 제1 차분값을 생성하고, 상기 제1 차분값을 얼굴 경계 특성으로 하고, 상기 배경 경계 윈도우 각각에 대하여, 배경 경계 윈도우 내에 있는 픽셀값을 산출하고, 각 픽셀값들에 대하여 경계선에 수직한 수직방향으로 이웃하는 픽셀값과의 차이를 계산하여 제2 차분값을 생성하고, 하나의 프레임에 포함된 모든 배경 경계 윈도우에 대한 제2 차분값들의 평균값을 계산하며, 각 얼굴 경계 윈도우에 대한 제1 차분값과 상기 제2 차분값들의 평균값의 차이값을 계산하여 배경 경계 특성을 생성하고, 상기 얼굴 경계 특성과 상기 배경 경계 특성을 합하여 통합 특성을 생성하는것을 특징으로 하는 영상 조작 검출 장치.