객체 기반의 자기 지도 학습을 통한 행동 인식 데이터 증강 장치 및 방법
APPARATUS AND METHOD OF DATA AUGMENTATION FOR ACTION RECOGNITION VIA SELF SUPERVISED LEARNING BASED ON OBJECTS
특허 요약
본 발명은 행동 인식 데이터를 증가하는 기술에 관한 것으로, 더욱 상세하게는 자기 지도 학습을 통해 학습된 객체 정보 기반 스켈레톤 생성 모델을 이용하여 행동 인식 데이터를 증강하는 장치에 관한 것이다. 본 발명의 실시 예에 따르면, 객체 기반의 자기 지도 학습을 통한 행동 인식 데이터 증강 장치는 새로운 모션 데이터를 만드는 생성 모델을 통해 촬영 대상의 수를 증가하여 수집한 데이터를 수집 불가능한 계층에 맞게 변형하여 데이터를 증강할 수 있다. 또한, 객체 기반의 자기 지도 학습을 통한 행동 인식 데이터 증강 장치는 체형, 신장, 자세 등 다양한 특성을 고려하여 데이터를 변형할 수 있고 실제 데이터와 유사한 다양한 촬영 대상 데이터를 생성함으로써 행동 인식 모델의 성능을 높일 수 있다.
청구항
번호청구항
1

객체 기반의 자기 지도 학습을 통한 행동 인식 데이터 증강 장치에 있어서,영상 이미지 정보를 입력하는 영상 입력부; 상기 입력된 영상 정보의 모션 데이터로부터 객체 정보 특징 벡터를 추출하는 정보 추출부; 및다른 행동을 실시하는 모션 데이터와 상기 객체 정보를 합성하여 새로운 모션 데이터를 생성하는 모션 정보 합성부를 포함하는 객체 기반의 자기 지도 학습을 통한 행동 인식 데이터 증강 장치.

2

제1항에 있어서,상기 정보 추출부는입력된 영상으로부터 모션 데이터를 얻고 상기 모션 데이터의 객체 정보를 포함하는 특징 벡터를 추출하는객체 기반의 자기 지도 학습을 통한 행동 인식 데이터 증강 장치.

3

제1항에 있어서,상기 모션 정보 합성부는상기 모션 데이터와 다른 행동을 실시하는 임의의 모션 데이터와 상기 객체 정보 벡터에 기반하여 새로운 모션 데이터를 합성하는객체 기반의 자기 지도 학습을 통한 행동 인식 데이터 증강 장치.

4

제3항에 있어서,상기 모션 정보 합성부는 초기 입력된 모션 데이터와 같은 체형, 신장 및 자세 중 적어도 하나의 객체 정보를 가지면서초기 입력된 모션 데이터와 다른 행동을 실시하는 새로운 모션 데이터를 합성하는객체 기반의 자기 지도 학습을 통한 행동 인식 데이터 증강 장치.

5

객체 기반의 자기 지도 학습을 통한 행동 인식 데이터 증강 장치가 행동 인식 데이터를 증강하는 방법에 있어서,영상 이미지 정보를 입력하는 단계; 상기 입력된 영상 정보의 모션 데이터로부터 객체 정보 특징 벡터를 추출하는 단계; 및다른 행동을 실시하는 모션 데이터와 상기 객체 정보를 합성하여 새로운 모션 데이터를 생성하는 단계를 포함하는 객체 기반의 자기 지도 학습을 통한 행동 인식 데이터 증강 방법.

6

제5항에 있어서,상기 입력된 영상 정보의 모션 데이터로부터 객체 정보 특징 벡터를 추출하는 단계는입력된 영상으로부터 모션 데이터를 얻고 상기 모션 데이터의 객체 정보를 포함하는 특징 벡터를 추출하는 객체 기반의 자기 지도 학습을 통한 행동 인식 데이터 증강 방법.

7

제5항에 있어서,상기 다른 행동을 실시하는 모션 데이터와 상기 객체 정보를 합성하여 새로운 모션 데이터를 생성하는 단계는상기 모션 데이터와 다른 행동을 실시하는 임의의 모션 데이터와 상기 객체 정보 벡터에 기반하여 새로운 모션 데이터를 합성하는객체 기반의 자기 지도 학습을 통한 행동 인식 데이터 증강 방법.

8

제7항에 있어서,상기 다른 행동을 실시하는 모션 데이터와 상기 객체 정보를 합성하여 새로운 모션 데이터를 생성하는 단계는초기 입력된 모션 데이터와 같은 체형, 신장, 자세 중 적어도 하나의 객체 정보를 가지면서초기 입력된 모션 데이터와 다른 행동을 실시하는 새로운 모션 데이터를 합성하는객체 기반의 자기 지도 학습을 통한 행동 인식 데이터 증강 방법.

9

제5항 내지 제8항의 객체 기반의 자기 지도 학습을 통한 행동 인식 데이터 증강 방법 중 어느 하나를 실행하고 컴퓨터가 판독 가능한 기록매체에 기록된 컴퓨터 프로그램.