(주)자이언트스텝
사용자의 표정을 재현하는 딥러닝 모듈의 학습 방법 및 이를 수행하는 디지털 휴먼 생성 장치
Method for training deep-learning module for reproducing user facial expression and digital human creation device performing the same
특허 요약
본 발명은 딥러닝(Deep learning) 기술을 이용하여 데이터 증강을 수행한 후, 증강된 데이터를 이용하여 딥러닝 모듈을 학습시키고, 학습된 딥러닝 모듈을 이용하여 디지털 휴먼을 생성함으로써 사용자의 얼굴 표정을 더욱 풍부하고 정확하게 재현할 수 있는 딥러닝 모듈의 학습 방법 및 이를 수행하는 디지털 휴먼 생성 장치에 관한 것이다. 상기 디지털 휴먼 생성 장치는, 사용자의 안면에 관한 원본 데이터를 수신하는 데이터 수집 모듈, 뉴럴 네트워크(Neural Network)를 이용하여 상기 원본 데이터에 대한 컨트롤 포인트 정보(Control Point Information)를 생성하는 딥러닝 모듈, 상기 딥러닝 모듈을 학습시키는 학습 모듈 및 상기 컨트롤 포인트 정보를 미리 정의된 가상 아바타에 적용하여 디지털 휴먼(Digital Human)을 생성하는 렌더링 모듈을 포함하되, 상기 학습 모듈은, 상기 원본 데이터에 기초하여 상기 딥러닝 모듈을 학습시키기 위한 학습 데이터를 생성하고, 생성된 상기 학습 데이터를 이용하여 상기 딥러닝 모듈을 학습시킨다.
청구항
번호청구항
1

사용자의 안면에 관한 원본 데이터를 수신하는 데이터 수집 모듈;뉴럴 네트워크(Neural Network)를 이용하여 상기 원본 데이터에 대한 컨트롤 포인트 정보(Control Point Information)를 생성하는 딥러닝 모듈;상기 딥러닝 모듈을 학습시키는 학습 모듈; 및상기 컨트롤 포인트 정보를 미리 정의된 가상 아바타에 적용하여 디지털 휴먼(Digital Human)을 생성하는 렌더링 모듈을 포함하되,상기 학습 모듈은, 상기 원본 데이터에 기초하여 상기 딥러닝 모듈을 학습시키기 위한 학습 데이터를 생성하고, 생성된 상기 학습 데이터를 이용하여 상기 딥러닝 모듈을 학습시키는 디지털 휴먼 생성 장치.