‣ Dataset 구축 및 딥러닝 기반 Human-Object Interaction (HOI) 기술 연구 ▹모바일 디바이스 기반 Human-Object Interaction Dataset 구축 - 모바일 디바이스에서 획득되는 다중 센서(광각/초광각/일반 카메라) 및 다양한 상황, 시점에 대한 Dataset을 구축 - 광각, 초광각 센서에 의해 Dataset에 존재하는 왜곡을 보정하기 위한 Image Rectification 기술 연구 - Ground truth 제작을 위한 Auto Labeling 기술 연구 및 Dataset 정제 - Generative Adversarial Network(GAN) 기술을 활용한 Dataset 분석 ▹GPU-Workstation 기반 Human-Object Interation (HOI) 연구 - GPU-Workstation 기반 딥러닝 알고리즘 Feasibility 검증 연구 - HOI 기반 영상 분석 (Visual Conten Analysis) 기술 연구 ‣ 모바일 디바이스 기반 HOI 기술 적용 연구 ▹모바일 디바이스 칩셋의 딥러닝 SDK/API 기술 확보 - 주요 모바일 프로세서(Qualcomm./Samsung/Apple)의 칩셋 정보 분석 - 프로세서 별 딥러닝 SDK(Software Development Kit) 기술 문서 분석 - 프로세서 별 딥러닝 API(Application Programming Interface) 기술 문서 분석 - 모바일 디바이스 기반 딥러닝에 활용 가능한 Layer 분석 ▹모바일 디바이스 기반 HOI 딥러닝 기술 경량화 연구 - 모바일 디바이스 기반 이미지 양자화(Quantization) 연구 - 모바일 디바이스 GPU(Graphics Processing Unit)/DSP(Digital Signal Processing)/NPU(Neural Processing Unit)에 적용 가능한 HOI 딥러닝 Layer 연구 - GPU-Workstation 기반 HOI 딥러닝 기술을 모바일 프로세서에 적용 및 Layer 별 성능 분석 ‣ 모바일 칩셋 (GPU/DSP/NPU) 딥러닝 HOI 기술 최적화 및 고도화 ▹모바일 디바이스 칩셋 별 HOI 딥러닝 기술 결과 분석 - GPU/DSP/NPU 프로세서 차이에 따른 딥러닝 HOI 기술 성능 분석 - 프로세서 구조에 맞는 최적화된 딥러닝 Layer 기술 연구 ▹GPU/DSP/NPU에 따른 성능 장단점 분석 및 해당 칩셋에 맞게 HOI 딥러닝 알고리즘 최적화 및 고도화 - 프로세서에 범용적으로 적용 가능한 General Layer 최적화 및 HOI 성능 고도화 - 프로세서 별 최고의 성능을 도출하는 특화된 딥러닝 Layer 연구 및 HOI 성능 고도화