프로젝트 소개
본 과제는 영상에 나타난 움직임과 형태 정보를 바탕으로 3차원 구조를 복원하는 비강체 복원 심층신경망을 개발하는 연구임. 단안 카메라 영상만으로도 환경의 완전한 3차원 복원이 가능하도록, 기하학 정보와 영상정보를 함께 활용하는 방식의 고도화가 핵심임.
연구 목표는 MDS(Multi Dimensional Scaling) 네트워크, ARAP-MDS Consistency 로스, 신경망 보간법, 랜덤 모델 조합 알고리즘을 개발하여 비지도학습 기반 내재적 표면 추정 네트워크를 구현하는 데 있음. 핵심 연구 내용은 2차원 궤적의 노이즈와 제약 문제를 완화하고, 학습된 모델로 노이즈·왜곡을 제거한 뒤 표면정보를 추정하는 과정임. 기대 효과는 0.01-0.1초 수준의 빠른 처리와 실시간 3차원 복원 가능성 확보로, 의료영상, 증강현실, 스포츠 중계, 스마트 피팅 미러 등에 활용 확대가 예상됨.