프로젝트 소개
본 과제는 실제와 같은 3차원 공간을 디지털로 구현하여 다양한 각도에서 자유롭게 볼 수 있는 Volumetric video 콘텐츠의 화질을 높이기 위한 Light-Field Video 기술을 개발하는 연구임.
연구 목표는 Light field 기반의 volumetric video 콘텐츠 서비스를 위한 생성, 인코딩, 렌더링 기술을 개발하는 것임. 이는 헤어 디테일 표현이 가능한 고품질 콘텐츠 생성, 모바일 단말에서의 실시간 렌더링 성능 확보, H.264 기반 인코딩 기술 구현을 포함함. 세부적으로는 70개 이상의 카메라 어레이 이미지로부터 light field 렌더링 데이터를 생성하고, H.264 기반 light-field video 코덱 개발 및 모바일 단말에서 30fps 이상 렌더링을 목표로 함. 핵심 연구 내용은 Line segment 멀티뷰 스테레오 매칭을 통한 Proxy mesh 생성 기술과 Semi-automatic alpha matte 추정 기술 개발, 그리고 Parametric space multi-view video coding (PMVC) 인코더 개발임. 이러한 기술 개발은 기존 volumetric video의 품질 문제를 해결하여 고화질 및 몰입감 높은 '디지털 아이돌' 체험을 제공하고, 팬덤 경제, 언택트 비즈니스, 5G 서비스 활성화에 기여할 것으로 기대됨. 더불어, 모바일 및 다양한 3D/VR/AR 디스플레이에서 실사와 같은 3차원 효과를 구현하여 VR/AR/XR 테마파크 및 전시 공간으로의 확장 가능성이 높음.