비강체(non-rigid) 등록은 역동적이고 불완전한 3D 인체 메시를 재구성하는 데 필수적이지만, 전통적인 방법들은 고운동 변형의 연속과 결측 기하가 존재하는 상황에서 견고한 정렬을 달성하는 데 종종 실패한다. 본 연구는 2D 영상 공간에서 3D 메쉬 도메인으로 유의미한 특징을 효과적으로 전이함으로써 이러한 과제를 해결하는 도메인 크로스오버 비강체 등록(DCNRR) 프레임워크를 제안한다. 제안 방법은 세 가지 핵심 단계, 즉 다중 시점 투영(multi-view projection), 계층적 비강체 등록(hierarchical non-rigid registration), 위상 일관성 토폴로지(topology-consistent) 기반 완성(completion)으로 이루어진다. 첫 번째 단계에서는 다중 시점 투영을 사용하여 2D 관절 위치와 심층 특징을 추출하고, 이를 3D 공간에서의 변형을 안내하는 데 활용한다. 두 번째 단계에서는 계층적 관절 선행 정보(prior)와 심층 특징이 협력하여 메쉬 정렬을 유도함으로써 말단(distal) 영역과 복잡한 자세에서 더 정확한 변형을 가능하게 한다. 마지막 단계에서는 UV 좌표에서 확산(diffusion) 기반 완성 과정을 적용하여 불완전한 표면 법선(surface normals)을 재구성하고, 위상 일관성을 유지하며 결측 메쉬 영역을 정교화한다. 본 접근법은 매우 상세하고 지각적으로 정확한 메쉬 변형을 달성한다. 우리의 방법을 검증하기 위해 새로 구축한 역동적 인체 동작(DHM) 데이터셋과 공개 데이터셋에서 성능을 평가한다. 그 결과, 본 방법은 기하학적 정확성과 안정성 모두에서 최첨단 수준의 결과를 보이며, 특히 역동적이고 불완전한 메쉬 시퀀스에서 탁월한 강인성을 나타낸다.

*본 초록은 AI를 통해 원문을 번역한 내용입니다. 정확한 내용은 하기 원문에서 확인해주세요.