본 논문은 비디오 입력으로부터 스테인드글라스 애니메이션을 생성하는 방법을 제시한다. 제안 방법은 먼저 mean-shift 세그멘테이션을 통해 입력 비디오 볼륨을 유리 조각의 단편들로 간주되는 여러 영역으로 분할한다. 그러나 이러한 분할은 주로 과분할을 초래하여, 고도로 텍스처가 풍부한 영역에서는 여러 개의 매우 작은 세그먼트가 발생한다. 실제 스테인드글라스 제작에서는 건축적 안정성을 보장하기 위해 지나치게 작거나 또는 지나치게 큰 유리 조각의 조립을 피한다. 따라서 우리는 과분할을 방지하고 분할된 영역이 과도하게 큰 경우 이를 다시 분할하기 위해 세그멘테이션에서 저주파 성분을 사용한다. 재분할은 깜빡임과 셔워 도어(shower door) 효과와 같은 시간적 인공물(temporal artefacts)을 방지하기 위해 인접한 프레임 간에 일관성을 가져야 한다. 영역을 시간적으로 일관되게 재분할하기 위해, 입력 프레임의 분할된 영역들로부터 파노라마 영상을 얻고, 이를 가중치 보로노이 다이어그램(weighted Voronoi diagram)으로 분할한 뒤, 분할된 영역을 다시 입력 프레임에 투영한다. 각 일관된 영역에 대해 스테인드글라스 조각을 렌더링하기 위해, 실제 스테인드글라스 조각 이미지로 구성된 데이터셋에서 해당 영역에 대한 최적 일치 유리 조각을 결정하고, 그 조각의 색과 질감을 해당 영역으로 전이한다. 마지막으로, 각 프레임에서 영역의 경계에 lead came을 적용하면 시간적으로 일관된 스테인드글라스 애니메이션을 생성할 수 있다.

*본 초록은 AI를 통해 원문을 번역한 내용입니다. 정확한 내용은 하기 원문에서 확인해주세요.