영상 복원 및 디블러링
조성현 연구실의 핵심 연구 중 하나는 카메라 흔들림, 피사체 움직임, 저조도 촬영 등으로 인해 발생하는 블러를 제거하고 선명한 영상을 복원하는 기술이다. 특히 단일 이미지뿐 아니라 연속 프레임을 활용하는 비디오 디블러링까지 포괄하며, 실제 환경에서 발생하는 비균일 모션 블러를 다루는 문제에 강점을 보인다. 이는 스마트폰 촬영, 감시 영상, 자율 시스템용 시각 입력 등 다양한 응용에서 직접적인 성능 향상으로 이어질 수 있는 중요한 주제이다. 이 연구실은 블러에 강인한 움직임 추정, 멀티프레임 정보 결합, 픽셀 볼륨 기반 정합, 반복적 복원 네트워크 등 정교한 컴퓨터 비전 및 딥러닝 방법을 발전시켜 왔다. 대표적으로 흐릿한 프레임 간에서도 정확한 모션 정보를 추정할 수 있도록 설계된 비디오 디블러링 기법과, 단순 워핑의 한계를 극복하기 위해 후보 선명 픽셀 집합을 활용하는 접근은 실제 복원 품질과 안정성을 동시에 높이는 방향을 제시한다. 또한 특허로 이어진 비균일 모션 블러 제거 및 픽셀 볼륨 기반 화질 개선 연구는 이 분야의 기술적 완성도를 보여준다. 이러한 연구는 단순히 시각적 선명도를 높이는 수준을 넘어, 후속 인식·추적·분석 알고리즘의 입력 품질을 개선하는 기반 기술로서 의미가 크다. 앞으로는 생성형 모델, 물리 기반 카메라 모델링, 대규모 비디오 학습과 결합되어 더 복잡한 열화 상황에서도 강건한 복원이 가능해질 것으로 기대된다. 연구실의 축적된 성과는 영상 복원 분야에서 이론과 시스템 구현, 실제 응용을 연결하는 중요한 연구 축을 형성하고 있다.
계산사진학 및 카메라 영상개선
이 연구실은 계산사진학 관점에서 카메라가 획득한 불완전한 영상을 알고리즘적으로 보정하고, 기존 촬영 한계를 극복하는 기술을 활발히 연구한다. 특히 저조도 환경, 노출 부족, 잡음, 광원으로 인한 스트릭 현상, 카메라 흔들림 등 복합 열화가 동시에 나타나는 실제 촬영 조건을 중점적으로 다룬다. 이는 단순한 후처리를 넘어, 촬영 과정 자체를 계산적으로 재해석하여 더 나은 이미지를 생성하려는 접근이라 할 수 있다. 대표 연구로는 저조도 이미지에서 광원 궤적 정보를 활용해 블러 커널을 추정하는 기법이 있으며, 이는 기존 특징점 기반 방법이 잘 작동하지 않는 환경에서 새로운 단서를 제공한다. 더 나아가 신경망 기반 카메라 ISP 연구에서는 전통적인 이미지 신호처리 파이프라인을 대체하거나 보완하여, 복합 열화 복원과 지각적 품질 향상을 동시에 달성하는 방향을 추구한다. 이러한 접근은 이미지 복원, 색감 보정, 노이즈 제거, 선명도 향상 등을 하나의 학습 기반 체계 안에서 통합하려는 점에서 의미가 크다. 계산사진학 연구는 스마트폰 카메라, AR/VR 디바이스, 웨어러블 센서, 로봇 비전 등 실제 장치와 긴밀하게 연결되며 산업적 파급력이 매우 높다. 조성현 연구실의 연구는 물리적 영상 생성 과정에 대한 이해와 딥러닝 기반 복원 기술을 결합함으로써, 현실 환경에서 더 강인하고 사용자 친화적인 영상 획득 기술을 가능하게 한다. 향후에는 멀티센서 융합, 텍스트 조건 기반 이미지 조정, 사용자 의도 반영형 촬영 보조 기술로 확장될 가능성이 크다.
지능형 비디오 처리와 시청 경험 향상
조성현 연구실은 정적인 이미지 복원을 넘어, 연속적인 비디오를 더 잘 이해하고 더 편리하게 소비할 수 있도록 만드는 지능형 비디오 처리 기술도 연구한다. 360도 비디오 재생에서 사용자가 중요한 장면을 놓치지 않도록 자동으로 시점을 안내하거나, 멀티카메라 영상을 활용해 초해상도 비디오를 생성하는 연구는 대표적인 예이다. 이러한 연구는 영상 자체의 품질 개선과 더불어 사용자 경험을 적극적으로 설계한다는 점에서 차별화된다. 기술적으로는 시각적 현저성 분석, 광류 추정, 카메라 경로 최적화, 참조 기반 초해상도, 다중 시점 정보 융합, 딥러닝 기반 비디오 편집 등이 주요 방법론으로 사용된다. 360도 영상 내비게이션 연구는 오프라인 분석과 온라인 반응형 제어를 결합해 실시간성까지 고려하며, 멀티카메라 비디오 초해상도 연구는 서로 다른 시점에서 얻은 정보를 정렬·통합하여 단일 카메라 기반 방법보다 풍부한 복원 성능을 추구한다. 최근의 ROI 기반 비디오 편집, 텍스트 기반 톤 조정, 컬러화 연구도 비디오·이미지 콘텐츠를 보다 유연하게 다루는 방향으로 확장되고 있다. 이 분야의 연구는 몰입형 미디어, 디지털 콘텐츠 제작, 방송, 원격 협업, 메타버스 등 다양한 응용에서 핵심 역할을 한다. 사용자는 수동 조작 부담을 줄이면서 더 자연스럽고 높은 품질의 영상을 경험할 수 있고, 제작자는 더 적은 비용으로 고품질 결과물을 얻을 수 있다. 결과적으로 이 연구실은 컴퓨터 비전과 그래픽스를 연결하여 영상의 생성, 복원, 탐색, 편집 전 과정을 지능화하는 연구를 수행하고 있다고 볼 수 있다.