프로젝트 소개
본 과제는 CCTV 영상과 자연어를 함께 이해하는 AI를 개발하여, 미리 학습하지 않은 상황도 찾아내는 Zero-shot 지능형 선별관제 시스템을 구축하는 연구임. 영상 속 사람, 사물, 행동 등의 정보를 효과적으로 분석하고 검색하는 기술 개발을 통해 다양한 관제 환경에 대응하는 것이 핵심임.
연구 목표는 Zero-shot 지능형 선별관제를 위한 Multimodal 파운데이션 모델과 AI 가속기를 개발하는 데 있음. 핵심 연구 내용은 Auto Labeling 기반 Multimodal Corpus 및 Human Feedback 데이터 구축, Local Information 추출이 가능한 지능형 선별관제 특화 VLM 연구, VLM 하드웨어 최적화, 벡터 검색 특화 연산기 개발, 서비스 데모 구현임. 기대 효과는 이미지·자연어 멀티모달 임베딩과 RLHF를 활용한 검색 정확도 향상, 실제 CCTV 환경에 강한 AI 모델 확보, 국내 AI HW 및 데이터 분석 기술 경쟁력 강화임. 또한 스마트시티와 ITS 등 연관시장으로의 확산 및 글로벌 영상분석 시장 진출 기반 마련임.