동영상 검토 시스템, 방법 그리고 프로그램
Video review system, method and program
특허 요약
본 발명의 일 실시예에 따른 동영상 검토 방법은, 사용자단말기 화면에 실행된 동영상 검토 프로그램은 확인 및 검토하려는 동영상 파일을 사용자가 입력하면, 해당 동영상 파일을 분석하여 영상 데이터와 음성 데이터 부분으로 추출하는 단계; 상기 동영상 검토 프로그램은 추출된 영상 데이터에서 사용자가 입력한 검토 시간 간격 단위로 적어도 하나의 구간별 동영상 정지 화면을 추출하여 사용자단말기 화면에 출력하는 단계; 상기 동영상 검토 프로그램은 추출된 음성 데이터에서 상기 구간별 동영상 정지 화면에 해당하는 해당 구간별 자막 정보와 음량 정보를 별도로 생성하는 단계; 해당 부분의 동영상 정지 화면별로 구분하여 구간별 동영상 정지 화면, 자막 정보, 음량 정보를 사용자 단말기 화면에 출력하는 단계를 포함한다.
청구항
번호청구항
1

사용자단말기 화면에 실행된 동영상 검토 프로그램은 확인 및 검토하려는 동영상 파일을 사용자가 입력하면, 해당 동영상 파일을 분석하여 영상 데이터와 음성 데이터 부분으로 추출하는 단계;상기 동영상 검토 프로그램은 추출된 영상 데이터에서 사용자가 입력한 검토 시간 간격 단위로 적어도 하나의 구간별 동영상 정지 화면을 추출하여 사용자단말기 화면에 출력하는 단계;상기 동영상 검토 프로그램은 추출된 음성 데이터에서 상기 구간별 동영상 정지 화면에 해당하는 해당 구간별 자막 정보와 음량 정보를 별도로 생성하는 단계;해당 부분의 동영상 정지 화면별로 구분하여 구간별 동영상 정지 화면, 자막 정보, 음량 정보를 사용자 단말기 화면에 출력하는 단계;를 포함하며,상기 동영상 검토 프로그램은 검토할 동영상 파일 분석을 통해 음성 데이터를 추출하는 단계; 상기 동영상 검토 프로그램은 음성 데이터를 사용자가 입력한 검토 시간 간격과 자막 출력 시간에 따라 구간별로 PCM 데이터를 생성하여 서비스제공서버로 전송하는 단계;상기 서비스제공서버는 수신한 PCM 데이터를 STT 엔진에 입력하고 STT 변환 결과를 생성하여 상기 동영상 검토 프로그램이 실행된 사용자단말기로 전송하는 단계;상기 동영상 검토 프로그램은 STT 변환 결과를 구간별로 나눠 출력하여 동영상 검토 시간 간격에 해당하는 구간별로 자막 정보를 표시하여 제공하는 단계;를 더 포함하고,상기 사용자단말기에서 검토할 동영상에서 추출한 음성의 STT 변환을 위해 상기 STT 엔진에 요청시, 원하는 국가 언어를 선택할 수 있도록 하여 변환할 언어정보를 같이 전송하고, 상기 STT 엔진은 해당 언어로 변환된 상기 STT 변환 결과를 제공하되, 복수의 언어에 대해서 요청 시 복수의 변환 결과를 제공하고,상기 사용자단말기에서 확인되는 상기 구간별 자막 정보의 오류는 구간별 해당 음성 정보를 체크하는 사용자 수정 변환을 통해 자막 교정이 이루어지며, 상기 자막 정보와 상기 구간별 동영상 정지 화면에 대해 매칭을 통해 해당 구간의 자막에 해당하는지 체크하여 자막 싱크 조정이 이루어지고,상기 동영상 검토 프로그램이 상기 사용자단말기에서 웹기반 형태로 실행될 경우 상기 서비스제공서버에서 로그인 인증을 수행하되, 다수의 블록체인서버와 연계하여 블록체인망을 구축하여, 기구축된 내부의 블록체인 네트워크를 통해 공개키 및 개인키를 생성하여 해쉬값으로 변환하여 분산 저장하고, 분산 저장된 공개키와 사용자의 개인정보를 기반으로 사용자 로그인 인증을 수행하며, 다수의 상기 사용자단말기에서 공개키와 함께 개인 고유의 사용자 정보를 전송받아 상기 사용자 정보에 대한 해쉬값을 포함하는 사용자 인증서를 각각 생성하되, 각각의 상기 사용자 인증서에 대한 저장 방식은 머클 트리 구조에 의해 이루어지는를 포함하는 동영상 검토 방법.

2

제1항에 있어서,상기 동영상 검토 프로그램은동영상에 대한 정보를 표시하도록 동영상 재생 화면, 동영상 재생 관련 메뉴, 동영상 파일에 대한 정보를 표시하는 동영상정보부와,상기 동영상정보부에 표시되는 동영상 검토시, 해당 동영상 검토 시간 간격을 입력받도록 표시하고, 현재 출력되는 자막이 동영상의 재생 시간 구간 어디에 해당하는지 확인할 수 있는 자막출력시간을 표시하는 시간표시부와,상기 동영상정보부에 표시되는 동영상 검토시, 상기 시간표시부에서 입력된 동영상 검토 시간 간격에 대한 해당 구간별 적어도 하나의 동영상 정지 화면, 자막 정보, 음량정보를 포함한 구간정보를 표시하는 구간정보부를 포함하는 것을 특징으로 하는 동영상 검토 방법.

3

삭제

4

제1항 또는 제2항의 동영상 검토 방법을 수행하는 컴퓨터로 읽을 수 있는 저장매체에 저장된 동영상 검토 프로그램.

5

제1항 또는 제2항의 동영상 검토 방법을 이용한 동영상 검토 시스템에 있어서,동영상 검토 프로그램이 실행되는 사용자단말기와 통신망을 통하여 연결되고, 사용자단말기에서 실행된 동영상 검토 프로그램이 검토할 동영상에서 추출한 음성을 자막 텍스트 변환 요청시, 해당 음성에 대한 자막 텍스트 변환을 수행하기 위한 STT 엔진을 구비하는 서비스제공서버를 포함하는 동영상 검토 시스템.

6

제5항에 있어서,상기 서비스제공서버는통신망을 통하여 사용자단말기와 통신하고, 동영상 검토 서비스를 제공하는데 필요한 정보의 데이터 통신을 수행하기 위한 적어도 하나의 통신 프로토콜을 구비한 통신부;STT 엔진을 구비하여 검토할 동영상에 대한 음성-자막 텍스트 변환을 수행하고, STT 변환 결과를 통신부를 통하여 사용자단말기 측으로 전송하도록 제공하는 관리부;상기 동영상 검토 프로그램에서 구현되는 유저 인터페이스에 대한 제어 기능을 수행하며, 동영상 검토 프로그램을 통하여 사용자 입력 동작에 따라 동영상 정지 화면부터 동영상을 재생하거나 음량 정보를 재생하며, 자막 정보에 대해서 사용자 입력 동작을 수행하면 해당 자막 정보의 텍스트를 직접 다시 입력하여 수정할 수 있도록 인터페이스를 제공하는 표시제어부를 포함하는 동영상 검토 시스템.

7

제6항에 있어서,상기 서비스제공서버는동영상 검토 프로그램을 제공함에 따라 동영상 검토 내역에 대해 수집하고, 사용자 요청시 해당 정보를 조회할 수 있도록 관리하며, 동영상 검토 내역에는 동영상 수정 내용, 해당 동영상 정보를 포함함과 아울러, 동영상 검토 결과에 대한 사용자 평가나 만족도를 더 포함하며, 수집된 동영상 검토 내역을 이용하여 머신러닝 기반의 학습을 수행할 수 있으며, 학습 결과로서 동영상 검토 프로그램의 문제나 오류에 대한 결과를 판단하여 관리자에게 제공하는 통계학습부를 더 포함하는 동영상 검토 시스템.