스마트공장용 MES에 지능형 RPA 및 비전 기술을 융합한 생산 관리 시스템으로서,생산 현장의 품질 검사 관련 상태 정보를 표시하는 디스플레이 모듈,상기 디스플레이 모듈에 표시되는 영상 이미지를 촬영하는 촬영 모듈,네트워크를 통해 상기 촬영 모듈에서 촬영된 영상 이미지를 수신하여 텍스트 데이터를 추출하는 관리 서버, 상기 관리 서버에서 추출한 텍스트 데이터를 저장하는 데이터베이스,네트워크를 통해 상기 관리 서버에서 추출한 텍스트 데이터에 대한 정보 수신하는 관리자 단말기를 포함하고, 상기 디스플레이 모듈은 정보 추출을 위한 연결 단자가 마련되지 않아 정보를 추출하기 위한 직접 연결이 불가능한 계측 기기 또는 교체 불가능한 구형의 모니터이고, 상기 촬영 모듈은 거치대에 의해 상기 디스플레이 모듈의 전면에 고정되게 마련된 CCTV이고, 상기 촬영 모듈에서 촬영된 영상 이미지는 녹화 기록을 위해 영상 이미지를 압축 저장하는 NVR에 저장되고, 네트워크에 접속되어 상기 관리 서버에 의해 추출된 문자, 숫자, 도형, 영상 데이터는 NAS(Network Attached Storage)에 저장되며, 상기 관리 서버는 인공지능 기반의 객체 추출(object detection) 알고리즘을 이용하여 상기 영상 이미지에 포함된 문자, 숫자, 도형, 영상 데이터를 추출하는 영상 처리부를 포함하고,상기 영상 처리부는 시계열적으로 획득되는 영상 이미지를 초 단위의 시간 구간으로 분할하고, 분할된 영상 이미지 각각에 대응하는 패턴에 따라 생산 관리의 프로세스를 수행하는 구간 및 미수행하는 구간을 식별하여 영상을 처리하는 것을 특징으로 하는 생산 관리 시스템.