| 번호 | 청구항 |
|---|---|
| 1 | 용접점 경로 생성 장치가 용접점 데이터 및 설비 정보 데이터를 입력 받는 단계;상기 용접점 경로 생성 장치가 상기 용접점 데이터 및 상기 설비 정보 데이터를 Actor 네트워크와 Critic 네트워크로 구성된 액터-크리틱(Actor-Critic, AC) 모델 기반 신경망에 상태 변수로서 입력하는 단계; 및상기 용접점 경로 생성 장치가 상기 상태 변수를 기반으로 상기 액터-크리틱 모델 기반 신경망을 통해 용접점 간 이동시간에 대한 정책을 설정하고, 미리 설정된 학습 단위인 에포크(Epoch) 횟수에 따라 미리 설정된 정책의 파라미터를 업데이트함으로써, 용접점 간 이동시간에 따른 용접점 경로를 생성하는 단계;를 포함하는 용접점 경로 생성 방법. |
| 2 | 제1 항에 있어서,상기 용접점 데이터 및 설비 정보 데이터를 입력 받는 단계는,용접점 위치 및 용접점 수요를 포함하는 상기 용접점 데이터를 입력 받는 단계; 및용접 수행 기구의 위치, 용접 수행 기구의 위치 인덱스, 용접 수행 기구의 잔여 용량, 용접 수행 기구의 이동거리 및 용접 수행 기구의 미이동 용접점을 포함하는 상기 설비 정보 데이터를 입력 받는 단계;를 포함하는 용접점 경로 생성 방법. |
| 3 | 제1 항에 있어서,상기 용접점 경로를 생성하는 단계는,상기 액터-크리틱 모델 기반 신경망에 상기 미리 설정된 정책의 파라미터를 기반으로 용접점의 개수를 고려함으로써, 용접 수행 기구가 선택하여 방문 가능한 용접점의 확률 분포인 행동 집합을 설정하는 단계; 및상기 상태 변수 및 상기 행동 집합을 기반으로 총 용접점 개수에 따라 생성되는 경로의 비용(cost)에 대한 보상함수를 설정하는 단계;를 포함하는 용접점 경로 생성 방법. |
| 4 | 제3 항에 있어서,상기 용접점 경로를 생성하는 단계는,상기 상태 변수에 따라 상기 용접 수행 기구가 선택하여 방문한 용접점에 대하여 획득할 수 있는 보상들에 대한 가치함수를 설정하는 단계; 및상기 가치함수 및 상기 보상함수를 연산함으로써, 상기 용접 수행 기구가 선택하여 방문한 경로에 대한 이득함수를 획득하는 단계;를 포함하는 용접점 경로 생성 방법. |
| 5 | 제4 항에 있어서,상기 용접점 경로를 생성하는 단계는,상기 이득함수를 기반으로 상기 액터-크리틱 모델 기반 신경망의 학습률(learning rate) 및 상기 미리 설정된 정책의 파라미터에 대한 그레디언트를 고려하여, 상기 액터-크리틱 모델 기반 신경망의 상기 미리 설정된 정책의 파라미터를 업데이트하는 단계; 및상기 에포크 횟수와 동일하도록 미리 설정된 배치(batch) 횟수에 따라 상기 미리 설정된 정책의 파라미터를 업데이트하는 것을 반복함으로써, 용접점 간 이동시간에 따른 용접점 경로를 생성하는 단계;를 포함하는 용접점 경로 생성 방법. |
| 6 | 제1 항 내지 제5 항 중에 어느 한 항의 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체. |
| 7 | 용접점 경로 생성 장치에 있어서,프로세서(processor); 및상기 프로세서에 의해 수행되는 하나 이상의 명령이 저장된 메모리(memory)를 포함하고,상기 하나 이상의 명령은,용접점 데이터 및 설비 정보 데이터를 입력 받는 단계;상기 용접점 데이터 및 상기 설비 정보 데이터를 Actor 네트워크와 Critic 네트워크로 구성된 액터-크리틱(Actor-Critic, AC) 모델 기반 신경망에 상태 변수로서 입력하는 단계; 및상기 상태 변수를 기반으로 상기 액터-크리틱 모델 기반 신경망을 통해 용접점 간 이동시간에 대한 정책을 설정하고, 미리 설정된 학습 단위인 에포크(Epoch) 횟수에 따라 미리 설정된 정책의 파라미터를 업데이트함으로써, 용접점 간 이동시간에 따른 용접점 경로를 생성하는 단계;를 포함하는 용접점 경로 생성 장치. |
| 8 | 제7 항에 있어서,상기 용접점 데이터 및 설비 정보 데이터를 입력 받는 단계는,용접점 위치 및 용접점 수요를 포함하는 상기 용접점 데이터를 입력 받는 단계; 및용접 수행 기구의 위치, 용접 수행 기구의 위치 인덱스, 용접 수행 기구의 잔여 용량, 용접 수행 기구의 이동거리 및 용접 수행 기구의 미이동 용접점을 포함하는 상기 설비 정보 데이터를 입력 받는 단계;를 포함하는 용접점 경로 생성 장치. |
| 9 | 제7 항에 있어서,상기 용접점 경로를 생성하는 단계는,상기 액터-크리틱 모델 기반 신경망에 상기 미리 설정된 정책의 파라미터를 기반으로 용접점의 개수를 고려함으로써, 용접 수행 기구가 선택하여 방문 가능한 용접점의 확률 분포인 행동 집합을 설정하는 단계; 및상기 상태 변수 및 상기 행동 집합을 기반으로 총 용접점 개수에 따라 생성되는 경로의 비용(cost)에 대한 보상함수를 설정하는 단계;를 포함하는 용접점 경로 생성 장치. |
| 10 | 제9 항에 있어서,상기 용접점 경로를 생성하는 단계는,상기 상태 변수에 따라 상기 용접 수행 기구가 선택하여 방문한 용접점에 대하여 획득할 수 있는 보상들에 대한 가치함수를 설정하는 단계; 및상기 가치함수 및 상기 보상함수를 연산함으로써, 상기 용접 수행 기구가 선택하여 방문한 경로에 대한 이득함수를 획득하는 단계;를 포함하는 용접점 경로 생성 장치. |
| 11 | 제10 항에 있어서,상기 용접점 경로를 생성하는 단계는,상기 이득함수를 기반으로 상기 액터-크리틱 모델 기반 신경망의 학습률(learning rate) 및 상기 미리 설정된 정책의 파라미터에 대한 그레디언트를 고려하여, 상기 액터-크리틱 모델 기반 신경망의 상기 미리 설정된 정책의 파라미터를 업데이트하는 단계; 및상기 에포크 횟수와 동일하도록 미리 설정된 배치(batch) 횟수에 따라 상기 미리 설정된 정책의 파라미터를 업데이트하는 것을 반복함으로써, 용접점 간 이동시간에 따른 용접점 경로를 생성하는 단계;를 포함하는 용접점 경로 생성 장치. |
| 12 | 용접점 데이터 및 설비 정보 데이터를 획득하는 공정 데이터 획득 장치; 및상기 공정 데이터 획득 장치로부터 상기 용접점 데이터 및 상기 설비 정보 데이터를 제공받아 용접점 경로를 생성하는 용접점 경로 생성 장치;를 포함하고,상기 용접점 경로 생성 장치는,상기 용접점 데이터 및 상기 설비 정보 데이터를 입력받고, 상기 용접점 데이터 및 상기 설비 정보 데이터를 Actor 네트워크와 Critic 네트워크로 구성된 액터-크리틱(Actor-Critic, AC) 모델 기반 신경망에 상태 변수로서 입력하고, 상기 상태 변수를 기반으로 상기 액터-크리틱 모델 기반 신경망을 통해 용접점 간 이동시간에 대한 정책을 설정하고, 미리 설정된 학습 단위인 에포크(Epoch) 횟수에 따라 미리 설정된 정책의 파라미터를 업데이트함으로써, 용접점 간 이동시간에 따른 용접점 경로를 생성하는 용접점 경로 생성 시스템. |
| 13 | 제12 항에 있어서,상기 용접점 데이터 및 설비 정보 데이터를 입력 받는 경우,용접점 위치 및 용접점 수요를 포함하는 상기 용접점 데이터를 입력받고, 용접 수행 기구의 위치, 용접 수행 기구의 위치 인덱스, 용접 수행 기구의 잔여 용량, 용접 수행 기구의 이동거리 및 용접 수행 기구의 미이동 용접점을 포함하는 상기 설비 정보 데이터를 입력 받는 용접점 경로 생성 시스템. |
| 14 | 제12 항에 있어서,상기 용접점 경로를 생성하는 경우,상기 액터-크리틱 모델 기반 신경망에 상기 미리 설정된 정책의 파라미터를 기반으로 용접점의 개수를 고려함으로써, 용접 수행 기구가 선택하여 방문 가능한 용접점의 확률 분포인 행동 집합을 설정하고, 상기 상태 변수 및 상기 행동 집합을 기반으로 총 용접점 개수에 따라 생성되는 경로의 비용(cost)에 대한 보상함수를 설정하는 용접점 경로 생성 시스템. |
| 15 | 제14 항에 있어서,상기 용접점 경로를 생성하는 경우,상기 상태 변수에 따라 상기 용접 수행 기구가 선택하여 방문한 용접점에 대하여 획득할 수 있는 보상들에 대한 가치함수를 설정하고, 상기 가치함수 및 상기 보상함수를 연산함으로써, 상기 용접 수행 기구가 선택하여 방문한 경로에 대한 이득함수를 획득하는 용접점 경로 생성 시스템. |
| 16 | 제15 항에 있어서,상기 용접점 경로를 생성하는 경우,상기 이득함수를 기반으로 상기 액터-크리틱 모델 기반 신경망의 학습률(learning rate) 및 상기 미리 설정된 정책의 파라미터에 대한 그레디언트를 고려하여, 상기 액터-크리틱 모델 기반 신경망의 상기 미리 설정된 정책의 파라미터를 업데이트하고, 상기 에포크 횟수와 동일하도록 미리 설정된 배치(batch) 횟수에 따라 상기 미리 설정된 정책의 파라미터를 업데이트하는 것을 반복함으로써, 용접점 간 이동시간에 따른 용접점 경로를 생성하는 용접점 경로 생성 시스템. |