SPOT 용접점의 최적 경로 생성 방법 및 시스템
Method for planning optimal path of spot welding points and system thereof
특허 요약
본 발명은 SPOT 용접점의 최적 경로 생성 방법 및 시스템에 관한 것으로, 용접점 경로 생성 장치는, 용접점 데이터 및 설비 정보 데이터를 입력 받고, 용접점 데이터 및 정보 데이터를 Actor 네트워크와 Critic 네트워크로 구성된 액터-크리틱(Actor-Critic, AC) 모델 기반 신경망에 상태 변수로서 입력하고, 상태 변수를 기반으로 액터-크리틱 모델 기반 신경망을 통해 용접점 간 이동시간에 대한 정책을 설정하고, 미리 설정된 학습 단위인 에포크(Epoch) 횟수에 따라 미리 설정된 정책의 파라미터를 업데이트함으로써, 용접점 간 이동시간에 따른 용접점 경로를 생성할 수 있다.
청구항
번호청구항
1

용접점 경로 생성 장치가 용접점 데이터 및 설비 정보 데이터를 입력 받는 단계;상기 용접점 경로 생성 장치가 상기 용접점 데이터 및 상기 설비 정보 데이터를 Actor 네트워크와 Critic 네트워크로 구성된 액터-크리틱(Actor-Critic, AC) 모델 기반 신경망에 상태 변수로서 입력하는 단계; 및상기 용접점 경로 생성 장치가 상기 상태 변수를 기반으로 상기 액터-크리틱 모델 기반 신경망을 통해 용접점 간 이동시간에 대한 정책을 설정하고, 미리 설정된 학습 단위인 에포크(Epoch) 횟수에 따라 미리 설정된 정책의 파라미터를 업데이트함으로써, 용접점 간 이동시간에 따른 용접점 경로를 생성하는 단계;를 포함하는 용접점 경로 생성 방법.

2

제1 항에 있어서,상기 용접점 데이터 및 설비 정보 데이터를 입력 받는 단계는,용접점 위치 및 용접점 수요를 포함하는 상기 용접점 데이터를 입력 받는 단계; 및용접 수행 기구의 위치, 용접 수행 기구의 위치 인덱스, 용접 수행 기구의 잔여 용량, 용접 수행 기구의 이동거리 및 용접 수행 기구의 미이동 용접점을 포함하는 상기 설비 정보 데이터를 입력 받는 단계;를 포함하는 용접점 경로 생성 방법.

3

제1 항에 있어서,상기 용접점 경로를 생성하는 단계는,상기 액터-크리틱 모델 기반 신경망에 상기 미리 설정된 정책의 파라미터를 기반으로 용접점의 개수를 고려함으로써, 용접 수행 기구가 선택하여 방문 가능한 용접점의 확률 분포인 행동 집합을 설정하는 단계; 및상기 상태 변수 및 상기 행동 집합을 기반으로 총 용접점 개수에 따라 생성되는 경로의 비용(cost)에 대한 보상함수를 설정하는 단계;를 포함하는 용접점 경로 생성 방법.

4

제3 항에 있어서,상기 용접점 경로를 생성하는 단계는,상기 상태 변수에 따라 상기 용접 수행 기구가 선택하여 방문한 용접점에 대하여 획득할 수 있는 보상들에 대한 가치함수를 설정하는 단계; 및상기 가치함수 및 상기 보상함수를 연산함으로써, 상기 용접 수행 기구가 선택하여 방문한 경로에 대한 이득함수를 획득하는 단계;를 포함하는 용접점 경로 생성 방법.

5

제4 항에 있어서,상기 용접점 경로를 생성하는 단계는,상기 이득함수를 기반으로 상기 액터-크리틱 모델 기반 신경망의 학습률(learning rate) 및 상기 미리 설정된 정책의 파라미터에 대한 그레디언트를 고려하여, 상기 액터-크리틱 모델 기반 신경망의 상기 미리 설정된 정책의 파라미터를 업데이트하는 단계; 및상기 에포크 횟수와 동일하도록 미리 설정된 배치(batch) 횟수에 따라 상기 미리 설정된 정책의 파라미터를 업데이트하는 것을 반복함으로써, 용접점 간 이동시간에 따른 용접점 경로를 생성하는 단계;를 포함하는 용접점 경로 생성 방법.

6

제1 항 내지 제5 항 중에 어느 한 항의 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체.

7

용접점 경로 생성 장치에 있어서,프로세서(processor); 및상기 프로세서에 의해 수행되는 하나 이상의 명령이 저장된 메모리(memory)를 포함하고,상기 하나 이상의 명령은,용접점 데이터 및 설비 정보 데이터를 입력 받는 단계;상기 용접점 데이터 및 상기 설비 정보 데이터를 Actor 네트워크와 Critic 네트워크로 구성된 액터-크리틱(Actor-Critic, AC) 모델 기반 신경망에 상태 변수로서 입력하는 단계; 및상기 상태 변수를 기반으로 상기 액터-크리틱 모델 기반 신경망을 통해 용접점 간 이동시간에 대한 정책을 설정하고, 미리 설정된 학습 단위인 에포크(Epoch) 횟수에 따라 미리 설정된 정책의 파라미터를 업데이트함으로써, 용접점 간 이동시간에 따른 용접점 경로를 생성하는 단계;를 포함하는 용접점 경로 생성 장치.

8

제7 항에 있어서,상기 용접점 데이터 및 설비 정보 데이터를 입력 받는 단계는,용접점 위치 및 용접점 수요를 포함하는 상기 용접점 데이터를 입력 받는 단계; 및용접 수행 기구의 위치, 용접 수행 기구의 위치 인덱스, 용접 수행 기구의 잔여 용량, 용접 수행 기구의 이동거리 및 용접 수행 기구의 미이동 용접점을 포함하는 상기 설비 정보 데이터를 입력 받는 단계;를 포함하는 용접점 경로 생성 장치.

9

제7 항에 있어서,상기 용접점 경로를 생성하는 단계는,상기 액터-크리틱 모델 기반 신경망에 상기 미리 설정된 정책의 파라미터를 기반으로 용접점의 개수를 고려함으로써, 용접 수행 기구가 선택하여 방문 가능한 용접점의 확률 분포인 행동 집합을 설정하는 단계; 및상기 상태 변수 및 상기 행동 집합을 기반으로 총 용접점 개수에 따라 생성되는 경로의 비용(cost)에 대한 보상함수를 설정하는 단계;를 포함하는 용접점 경로 생성 장치.

10

제9 항에 있어서,상기 용접점 경로를 생성하는 단계는,상기 상태 변수에 따라 상기 용접 수행 기구가 선택하여 방문한 용접점에 대하여 획득할 수 있는 보상들에 대한 가치함수를 설정하는 단계; 및상기 가치함수 및 상기 보상함수를 연산함으로써, 상기 용접 수행 기구가 선택하여 방문한 경로에 대한 이득함수를 획득하는 단계;를 포함하는 용접점 경로 생성 장치.

11

제10 항에 있어서,상기 용접점 경로를 생성하는 단계는,상기 이득함수를 기반으로 상기 액터-크리틱 모델 기반 신경망의 학습률(learning rate) 및 상기 미리 설정된 정책의 파라미터에 대한 그레디언트를 고려하여, 상기 액터-크리틱 모델 기반 신경망의 상기 미리 설정된 정책의 파라미터를 업데이트하는 단계; 및상기 에포크 횟수와 동일하도록 미리 설정된 배치(batch) 횟수에 따라 상기 미리 설정된 정책의 파라미터를 업데이트하는 것을 반복함으로써, 용접점 간 이동시간에 따른 용접점 경로를 생성하는 단계;를 포함하는 용접점 경로 생성 장치.

12

용접점 데이터 및 설비 정보 데이터를 획득하는 공정 데이터 획득 장치; 및상기 공정 데이터 획득 장치로부터 상기 용접점 데이터 및 상기 설비 정보 데이터를 제공받아 용접점 경로를 생성하는 용접점 경로 생성 장치;를 포함하고,상기 용접점 경로 생성 장치는,상기 용접점 데이터 및 상기 설비 정보 데이터를 입력받고, 상기 용접점 데이터 및 상기 설비 정보 데이터를 Actor 네트워크와 Critic 네트워크로 구성된 액터-크리틱(Actor-Critic, AC) 모델 기반 신경망에 상태 변수로서 입력하고, 상기 상태 변수를 기반으로 상기 액터-크리틱 모델 기반 신경망을 통해 용접점 간 이동시간에 대한 정책을 설정하고, 미리 설정된 학습 단위인 에포크(Epoch) 횟수에 따라 미리 설정된 정책의 파라미터를 업데이트함으로써, 용접점 간 이동시간에 따른 용접점 경로를 생성하는 용접점 경로 생성 시스템.

13

제12 항에 있어서,상기 용접점 데이터 및 설비 정보 데이터를 입력 받는 경우,용접점 위치 및 용접점 수요를 포함하는 상기 용접점 데이터를 입력받고, 용접 수행 기구의 위치, 용접 수행 기구의 위치 인덱스, 용접 수행 기구의 잔여 용량, 용접 수행 기구의 이동거리 및 용접 수행 기구의 미이동 용접점을 포함하는 상기 설비 정보 데이터를 입력 받는 용접점 경로 생성 시스템.

14

제12 항에 있어서,상기 용접점 경로를 생성하는 경우,상기 액터-크리틱 모델 기반 신경망에 상기 미리 설정된 정책의 파라미터를 기반으로 용접점의 개수를 고려함으로써, 용접 수행 기구가 선택하여 방문 가능한 용접점의 확률 분포인 행동 집합을 설정하고, 상기 상태 변수 및 상기 행동 집합을 기반으로 총 용접점 개수에 따라 생성되는 경로의 비용(cost)에 대한 보상함수를 설정하는 용접점 경로 생성 시스템.

15

제14 항에 있어서,상기 용접점 경로를 생성하는 경우,상기 상태 변수에 따라 상기 용접 수행 기구가 선택하여 방문한 용접점에 대하여 획득할 수 있는 보상들에 대한 가치함수를 설정하고, 상기 가치함수 및 상기 보상함수를 연산함으로써, 상기 용접 수행 기구가 선택하여 방문한 경로에 대한 이득함수를 획득하는 용접점 경로 생성 시스템.

16

제15 항에 있어서,상기 용접점 경로를 생성하는 경우,상기 이득함수를 기반으로 상기 액터-크리틱 모델 기반 신경망의 학습률(learning rate) 및 상기 미리 설정된 정책의 파라미터에 대한 그레디언트를 고려하여, 상기 액터-크리틱 모델 기반 신경망의 상기 미리 설정된 정책의 파라미터를 업데이트하고, 상기 에포크 횟수와 동일하도록 미리 설정된 배치(batch) 횟수에 따라 상기 미리 설정된 정책의 파라미터를 업데이트하는 것을 반복함으로써, 용접점 간 이동시간에 따른 용접점 경로를 생성하는 용접점 경로 생성 시스템.