제11 항에 있어서,상기 보상을 결정하는 단계는, 비용 보상을 계산하는 단계를 포함하고,상기 비용 보상은, 상기 제3 시점부터 상기 제2 시점까지 상기 에너지 저장 장치를 사용함으로써 절약된 일반 전력 비용이 클수록 큰, 강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치의 동작 방법.

강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치로서,저장부; 및프로세서;를 포함하고,상기 프로세서는,인공 신경망을 이용해 제1 시점과 제2 시점 사이의 에너지 저장 장치의 충방전량을 결정하고,상기 제2 시점 이전의 제3 시점부터 상기 제2 시점 사이의 시간에 따른 전력 소비량, 상기 제3 시점부터 상기 제2 시점 사이의 시간에 따른 신재생 에너지 발전량, 상기 제3 시점부터 상기 제2 시점 사이의 시간에 따른 상기 에너지 저장 장치의 충방전량, 상기 제3 시점부터 상기 제2 시점 사이의 시간에 따른 일반 전력의 전력량당 요금, 및 상기 제2 시점에서 상기 에너지 저장 장치의 충전률에 기초해 보상을 결정하고,상기 보상을 이용해 상기 인공 신경망을 수정하는, 강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치.

제1 항에 있어서,상기 프로세서는,상기 보상을 결정하기 위해, 비용 보상을 결정하고,상기 비용 보상은, 상기 제3 시점부터 상기 제2 시점까지 상기 에너지 저장 장치를 사용함으로써 절약된 일반 전력 비용이 클수록 큰, 강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치.

제2 항에 있어서,상기 프로세서는,상기 보상을 결정하기 위해, 상기 제2 시점에서 상기 에너지 저장 장치의 충전률이 최대 충전률 보다 큰 경우, 과충전 패널티를 결정하고,상기 과충전 패널티의 절댓값은 상기 제2 시점에서 상기 에너지 저장 장치의 충전률과 상기 최대 충전률 사이의 차이가 클수록 큰, 강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치.

제2 항에 있어서,상기 프로세서는, 상기 보상을 결정하기 위해,상기 제2 시점에서 상기 에너지 저장 장치의 충전률이 최소 충전률 보다 작은 경우, 과방전 패널티를 결정하고,상기 과방전 패널티의 절댓값은 상기 제2 시점에서 상기 에너지 저장 장치의 충전률과 상기 최소 충전률 사이의 차이가 클수록 큰, 강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치.

제2 항에 있어서,상기 제3 시점부터 상기 제2 시점까지 상기 에너지 저장 장치를 사용함으로써 절약된 일반 전력 비용은, 상기 제3 시점과 상기 제2 시점 사이의 시간에 따른 상기 에너지 저장 장치의 충방전량과 시간에 따른 일반 전력의 전력량당 요금의 곱에 의해 결정되는, 강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치.

제2 항에 있어서,상기 비용 보상은, 상기 제3 시점부터 상기 제2 시점 사이의 시간에 따른 전력 소비량에서 시간에 따른 신재생 에너지 발전량을 뺀 값에 시간에 따른 일반 전력의 전력량당 요금을 곱한 값을 상기 제3 시점부터 상기 제2 시점 사이의 일반 전력 비용으로 나눈 값에 의해 결정되는, 강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치.

제1 항에 있어서,상기 프로세서는, 상태에 따라 상기 인공 신경망을 이용해 상기 제1 시점과 상기 제2 시점 사이의 상기 에너지 저장 장치의 충방전량을 결정하고,상기 상태는, 상기 제1 시점 이전의 제4 시점과 상기 제1 시점 사이의 시간에 따른 전력 소비량, 상기 제4 시점과 상기 제1 시점 사이의 시간에 따른 신재생 에너지 발전량, 상기 제4 시점과 상기 제1 시점 사이의 시간에 따른 상기 에너지 저장 장치의 충방전량, 상기 제1 시점에서 상기 에너지 저장 장치의 충전률, 및 현재 시간 중 적어도 하나를 포함하는, 강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치.

제1 항에 있어서,상기 충방전량은, 충전의 경우 상기 충방전량의 절댓값은 충전량이고, 방전의 경우 상기 충방전량의 절댓값은 방전량이고, 충전인 경우 상기 충방전량의 부호와 방전인 경우 상기 충방전량의 부호가 반대가 되도록 정의되는, 강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치.

제1 항에 있어서,상기 신재생 에너지는 태양광 에너지를 포함하는, 강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치.

제1 항에 있어서,상기 에너지 저장 장치는 배터리를 포함하는, 강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치.

강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치의 동작 방법으로서,인공 신경망을 이용해 제1 시점과 제2 시점 사이의 에너지 저장 장치의 충방전량을 결정하는 단계;상기 제2 시점 이전의 제3 시점부터 상기 제2 시점 사이의 시간에 따른 전력 소비량, 상기 제3 시점부터 상기 제2 시점 사이의 시간에 따른 신재생 에너지 발전량, 상기 제3 시점부터 상기 제2 시점 사이의 시간에 따른 상기 에너지 저장 장치의 충방전량, 상기 제3 시점부터 상기 제2 시점 사이의 시간에 따른 일반 전력의 전력량당 요금, 및 상기 제2 시점에서 상기 에너지 저장 장치의 충전률에 기초해 보상을 결정하는 단계; 및상기 보상을 이용해 상기 인공 신경망을 수정하는 단계;를 포함하는, 강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치의 동작 방법.

제12 항에 있어서,상기 보상을 결정하는 단계는,상기 제2 시점에서 상기 에너지 저장 장치의 충전률이 최대 충전률 보다 큰 경우, 과충전 패널티를 계산하는 단계를 더 포함하고,상기 과충전 패널티의 절댓값은 상기 제2 시점에서 상기 에너지 저장 장치의 충전률과 상기 최대 충전률 사이의 차이가 클수록 큰, 강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치의 동작 방법.

제12 항에 있어서,상기 보상을 결정하는 단계는,상기 제2 시점에서 상기 에너지 저장 장치의 충전률이 최소 충전률 보다 작은 경우, 과방전 패널티를 계산하는 단계를 더 포함하고,상기 과방전 패널티의 절댓값은 상기 제2 시점에서 상기 에너지 저장 장치의 충전률과 상기 최소 충전률 사이의 차이가 클수록 큰, 강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치의 동작 방법.

제12 항에 있어서,상기 제3 시점부터 상기 제2 시점까지 상기 에너지 저장 장치를 사용함으로써 절약된 일반 전력 비용은, 상기 제3 시점과 상기 제2 시점 사이의 시간에 따른 상기 에너지 저장 장치의 충방전량과 시간에 따른 일반 전력의 전력량당 요금의 곱에 의해 결정되는, 강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치의 동작 방법.

제12 항에 있어서,상기 비용 보상은, 상기 제3 시점부터 상기 제2 시점 사이의 시간에 따른 전력 소비량에서 시간에 따른 신재생 에너지 발전량을 뺀 값에 시간에 따른 일반 전력의 전력량당 요금을 곱한 값을 상기 제3 시점부터 상기 제2 시점 사이의 일반 전력 비용으로 나눈 값에 의해 결정되는, 강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치의 동작 방법.

제11 항에 있어서,상기 충방전량을 결정하는 단계는, 상태에 따라 상기 인공 신경망을 이용해 상기 제1 시점과 상기 제2 시점 사이의 상기 에너지 저장 장치의 상기 충방전량을 결정하는 단계를 포함하고,상기 상태는, 상기 제1 시점 이전의 제4 시점과 상기 제1 시점 사이의 시간에 따른 전력 소비량, 상기 제4 시점과 상기 제1 시점 사이의 시간에 따른 신재생 에너지 발전량, 상기 제4 시점과 상기 제1 시점 사이의 시간에 따른 상기 에너지 저장 장치의 충방전량, 상기 제1 시점에서 상기 에너지 저장 장치의 충전률, 및 현재 시간 중 적어도 하나를 포함하는, 강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치의 동작 방법.

제11 항에 있어서,상기 충방전량은, 충전의 경우 상기 충방전량의 절댓값은 충전량이고, 방전의 경우 상기 충방전량의 절댓값은 방전량이고, 충전인 경우 상기 충방전량의 부호와 방전인 경우 상기 충방전량의 부호가 반대가 되도록 정의되는, 강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치의 동작 방법.

제11 항에 있어서,상기 신재생 에너지는 태양광 에너지를 포함하는, 강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치의 동작 방법.

제11 항에 있어서,상기 에너지 저장 장치는 배터리를 포함하는, 강화 학습을 이용한 스마트 전력 시스템 제어 최적화를 위한 전자 장치의 동작 방법.

전자 장치의 프로세서에 의해 실행되는 경우 상기 전자 장치의 동작을 수행하도록 하는 컴퓨터 명령을 저장하는 비일시적 컴퓨터 판독 가능 매체에 있어서, 상기 동작은,인공 신경망을 이용해 제1 시점과 제2 시점 사이의 에너지 저장 장치의 충방전량을 결정하는 단계;시간에 따른 전력 소비량, 시간에 따른 신재생 에너지 발전량, 시간에 따른 상기 에너지 저장 장치의 충방전량, 시간에 따른 일반 전력의 전력량당 요금, 및 상기 제2 시점에서 상기 에너지 저장 장치의 충전률에 기초해 보상을 결정하는 단계; 및상기 보상을 이용해 상기 인공 신경망을 수정하는 단계;를 포함하는, 비일시적 컴퓨터 판독 가능 매체.