| 1 |
1
개방형 전력 거래 시장에서 심층 강화 학습을 기반으로 판매자와 구매자의 전력 거래 희망 가격을 조정하는 양방향 전력 거래 장치에 의해 수행되는 양방향 전력 거래 방법으로서,상기 판매자의 전력 판매 예약 가격 및 상기 구매자의 전력 구매 예약 가격을 획득하는 단계; 및상기 전력 판매 예약 가격 및 상기 전력 구매 예약 가격을 기반으로, 심층 강화 학습 기반 전력 거래 가격 조정 모델을 이용하여 상기 판매자와 상기 구매자의 전력 거래 희망 가격을 조정하는 단계;를 포함하는 스마트 빌딩 시스템을 위한 심층 강화 학습 기반 양방향 전력 거래 방법
|
| 2 |
2
제1항에서,상기 심층 강화 학습 기반 전력 거래 가격 조정 모델은,상기 전력 판매 예약 가격을 기반으로 획득된 상기 판매자의 전력 거래 희망 가격 및 상기 전력 구매 예약 가격을 기반으로 획득된 상기 구매자의 전력 거래 희망 가격을 상태(state)로 설정하는,스마트 빌딩 시스템을 위한 심층 강화 학습 기반 양방향 전력 거래 방법
|
| 3 |
3
제2항에서,상기 심층 강화 학습 기반 전력 거래 가격 조정 모델은,상기 전력 판매 예약 가격, 전력 거래 시장에서의 가격 최대치 및 제1 범위 내에서 결정된 제1 소수를 이용하여 상기 판매자의 전력 거래 희망 가격을 획득하고,상기 전력 구매 예약 가격, 전력 거래 시장에서의 가격 최저치 및 제2 범위 내에서 결정된 제2 소수를 이용하여 상기 구매자의 전력 거래 희망 가격을 획득하는,스마트 빌딩 시스템을 위한 심층 강화 학습 기반 양방향 전력 거래 방법
|
| 4 |
4
제2항에서,상기 심층 강화 학습 기반 전력 거래 가격 조정 모델은,미리 설정된 스텝 크기(step size)만큼 상기 상태(state)를 조정하도록 액션(action)을 설정하는,스마트 빌딩 시스템을 위한 심층 강화 학습 기반 양방향 전력 거래 방법
|
| 5 |
5
제4항에서,상기 심층 강화 학습 기반 전력 거래 가격 조정 모델은,상기 판매자의 전력 거래 희망 가격을 기반으로 제1 스텝 크기(step size)를 이용하여 획득된 복수개의 상기 액션(action) 및 상기 구매자의 전력 거래 희망 가격을 기반으로 제2 스텝 크기(step size)를 이용하여 획득된 복수개의 상기 액션(action) 중에서 상기 액션(action)을 선택하는,스마트 빌딩 시스템을 위한 심층 강화 학습 기반 양방향 전력 거래 방법
|
| 6 |
6
제5항에서,상기 심층 강화 학습 기반 전력 거래 가격 조정 모델은,미리 설정된 스텝(step) 상수 및 상기 판매자의 전력 거래 희망 가격에 대한 변동 의향 정도(eagerness) 값을 이용하여 상기 제1 스텝 크기(step size)를 획득하고,상기 스텝(step) 상수 및 상기 구매자의 전력 거래 희망 가격에 대한 변동 의향 정도(eagerness) 값을 이용하여 상기 제2 스텝 크기(step size)를 획득하는,스마트 빌딩 시스템을 위한 심층 강화 학습 기반 양방향 전력 거래 방법
|
| 7 |
7
제4항에서,상기 심층 강화 학습 기반 전력 거래 가격 조정 모델은,상기 판매자의 전력 거래 희망 가격 및 상기 구매자의 전력 거래 희망 가격의 차이가 작아질수록 보상(reward)이 커지도록 상기 보상(reward)을 설정하는,스마트 빌딩 시스템을 위한 심층 강화 학습 기반 양방향 전력 거래 방법
|
| 8 |
8
제1항에서,상기 전력 거래 희망 가격 조정 단계는,DQN(Deep Q Network) 알고리즘을 이용하는 상기 심층 강화 학습 기반 전력 거래 가격 조정 모델을 기반으로, 미리 설정된 개수의 에피소드(episode) 별로 미리 설정된 조정 횟수(round count) 만큼 전력 거래 희망 가격의 조정을 반복적으로 수행하고,상기 판매자의 전력 거래 희망 가격 및 상기 구매자의 전력 거래 희망 가격의 차이가 미리 설정된 기준 종료 값 이내이면 전력 거래 희망 가격의 조정을 종료하는 것으로 이루어지는,스마트 빌딩 시스템을 위한 심층 강화 학습 기반 양방향 전력 거래 방법
|
| 9 |
9
제1항에서,상기 판매자 및 상기 구매자는,상용 전력망 및 스마트 빌딩인,스마트 빌딩 시스템을 위한 심층 강화 학습 기반 양방향 전력 거래 방법
|
| 10 |
10
제1항 내지 제9항 중 어느 한 항에 기재된 스마트 빌딩 시스템을 위한 심층 강화 학습 기반 양방향 전력 거래 방법을 컴퓨터에서 실행시키기 위하여 컴퓨터 판독 가능한 저장 매체에 저장된 컴퓨터 프로그램
|
| 11 |
11
개방형 전력 거래 시장에서 심층 강화 학습을 기반으로 판매자와 구매자의 전력 거래 희망 가격을 조정하는 양방향 전력 거래 장치로서,개방형 전력 거래 시장에서 심층 강화 학습을 기반으로 판매자와 구매자의 전력 거래 희망 가격을 조정하기 위한 하나 이상의 프로그램을 저장하는 메모리; 및상기 메모리에 저장된 상기 하나 이상의 프로그램에 따라 개방형 전력 거래 시장에서 심층 강화 학습을 기반으로 판매자와 구매자의 전력 거래 희망 가격을 조정하기 위한 동작을 수행하는 하나 이상의 프로세서;를 포함하며,상기 프로세서는,상기 판매자의 전력 판매 예약 가격 및 상기 구매자의 전력 구매 예약 가격을 획득하고,상기 전력 판매 예약 가격 및 상기 전력 구매 예약 가격을 기반으로, 심층 강화 학습 기반 전력 거래 가격 조정 모델을 이용하여 상기 판매자와 상기 구매자의 전력 거래 희망 가격을 조정하는,스마트 빌딩 시스템을 위한 심층 강화 학습 기반 양방향 전력 거래 장치
|
| 12 |
12
제11항에서,상기 심층 강화 학습 기반 전력 거래 가격 조정 모델은,상기 전력 판매 예약 가격을 기반으로 획득된 상기 판매자의 전력 거래 희망 가격 및 상기 전력 구매 예약 가격을 기반으로 획득된 상기 구매자의 전력 거래 희망 가격을 상태(state)로 설정하고,미리 설정된 스텝 크기(step size)만큼 상기 상태(state)를 조정하도록 액션(action)을 설정하며,상기 판매자의 전력 거래 희망 가격 및 상기 구매자의 전력 거래 희망 가격의 차이가 작아질수록 보상(reward)이 커지도록 상기 보상(reward)을 설정하는,스마트 빌딩 시스템을 위한 심층 강화 학습 기반 양방향 전력 거래 장치
|
| 13 |
13
제11항에서,상기 프로세서는,DQN(Deep Q Network) 알고리즘을 이용하는 상기 심층 강화 학습 기반 전력 거래 가격 조정 모델을 기반으로, 미리 설정된 에피소드(episode) 별로 미리 설정된 조정 횟수(round count) 만큼 전력 거래 희망 가격의 조정을 반복적으로 수행하고,상기 판매자의 전력 거래 희망 가격 및 상기 구매자의 전력 거래 희망 가격의 차이가 미리 설정된 기준 종료 값 이내이면 전력 거래 희망 가격의 조정을 종료하는,스마트 빌딩 시스템을 위한 심층 강화 학습 기반 양방향 전력 거래 장치
|
