맞춤기술찾기

이전대상기술

강화학습 기반의 에너지 관리 방법 및 장치

  • 기술번호 : KST2023006070
  • 담당센터 : 서울서부기술혁신센터
  • 전화번호 : 02-6124-6930
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 강화 학습 기반으로, 전력 계통의 에너지를 관리하는 방법 및 장치가 개시된다. 개시된 강화학습 기반의 에너지 관리 방법은 미리 학습된 제1인공 신경망을 이용하여, 타겟 시간에 대한 타겟 전력 계통의 순부하량을, 최대값 및 최소값을 포함하는 구간 타입으로 예측하는 단계; 및 상기 타겟 시간에 대한 구간 타입의 순부하량에 기반한 강화 학습을 수행하여, 상기 타겟 전력 계통에 포함된 발전소 및 ESS에 대한 운영 계획을 결정하는 단계를 포함한다.
Int. CL G06Q 50/06 (2012.01.01) G06N 20/00 (2019.01.01) H02J 3/00 (2006.01.01)
CPC G06Q 50/06(2013.01) G06N 20/00(2013.01) H02J 3/003(2013.01)
출원번호/일자 1020220030379 (2022.03.11)
출원인 한양대학교 산학협력단
등록번호/일자
공개번호/일자 10-2023-0076067 (2023.05.31) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보 대한민국  |   1020210161819   |   2021.11.23
법적상태 공개
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2022.03.11)
심사청구항수 14

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한양대학교 산학협력단 대한민국 서울특별시 성동구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 배성우 서울특별시 성동구
2 이상봉 서울특별시 성동구
3 유한식 서울특별시 성동구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 민영준 대한민국 서울특별시 강남구 남부순환로 ****, *층(도곡동, 차우빌딩)(맥스국제특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2022.03.11 수리 (Accepted) 1-1-2022-0262750-44
2 선행기술조사의뢰서
Request for Prior Art Search
2023.03.17 수리 (Accepted) 9-1-9999-9999999-89
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
미리 학습된 제1인공 신경망을 이용하여, 타겟 시간에 대한 타겟 전력 계통의 순부하량을, 최대값 및 최소값을 포함하는 구간 타입으로 예측하는 단계; 및상기 타겟 시간에 대한 구간 타입의 순부하량에 기반한 강화 학습을 수행하여, 상기 타겟 전력 계통에 포함된 발전소 및 ESS에 대한 운영 계획을 결정하는 단계를 포함하는 강화학습 기반의 에너지 관리 방법
2 2
제 1항에 있어서,상기 타겟 전력 계통의 순부하량을 예측하는 단계는상기 타겟 전력 계통에 대한 타겟 데이터를 상기 제1인공 신경망에 입력하여, 상기 구간 타입의 순부하량을 예측하며,상기 타겟 데이터는, 현재 및 과거에서 측정된 포인트 타입의 순부하량, 미리 학습된 제2인공 신경망을 통해 예측된 상기 타겟 시간에 대한 포인트 타입의 순부하량, 상기 포인트 타입의 순부하량이 측정 및 예측된 시간에 대한 환경 변수를 포함하는강화학습 기반의 에너지 관리 방법
3 3
제 2항에 있어서,상기 제1인공 신경망은,훈련 데이터를 이용하여, 상기 타겟 시간에 대한 구간 타입의 순부하량을 예측하도록 학습된 신경망이며,상기 훈련 데이터는,상기 제2인공 신경망을 통해 예측된, 미리 설정된 예측 시간에 대한 포인트 타입의 제1훈련용 순부하량, 상기 예측 시간에서 측정된 포인트 타입의 제2훈련용 순부하량, 상기 제1 및 제2훈련용 순부하량의 오차값, 상기 제1 및 제2훈련용 순부하량이 예측 및 측정된 시간에 대한 환경 변수를 포함하는 강화학습 기반의 에너지 관리 방법
4 4
제 3항에 있어서,상기 제1인공 신경망은상기 제1인공 신경망을 통해 출력된 상기 예측 시간에 대한 구간 타입의 순부하량에 상기 제2훈련용 순부하량이 포함되는지 여부를 나타내는 제1지표값, 상기 예측 시간에 대한 구간 타입의 순부하량에 대한 넓이를 나타내는 제2지표값을 포함하는 손실 함수를 이용하여, 학습된 신경망인강화학습 기반의 에너지 관리 방법
5 5
제 4항에 있어서,상기 손실 함수는하기 수학식1과 같이 표현되는 손실 함수인강화학습 기반의 에너지 관리 방법
6 6
제 5항에 있어서,상기 신뢰 수준은상기 오차값에 따라 결정되는 값인강화학습 기반의 에너지 관리 방법
7 7
제 1항에 있어서,상기 타겟 전력 계통의 순부하량을 예측하는 단계는상기 타겟 전력 계통의 총부하량을, 최대값 및 최소값을 포함하는 구간 타입으로 예측하고, 상기 타겟 전력 계통에 포함된 신재생 에너지 발전기의 발전량을, 최대값 및 최소값을 포함하는 구간 타입으로 예측하는 단계; 및상기 총부하량에서 상기 발전량을 차감하여, 상기 타겟 시간에 대한 구간 타입의 순부하량을 계산하는 단계를 포함하는 강화학습 기반의 에너지 관리 방법
8 8
제 1항에 있어서,상기 운영 계획을 결정하는 단계는상기 타겟 시간에 대한 구간 타입의 순부하량을 포함하는 상태 집합을 이용하는 강화 학습 모델을 이용하여, 상기 강화 학습 모델의 정책에 대응되는 상기 운영 계획을 결정하는강화학습 기반의 에너지 관리 방법
9 9
제 1항에 있어서,상기 운영 계획을 결정하는 단계는상기 타겟 시간에 대한 구간 타입의 순부하량에 따라 결정되는 상기 타겟 전력 계통의 예비력 부족 정도를 고려하여, 상기 운영 계획을 결정하는강화학습 기반의 에너지 관리 방법
10 10
제 9항에 있어서,상기 예비력 부족 정도는상기 타겟 시간에 대한 구간 타입의 순부하량의 최대값 및 최소값의 차이에 비례하여 증가하는강화학습 기반의 에너지 관리 방법
11 11
제 9항에 있어서,상기 운영 계획을 결정하는 단계는하기 수학식2와 같이 표현되는 목적함수의 계산값이 최소가 되도록, 상기 운영 계획을 결정하는강화학습 기반의 에너지 관리 방법
12 12
제 1항에 있어서,상기 운영 계획을 결정하는 단계는상기 타겟 전력 계통에 대한 이상이 발생한 경우, 상기 운영 계획을 갱신하는강화학습 기반의 에너지 관리 방법
13 13
미리 학습된 인공 신경망을 이용하여, 타겟 시간에서의 타겟 전력 계통에 대한 순부하량의 최대값 및 최소값을 예측하는 단계; 및상기 순부하량의 최대값 및 최소값을 이용하여, 상기 타겟 전력 계통에 포함된 발전소 및 ESS에 대한 운영 계획을 결정하는 단계를 포함하는 강화학습 기반의 에너지 관리 방법
14 14
메모리; 및상기 메모리와 전기적으로 연결되는 적어도 하나의 프로세서를 포함하며,상기 프로세서는 미리 학습된 제1인공 신경망을 이용하여, 타겟 시간에 대한 타겟 전력 계통의 순부하량을, 최대값 및 최소값을 포함하는 구간 타입으로 예측하고,상기 타겟 시간에 대한 구간 타입의 순부하량에 기반한 강화 학습을 수행하여, 상기 타겟 전력 계통에 포함된 발전소 및 ESS에 대한 운영 계획을 결정하는 강화학습 기반의 에너지 관리 장치
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 산업통상자원부 조선대학교 산학협력단 산업기술혁신사업 / 에너지기술개발사업 / 에너지수요관리핵심기술개발사업(RCMS) 공공 커뮤니티내 블록체인 기반 EV-신재생 연계 DC 전력 거래 플랫폼 시스템 개발