맞춤기술찾기

이전대상기술

분산 멀티-에이전트 시스템 내에서 강화 학습을 수행하는 방법 및 강화 학습을 수행하는 에이전트

  • 기술번호 : KST2020013932
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명에서는 환경의 상태 정보를 획득하고, 상기 상태 정보에 기반하여 문제를 인지하는 단계와, 상기 분산 멀티에이전트 시스템 내의 적어도 하나의 이웃 에이전트에게 상기 문제를 해결하기 위한 협력을 요청하는 단계와, 상기 적어도 하나의 이웃 에이전트 중 제2 에이전트로부터 상기 요청에 대한 응답으로서 협력 정보를 수신하는 단계와, 및 상기 협력 정보를 이용하여 상기 환경에 행동을 적용하는 단계를 포함하는 분산 멀티에이전트 시스템 내의 제1 에이전트의 강화 학습 방법을 제공함으로써, 지능이 탑재된 단말이 분산된 실제 환경에서 서로 간 정보 공유 및 도움 요청을 통해 협력적으로 문제를 해결할 수 있다.
Int. CL G06F 15/163 (2006.01.01) G06N 20/00 (2019.01.01)
CPC G06F 15/163(2013.01) G06F 15/163(2013.01)
출원번호/일자 1020190038011 (2019.04.01)
출원인 한국전자통신연구원
등록번호/일자
공개번호/일자 10-2020-0116344 (2020.10.12) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 공개
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 N
심사청구항수 17

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국전자통신연구원 대한민국 대전광역시 유성구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 김성현 대전광역시 서구
2 김명은 대전광역시 유성구
3 김현석 대전광역시 유성구
4 손영성 대전광역시 유성구
5 손종권 대전광역시 유성구
6 송순용 대전광역시 유성구
7 이동훈 세종특별자치시 보듬*
8 장인국 경기도 광명시 새터안로**번길
9 최진철 대전광역시 유성구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 팬코리아특허법인 대한민국 서울특별시 강남구 논현로**길 **, 역삼***빌딩 (역삼동)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2019.04.01 수리 (Accepted) 1-1-2019-0334041-10
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
분산 멀티에이전트 시스템 내의 제1 에이전트의 강화 학습 방법에 있어서,환경의 상태 정보를 획득하고, 상기 상태 정보에 기반하여 문제를 인지하는 단계;상기 분산 멀티에이전트 시스템 내의 적어도 하나의 이웃 에이전트에게 상기 문제를 해결하기 위한 협력을 요청하는 단계;상기 적어도 하나의 이웃 에이전트 중 제2 에이전트로부터 상기 요청에 대한 응답으로서 협력 정보를 수신하는 단계; 및상기 협력 정보를 이용하여 상기 환경에 행동을 적용하는 단계를 포함하는 방법
2 2
제1항에 있어서,상기 행동이 적용된 후 변화된 환경의 상태 정보를 획득하는 단계; 상기 변화된 환경의 상태 정보에 상응하는 보상을 획득하는 단계; 및상기 보상을 상기 제2 에이전트와 공유하는 단계를 더 포함하는방법
3 3
제2항에 있어서,상기 적어도 하나의 이웃 에이전트 중 상기 협력 정보를 전송하지 않은 이웃 에이전트와 상기 보상을 공유하는 단계를 더 포함하는방법
4 4
제3항에 있어서,상기 협력 요청은 상기 문제를 해결하기 위해 필요한 자원 데이터 또는 지식 데이터에 대한 요청을 포함하는방법
5 5
제1항에 있어서,상기 문제를 해결하기 위한 협력을 요청하는 단계는상기 문제를 상기 제1 에이전트 내에서 해결할 수 있는지 여부를 판단하는 단계; 및상기 판단 결과에 기반하여 상기 제2 에이전트로 상기 협력 요청을 전송하는 단계를 포함하는방법
6 6
제5항에 있어서,상기 행동을 상기 제1 에이전트 내에서 수행할 수 있는지 여부를 판단하는 단계는 상기 행동이 상기 제1 에이전트에 저장된 자원 데이터 또는 지식 데이터를 이용하여 수행될 수 있는 행동인지 여부를 판단하는 단계를 포함하는방법
7 7
제5항에 있어서,상기 문제를 상기 제1 에이전트 내에서 해결할 수 있는지 여부를 판단하는 단계는 상기 문제를 상기 제1 에이전트 내에서 해결할 때 보다 상기 제2 에이전트와 협력하는 것이 더 속도가 빠르거나 더 높은 정확도로 해결할 수 있는지 여부를 판단하는 단계를 포함하는방법
8 8
분산 멀티에이전트 시스템 내의 제1 에이전트의 강화 학습 방법에 있어서,상기 분산 멀티에이전트 시스템 내의 적어도 하나의 이웃 에이전트 중 제2 에이전트로부터 문제를 해결하기 위한 협력 요청을 수신하는 단계;상기 협력 요청에 응답하여 협력 정보를 상기 제2 에이전트로 전송하는 단계;상기 제2 에이전트로부터 상기 문제가 해결된 후 변화된 환경의 상태 정보에 상응하는 보상을 수신하는 단계; 및상기 보상을 이용하여 상기 문제에 대한 강화 학습을 수행하는 단계를 포함하는방법
9 9
제8항에 있어서,상기 협력 요청을 분석하는 단계; 및상기 분석 결과에 기반하여 상기 문제에 대하여 협력할지 여부를 판단하는 단계를 더 포함하며,상기 협력 요청에 응답하여 협력 정보를 상기 제2 에이전트로 전송하는 단계는 상기 판단 결과에 기반하여 상기 협력 정보를 상기 제2 에이전트로 전송하는 단계를 포함하는방법
10 10
제9항에 있어서,상기 협력 요청은 상기 문제를 해결하기 위해 필요한 자원 데이터 또는 지식 데이터에 대한 요청을 포함하며,상기 협력 요청을 분석하는 단계는 상기 문제를 해결하기 위해 필요한 자원 데이터 또는 지식 데이터가 상기 제1 에이전트에 저장되어 있는지 여부를 분석하는 단계를 포함하는방법
11 11
강화 학습을 수행하는 제1 에이전트로서,프로세서 및 메모리를 포함하고, 상기 프로세서는 상기 메모리에 저장된 프로그램을 실행하여,환경의 상태 정보를 획득하고, 상기 상태 정보에 기반하여 문제를 인지하는 단계;상기 분산 멀티에이전트 시스템 내의 적어도 하나의 이웃 에이전트에게 상기 문제를 해결하기 위한 협력을 요청하는 단계;상기 적어도 하나의 이웃 에이전트 중 제2 에이전트로부터 상기 요청에 대한 응답으로서 협력 정보를 수신하는 단계; 및상기 협력 정보를 이용하여 상기 환경에 행동을 적용하는 단계를 수행하는 제1 에이전트
12 12
제11항에 있어서,상기 프로세서는 상기 메모리에 저장된 프로그램을 실행하여,상기 행동이 적용된 후 변화된 환경의 상태 정보를 획득하는 단계; 상기 변화된 환경의 상태 정보에 상응하는 보상을 획득하는 단계; 그리고상기 보상을 상기 제2 에이전트와 공유하는 단계를 수행하는 제1 에이전트
13 13
제12항에 있어서,상기 프로세서는 상기 메모리에 저장된 프로그램을 실행하여,상기 적어도 하나의 이웃 에이전트 중 상기 협력 정보를 전송하지 않은 이웃 에이전트와 상기 보상을 공유하는 단계를 수행하는 제1 에이전트
14 14
제13항에 있어서,상기 협력 요청은 상기 문제를 해결하기 위해 필요한 자원 데이터 또는 지식 데이터에 대한 요청을 포함하는제1 에이전트
15 15
제11항에 있어서,상기 프로세서는 상기 메모리에 저장된 프로그램을 실행하여,상기 문제를 상기 제1 에이전트 내에서 해결할 수 있는지 여부를 판단하는 단계; 및상기 판단 결과에 기반하여 상기 제2 에이전트로 상기 협력 요청을 전송하는 단계를 수행하는 제1 에이전트
16 16
제15항에 있어서,상기 프로세서는 상기 메모리에 저장된 프로그램을 실행하여,상기 행동이 상기 제1 에이전트에 저장된 자원 데이터 또는 지식 데이터를 이용하여 수행될 수 있는 행동인지 여부를 판단하는 단계를 수행하는 제1 에이전트
17 17
제15항에 있어서,상기 프로세서는 상기 메모리에 저장된 프로그램을 실행하여,상기 문제를 상기 제1 에이전트 내에서 해결할 때 보다 상기 제2 에이전트와 협력하는 것이 더 속도가 빠르거나 더 높은 정확도로 해결할 수 있는지 여부를 판단하는 단계를 수행하는 제1 에이전트
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 과학기술정보통신부 한국전자통신연구원 정부출연금사업(기관고유사업) 사물-사람-공간의 유기적 연결을 위한 초연결 공간의 분산 지능 핵심원천 기술