맞춤기술찾기

이전대상기술

전장 상황에서의 방책 추천을 위한 강화학습 방법 및 시스템, 이를 위한 컴퓨팅 장치

  • 기술번호 : KST2023005357
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 컴퓨팅 장치가 수행하는 전장 상황에서의 방책 추천을 위한 강화학습 방법에 있어서, 전장 상황 시뮬레이터로부터 방책에 대한 상태(state) 정보 내의 관찰(observation) 정보를 획득하는 단계; 상기 관찰 정보를 기초로 행동(action)을 선택하여 상기 전장 상황 시뮬레이터로 전달하는 단계; 상기 전장 상황 시뮬레이터로부터 상기 행동을 기반으로 한 보상(reward)을 획득하면서 상기 행동을 표현하는 정책을 설정하는 단계; 및 상기 보상을 누적하되, 누적되는 보상이 최대가 되는 정책을 설정하도록 상기 컴퓨팅 장치 내의 학습 모델을 학습시키는 단계;를 포함할 수 있다.
Int. CL G06Q 50/26 (2012.01.01) G06F 30/27 (2020.01.01) G06Q 10/04 (2023.01.01) G06N 3/08 (2023.01.01) G06N 20/00 (2019.01.01)
CPC G06Q 50/26(2013.01) G06F 30/27(2013.01) G06Q 10/04(2013.01) G06N 3/08(2013.01) G06N 20/00(2013.01)
출원번호/일자 1020220171478 (2022.12.09)
출원인 국방과학연구소, 한국과학기술원
등록번호/일자 10-2567928-0000 (2023.08.11)
공개번호/일자
공고번호/일자 (20230818) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2022.12.09)
심사청구항수 9

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 국방과학연구소 대한민국 대전광역시 유성구
2 한국과학기술원 대한민국 대전광역시 유성구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 윤세영 서울특별시 동대문구
2 이용식 서울특별시 동대문구
3 오지환 서울특별시 동대문구
4 김준기 서울특별시 동대문구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 제일특허법인(유) 대한민국 서울특별시 서초구 마방로 ** (양재동, 동원F&B빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 국방과학연구소 대전광역시 유성구
2 한국과학기술원 대전광역시 유성구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2022.12.09 수리 (Accepted) 1-1-2022-1326648-08
2 [우선심사신청]심사청구서·우선심사신청서
2022.12.14 수리 (Accepted) 1-1-2022-1347745-65
3 선행기술조사의뢰서
Request for Prior Art Search
2023.01.16 수리 (Accepted) 9-1-9999-9999999-89
4 특허고객번호 정보변경(경정)신고서·정정신고서
2023.01.31 수리 (Accepted) 4-1-2023-5023571-05
5 선행기술조사보고서
Report of Prior Art Search
2023.02.03 발송처리완료 (Completion of Transmission) 9-6-2023-0053934-51
6 의견제출통지서
Notification of reason for refusal
2023.03.22 발송처리완료 (Completion of Transmission) 9-5-2023-0272028-68
7 특허고객번호 정보변경(경정)신고서·정정신고서
2023.05.04 수리 (Accepted) 4-1-2023-5110236-33
8 [거절이유 등 통지에 따른 의견]의견서·답변서·소명서
2023.05.19 수리 (Accepted) 1-1-2023-0559818-72
9 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2023.05.19 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2023-0559842-68
10 등록결정서
Decision to grant
2023.07.06 발송처리완료 (Completion of Transmission) 9-5-2023-0617400-98
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
컴퓨팅 장치가 수행하는 전장 상황에서의 방책 추천을 위한 강화학습 방법에 있어서,전장 상황 시뮬레이터로부터 방책에 대한 상태(state) 정보 내의 관찰(observation) 정보를 획득하는 단계;상기 관찰 정보를 기초로 행동(action)을 선택하여 상기 전장 상황 시뮬레이터로 전달하는 단계;상기 전장 상황 시뮬레이터로부터 상기 행동을 기반으로 한 보상(reward)을 획득하면서 상기 행동을 표현하는 정책을 설정하는 단계; 및상기 획득되는 보상을 누적하되, 누적되는 보상이 최대가 되는 정책을 설정하도록 상기 컴퓨팅 장치 내의 학습 모델을 학습시키는 단계;를 포함하되,상기 보상은 공통 보상과 그룹 보상을 포함하고,상기 그룹 보상은 포텐셜 기반 보상 형성 함수의 정의를 만족하도록 설정되는전장 상황에서의 방책 추천을 위한 강화학습 방법
2 2
제 1 항에 있어서,상기 학습 모델은,방책 수행을 위한 적어도 하나의 정책이 설정되도록 학습되는전장 상황에서의 방책 추천을 위한 강화학습 방법
3 3
삭제
4 4
삭제
5 5
제 1 항에 있어서,멀티 에이전트 환경에서 동일한 그룹의 에이전트가 상기 학습 모델을 공유하는전장 상황에서의 방책 추천을 위한 강화학습 방법
6 6
목표로 하는 방책에 대한 시뮬레이션 환경을 제공하는 전장 상황 시뮬레이터; 및상기 전장 상황 시뮬레이터로부터 상기 방책에 대한 상태 정보 내의 관찰 정보를 획득하고, 상기 관찰 정보를 기초로 행동을 선택하여 상기 전장 상황 시뮬레이터로 전달하며, 상기 전장 상황 시뮬레이터로부터 상기 행동을 기반으로 한 보상을 획득하면서 상기 행동을 표현하는 정책을 설정하고, 상기 획득되는 보상을 누적하되 누적되는 보상이 최대가 되는 정책을 설정하도록 기 설정된 학습 모델을 학습시키는 컴퓨팅 장치;를 포함하되,상기 보상은 공통 보상과 그룹 보상을 포함하고,상기 그룹 보상은 포텐셜 기반 보상 형성 함수의 정의를 만족하도록 설정되는전장 상황에서의 방책 추천을 위한 강화학습 시스템
7 7
제 6 항에 있어서,상기 전장 상황 시뮬레이터는,상기 방책을 기초로 보상 형성을 수행하는 방책 설정부를 더 포함하는전장 상황에서의 방책 추천을 위한 강화학습 시스템
8 8
삭제
9 9
적어도 하나의 명령어를 저장하는 저장부와,처리부를 포함하며,상기 처리부에 의해 상기 적어도 하나의 명령어가 실행됨으로써,전장 상황 시뮬레이터로부터 방책에 대한 상태 정보 내의 관찰 정보를 획득하고,관찰 정보를 기초로 행동을 선택하여 상기 전장 상황 시뮬레이터로 전달하며,상기 전장 상황 시뮬레이터로부터 상기 행동을 기반으로 한 보상을 획득하면서 상기 행동을 표현하는 정책을 설정하고,상기 획득되는 보상을 누적하되 누적되는 보상이 최대가 되는 정책을 설정하도록 기 설정된 학습 모델을 학습시키며,상기 보상은 공통 보상과 그룹 보상을 포함하고,상기 그룹 보상은 포텐셜 기반 보상 형성 함수의 정의를 만족하도록 설정되는컴퓨팅 장치
10 10
삭제
11 11
삭제
12 12
제 9 항에 있어서,멀티 에이전트 환경에서 동일한 그룹의 에이전트가 상기 학습 모델을 공유하는컴퓨팅 장치
13 13
컴퓨터 프로그램을 저장하고 있는 컴퓨터 판독 가능 기록매체로서,상기 컴퓨터 프로그램은,컴퓨팅 장치가 수행하는 전장 상황에서의 방책 추천을 위한 강화학습 방법을 프로세서가 수행하도록 하기 위한 명령어를 포함하고,상기 방법은,전장 상황 시뮬레이터로부터 방책에 대한 상태정보 내의 관찰 정보를 획득하는 단계;상기 관찰 정보를 기초로 행동을 선택하여 상기 전장 상황 시뮬레이터로 전달하는 단계;상기 전장 상황 시뮬레이터로부터 상기 행동을 기반으로 한 보상을 획득하면서 상기 행동을 표현하는 정책을 설정하는 단계; 및상기 획득되는 보상을 누적하되, 누적되는 보상이 최대가 되는 정책을 설정하도록 상기 컴퓨팅 장치 내의 학습 모델을 학습시키는 단계;를 포함하되,상기 보상은 공통 보상과 그룹 보상을 포함하고,상기 그룹 보상은 포텐셜 기반 보상 형성 함수의 정의를 만족하도록 설정되는컴퓨터 판독 가능한 기록매체
14 14
컴퓨터 판독 가능 기록매체에 저장된 컴퓨터 프로그램으로서,상기 컴퓨터 프로그램은,컴퓨팅 장치가 수행하는 전장 상황에서의 방책 추천을 위한 강화학습 방법을 프로세서가 수행하도록 하기 위한 명령어를 포함하고,상기 방법은,전장 상황 시뮬레이터로부터 방책에 대한 상태정보 내의 관찰 정보를 획득하는 단계;상기 관찰 정보를 기초로 행동을 선택하여 상기 전장 상황 시뮬레이터로 전달하는 단계;상기 전장 상황 시뮬레이터로부터 상기 행동을 기반으로 한 보상을 획득하면서 상기 행동을 표현하는 정책을 설정하는 단계; 및상기 획득되는 보상을 누적하되, 누적되는 보상이 최대가 되는 정책을 설정하도록 상기 컴퓨팅 장치 내의 학습 모델을 학습시키는 단계;를 포함하되,상기 보상은 공통 보상과 그룹 보상을 포함하고,상기 그룹 보상은 포텐셜 기반 보상 형성 함수의 정의를 만족하도록 설정되는기록매체에 저장된 컴퓨터 프로그램
지정국 정보가 없습니다
패밀리정보가 없습니다
국가 R&D 정보가 없습니다.