맞춤기술찾기

이전대상기술

Visuomotor 시스템을 이용한 모델 예측 제어에 기반한 풀바디 모델링 방법 및 장치

  • 기술번호 : KST2021011856
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 시각적 인식과 풀바디(full-body) 모션 제어를 통합한 visuomotor 시스템을 이용한 새로운 모델 예측 제어(model predictive control; MPC)에 기반한 풀바디 모델링 방법 및 장치에 관한 것이다. 일실시예에 따른 풀바디 모델링 방법은 캐릭터의 시점에 기초하여 객체의 상태에 관한 부분 관측 값을 결정하고, 부분 관측 값에 기초하여 POMDP에 기반하여 객체의 상태를 추정하며, 추정된 객체의 상태에 따라 캐릭터의 상태를 제어하여 캐릭터의 모션을 시각화하는 단계를 포함한다.
Int. CL G06T 13/40 (2011.01.01) G06T 17/00 (2006.01.01) G06T 7/277 (2017.01.01)
CPC G06T 13/40(2013.01) G06T 17/00(2013.01) G06T 7/277(2013.01) G06T 2207/30041(2013.01)
출원번호/일자 1020200039280 (2020.03.31)
출원인 한국과학기술원
등록번호/일자
공개번호/일자 10-2021-0121878 (2021.10.08) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2020.03.31)
심사청구항수 20

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국과학기술원 대한민국 대전광역시 유성구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 노준용 대전광역시 유성구
2 엄해광 대전광역시 유성구
3 한다성 대전광역시 유성구
4 신성용 대전광역시 유성구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인 무한 대한민국 서울특별시 강남구 언주로 ***, *층(역삼동,화물재단빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2020.03.31 수리 (Accepted) 1-1-2020-0337001-33
2 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.05.15 수리 (Accepted) 4-1-2020-5108396-12
3 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.06.12 수리 (Accepted) 4-1-2020-5131486-63
4 선행기술조사의뢰서
Request for Prior Art Search
2020.12.16 수리 (Accepted) 9-1-9999-9999999-89
5 선행기술조사보고서
Report of Prior Art Search
2021.02.17 발송처리완료 (Completion of Transmission) 9-6-2021-0073736-17
6 의견제출통지서
Notification of reason for refusal
2021.04.30 발송처리완료 (Completion of Transmission) 9-5-2021-0347433-14
7 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2021.06.30 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2021-0757704-96
8 [거절이유 등 통지에 따른 의견]의견서·답변서·소명서
2021.06.30 수리 (Accepted) 1-1-2021-0757703-40
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
캐릭터의 눈 포즈에 기초하여 상기 캐릭터의 시점을 결정하는 단계;상기 캐릭터의 시점에 기초하여, 적어도 하나의 객체에 관한 상기 캐릭터의 관측 값 및 관측 노이즈를 결정하는 단계;상기 관측 값 및 상기 관측 노이즈에 기초하여 상기 객체의 상태를 추정하는 단계;추정된 상기 객체의 상태, 상기 캐릭터의 상태 및 상기 캐릭터에 관한 참조 모션에 기초하여 상기 캐릭터의 제어 정책을 생성하는 단계; 및추정된 상기 객체의 상태 및 상기 제어 정책에 기초하여 상기 캐릭터의 상태를 업데이트하는 단계를 포함하고,상기 캐릭터의 상태는상기 캐릭터에 포함된 적어도 하나의 관절의 상태 및 상기 캐릭터의 눈 포즈를 포함하는풀바디 모델링 방법
2 2
제1항에 있어서,상기 객체의 상태를 추정하는 단계는부분 관측 마코프 의사결정 과정(partially observable markov decision process; POMDP)에 기반하여 객체의 상태를 추정하는 단계를 포함하는풀바디 모델링 방법
3 3
제1항에 있어서,상기 객체의 상태를 추정하는 단계는상기 적어도 하나의 객체에 관한 관측 값 및 상기 관측 노이즈에 기초하여 상기 객체의 가능한 상태들에 대한 확률 분포에 따른 상기 객체의 신뢰 상태를 정의하는 단계; 및칼만 필터에 기초하여 상기 객체의 신뢰 상태를 업데이트하는 단계를 포함하는풀바디 모델링 방법
4 4
제3항에 있어서,상기 객체의 신뢰 상태를 업데이트하는 단계는상기 칼만 필터에 따른 전이 행렬에 기초하여 객체의 다음 신뢰 상태를 예측하는 단계; 및상기 객체에 관한 관측 값 및 상기 칼만 필터에 따른 칼만 이득 행렬에 기초하여, 상기 예측된 객체의 다음 신뢰 상태를 보정하는 단계를 포함하는풀바디 모델링 방법
5 5
제1항에 있어서,상기 눈 포즈는시선 방향을 나타내는 방위각, 고도, 및 초점 거리의 파라미터들 중 적어도 하나를 포함하는풀바디 모델링 방법
6 6
제5항에 있어서,상기 방위각, 상기 고도 및 상기 초점 거리의 파라미터들 중 적어도 하나는 미리 정해진 범위로 파라미터 값이 제한되는풀바디 모델링 방법
7 7
제1항에 있어서,상기 제어 정책을 생성하는 단계는제1 시간 스텝에 대응하는 객체의 상태 및 캐릭터의 상태에서 미리 정해진 비용을 고려하여 제1 시간 스텝의 다음 시간 스텝인 제2 시간 스텝에 대응하는 객체의 상태 및 캐릭터의 상태를 결정하는 단계;상기 제2 시간 스텝에 대응하는 캐릭터의 상태에 기초하여, 상기 제1 시간 스텝에 대응하는 캐릭터 제어 벡터를 획득하는 단계; 및미리 정해진 개수의 시간 스텝 각각에 대하여, 상기 캐릭터 제어 벡터를 생성하는 단계를 포함하는풀바디 모델링 방법
8 8
제7항에 있어서,상기 미리 정해진 비용은상기 참조 모션 및 상기 캐릭터에 포함된 적어도 하나의 관절들의 상태에 따른 비용;상기 캐릭터 제어 벡터에 따른 비용;상기 적어도 하나의 객체의 신뢰 상태에 따른 비용;상기 캐릭터의 눈 포즈에 따른 비용; 및상기 캐릭터가 수행하는 작업의 종류에 따른 비용중 적어도 하나를 포함하는풀바디 모델링 방법
9 9
제1항에 있어서,상기 제어 정책은상기 캐릭터에 포함된 적어도 하나의 관절의 상태 및 상기 캐릭터의 눈 포즈를 결정하는 캐릭터 제어 벡터를 포함하는풀바디 모델링 방법
10 10
제1항에 있어서,상기 캐릭터의 시점을 결정하는 단계는상기 캐릭터의 머리 관절의 위치, 상기 캐릭터의 두 눈 사이의 중간 점의 위치, 초점 거리 및 상기 머리 관절과 상기 두 눈 사이의 중간 점의 회전 정도에 기초하여 상기 캐릭터의 시점을 결정하는 단계를 포함하는풀바디 모델링 방법
11 11
제1항에 있어서,상기 캐릭터의 시점에 기초하여, 적어도 하나의 객체에 관한 상기 캐릭터의 관측 값 및 관측 노이즈를 결정하는 단계는상기 캐릭터의 시점과 상기 객체의 위치에 따른 관측 노이즈를 결정하는 단계; 및상기 객체의 위치 및 상기 관측 노이즈에 기초하여 상기 객체에 관한 상기 캐릭터의 관측 값을 결정하는 단계를 포함하는풀바디 모델링 방법
12 12
제1항에 있어서,상기 캐릭터의 상태를 시각화하여 풀바디 캐릭터를 모델링하는 단계를 더 포함하는풀바디 모델링 방법
13 13
제1항에 있어서,상기 관절의 상태는상기 관절의 위치 및 상기 관절의 속도를 포함하는풀바디 모델링 방법
14 14
하드웨어와 결합되어 제1항 내지 제13항 중 어느 하나의 항의 방법을 실행시키기 위하여 매체에 저장된 컴퓨터 프로그램
15 15
캐릭터의 눈 포즈에 기초하여 상기 캐릭터의 시점을 결정하고, 상기 캐릭터의 시점에 기초하여, 적어도 하나의 객체에 관한 상기 캐릭터의 관측 값 및 관측 노이즈를 결정하고, 상기 관측 값 및 상기 관측 노이즈에 기초하여 상기 객체의 상태를 추정하고, 추정된 상기 객체의 상태, 상기 캐릭터의 상태 및 상기 캐릭터에 관한 참조 모션에 기초하여 상기 캐릭터의 제어 정책을 생성하고, 추정된 상기 객체의 상태 및 상기 제어 정책에 기초하여 상기 캐릭터의 상태를 업데이트하는 적어도 하나의 프로세서; 및상기 캐릭터의 상태, 상기 캐릭터에 관한 참조 모션 및 상기 객체의 상태를 저장하는 메모리를 포함하고,상기 캐릭터의 상태는상기 캐릭터에 포함된 적어도 하나의 관절의 상태 및 상기 캐릭터의 눈 포즈를 포함하는풀바디 모델링 장치
16 16
제15항에 있어서,상기 프로세서는상기 객체의 상태를 추정함에 있어서,부분 관측 마코프 의사결정 과정(partially observable markov decision process; POMDP)에 기반하여 객체의 상태를 추정하는풀바디 모델링 장치
17 17
제15항에 있어서,상기 프로세서는상기 객체의 상태를 추정함에 있어서,상기 적어도 하나의 객체에 관한 관측 값 및 상기 관측 노이즈에 기초하여 상기 객체의 가능한 상태들에 대한 확률 분포에 따른 상기 객체의 신뢰 상태를 정의하고, 칼만 필터에 따른 전이 행렬에 기초하여 객체의 다음 신뢰 상태를 예측하며, 상기 객체에 관한 관측 값 및 상기 칼만 필터에 따른 칼만 이득 행렬에 기초하여, 상기 예측된 객체의 다음 신뢰 상태를 보정하는풀바디 모델링 장치
18 18
제15항에 있어서,상기 눈 포즈는시선 방향을 나타내는 방위각, 고도, 및 초점 거리의 파라미터들 중 적어도 하나를 포함하고,상기 적어도 하나의 파라미터는 미리 정해진 범위로 파라미터 값이 제한되는풀바디 모델링 장치
19 19
제15항에 있어서,상기 프로세서는상기 제어 정책을 생성함에 있어서,제1 시간 스텝에 대응하는 객체의 상태 및 캐릭터의 상태에서 미리 정해진 비용을 고려하여 제1 시간 스텝의 다음 시간 스텝인 제2 시간 스텝에 대응하는 객체의 상태 및 캐릭터의 상태를 결정하고, 상기 제2 시간 스텝에 대응하는 캐릭터의 상태에 기초하여, 상기 제1 시간 스텝에 대응하는 캐릭터 제어 벡터를 획득하며, 미리 정해진 개수의 시간 스텝 각각에 대하여, 상기 캐릭터 제어 벡터를 생성하는풀바디 모델링 장치
20 20
제15항에 있어서,상기 프로세서는상기 캐릭터의 상태를 시각화하여 풀바디 캐릭터를 모델링하는풀바디 모델링 장치
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 과학기술정보통신부 한국과학기술원 이공분야기초연구사업 데이터 유도 예측 제어 모델에 기반한 캐릭터 애니메이션을 위한 심층 학습 프레임워크(2019)