맞춤기술찾기

이전대상기술

카메라의 움직임과 독립적인 바디의 자세들을 가지는 시각적 객체를 포함하는 비디오 시퀀스를 획득하기 위한 전자 장치, 방법, 및 컴퓨터 판독가능 저장 매체

  • 기술번호 : KST2022021303
  • 담당센터 : 서울서부기술혁신센터
  • 전화번호 : 02-6124-6930
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 다양한 실시예들에 따른 전자 장치는, 인스트럭션들을 저장하도록 구성된 메모리와, 상기 인스트럭션들을 실행할 시, 바디에 대응하는 시각적 객체(visual object)를 포함하는 제1 비디오 시퀀스를 획득하고, 상기 바디의 적어도 하나의 관절에 대응하는 상기 시각적 객체의 적어도 하나의 시각적 요소(visual element)의 상기 제1 비디오 시퀀스 내에서의 자세들을 지시하는(indicate) 상기 시각적 객체의 국소 자세(local posture) 시퀀스를 획득하고, 상기 국소 자세 시퀀스를 이용하여 획득되는 상기 적어도 하나의 시각적 요소의 상기 자세들 사이의 차이에 기반하여, 상기 시각적 객체의 전역 모션(global motion) 시퀀스를 획득하고, 상기 국소 자세 시퀀스 및 상기 전역 모션 시퀀스에 적어도 일부 기반하여, 제2 비디오 시퀀스를 획득하도록, 구성된 적어도 하나의 프로세서를 포함할 수 있다.
Int. CL G06K 9/00 (2022.01.01) G06N 3/08 (2006.01.01) G06V 10/40 (2022.01.01)
CPC G06V 40/103(2013.01) G06N 3/08(2013.01) G06V 10/40(2013.01) G06V 2201/033(2013.01)
출원번호/일자 1020210059552 (2021.05.07)
출원인 주식회사 엔씨소프트, 광운대학교 산학협력단
등록번호/일자
공개번호/일자 10-2022-0152059 (2022.11.15) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 공개
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 N
심사청구항수 20

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 주식회사 엔씨소프트 대한민국 서울특별시 강남구
2 광운대학교 산학협력단 대한민국 서울특별시 노원구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 김성현 서울특별시 강동구
2 박성범 경기도 성남시 분당구
3 안상준 경기도 성남시 분당구
4 장주용 서울특별시 성북구
5 정선원 경기도 성남시 분당구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인광앤장 대한민국 서울특별시 서초구 논현로**길 **,*층 (양재동, 삼우빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2021.05.07 수리 (Accepted) 1-1-2021-0533181-19
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
하나 이상의 프로그램들을 저장하는 컴퓨터 판독가능 저장 매체에 있어서, 상기 하나 이상의 프로그램들은, 전자 장치의 적어도 하나의 프로세서에 의해 실행될 시, 바디에 대응하는 시각적 객체(visual object)를 포함하는 제1 비디오 시퀀스를 획득하고, 상기 바디의 적어도 하나의 관절에 대응하는 상기 시각적 객체의 적어도 하나의 시각적 요소(visual element)의 상기 제1 비디오 시퀀스 내에서의 자세들을 지시하는(indicate) 상기 시각적 객체의 국소 자세(local posture) 시퀀스를 획득하고, 상기 국소 자세 시퀀스를 이용하여 획득되는 상기 적어도 하나의 시각적 요소의 상기 자세들 사이의 차이에 기반하여, 상기 시각적 객체의 전역 모션(global motion) 시퀀스를 획득하고, 상기 국소 자세 시퀀스 및 상기 전역 모션 시퀀스에 적어도 일부 기반하여, 제2 비디오 시퀀스를 획득하도록, 상기 전자 장치를 야기하는 인스트럭션들을 포함하는, 컴퓨터 판독가능 저장 매체
2 2
청구항 1에 있어서, 상기 적어도 하나의 시각적 요소의 자세들을 지시하는 상기 국소 자세 시퀀스는, 상기 적어도 하나의 시각적 요소의 상기 제1 비디오 시퀀스 내에서의 오리엔테이션들에 대한 데이터로 구성되는(configured with) 컴퓨터 판독가능 저장 매체
3 3
청구항 2에 있어서, 상기 전역 모션 시퀀스는, 상기 바디의 루트(root)에 대응하는, 상기 시각적 객체의 부분의 상기 제1 비디오 시퀀스 내에서의 위치들 사이의 차이에 대한 데이터 및 상기 시각적 객체의 부분의 상기 제1 비디오 시퀀스 내에서의 오리엔테이션들 사이의 차이에 대한 데이터로 구성되는 컴퓨터 판독가능 저장 매체
4 4
청구항 1에 있어서, 상기 하나 이상의 프로그램들은, 상기 전자 장치의 상기 적어도 하나의 프로세서에 의해 실행될 시, 상기 국소 자세 시퀀스를 GRU(gated recurrent unit)들을 포함하는 모델에 입력함으로써 상기 전역 모션 시퀀스를 획득하도록, 상기 전자 장치를 야기하는 인스트럭션들을 포함하는 컴퓨터 판독가능 저장 매체
5 5
청구항 1에 있어서, 상기 하나 이상의 프로그램들은, 상기 전자 장치의 상기 적어도 하나의 프로세서에 의해 실행될 시, 상기 전역 모션 시퀀스로부터 변환된 전역 자세 시퀀스를 획득하고, 상기 국소 자세 시퀀스 및 상기 전역 자세 시퀀스에 기반하여, 상기 제2 비디오 시퀀스를 획득하도록, 상기 전자 장치를 야기하는 인스트럭션들을 포함하는, 컴퓨터 판독가능 저장 매체
6 6
청구항 1에 있어서, 상기 제1 비디오 시퀀스는, 카메라가 이동되는 동안, 상기 카메라를 통해 획득된 복수의 이미지들을 포함하고, 상기 하나 이상의 프로그램들은, 상기 전자 장치의 상기 적어도 하나의 프로세서에 의해 실행될 시, 이동되는 상기 카메라가 지정된 자세를 가지는 동안 상기 카메라를 통해 획득된 적어도 하나의 이미지를, 상기 제1 비디오 시퀀스 내에 포함된 상기 복수의 이미지들 중에서, 식별하고, 상기 식별된 적어도 하나의 이미지를 기준으로 상기 복수의 이미지들을 분석함으로써, 상기 국소 자세 시퀀스를 획득하도록, 상기 전자 장치를 더 야기하는 인스트럭션들을 포함하는, 컴퓨터 판독가능 저장 매체
7 7
청구항 1에 있어서, 상기 제1 비디오 시퀀스는, 카메라가 이동되는 동안, 상기 카메라를 통해 획득된 비디오 시퀀스이고, 상기 제2 비디오 시퀀스는, 상기 카메라의 이동과 독립적인, 자세들을 가지는 상기 바디에 대응하는 새로운 시각적 객체를 포함하는, 컴퓨터 판독가능 저장 매체
8 8
청구항 1에 있어서, 상기 하나 이상의 프로그램들은, 상기 전자 장치의 상기 적어도 하나의 프로세서에 의해 실행될 시, 상기 국소 자세 시퀀스에 SMPL 모델(skinned multi-person linear model)을 적어도 부분적으로 적용함으로써, 상기 전역 모션 시퀀스를 획득하도록, 상기 전자 장치를 야기하는 인스트럭션들을 포함하는, 컴퓨터 판독가능 저장 매체
9 9
하나 이상의 프로그램들을 저장하는 컴퓨터 판독가능 저장 매체에 있어서, 상기 하나 이상의 프로그램들은, 전자 장치의 적어도 하나의 프로세서에 의해 실행될 시, 카메라가 이동되는(moved) 동안, 상기 카메라를 통해 획득된, 제1 이미지 및 상기 제1 이미지 다음의 제2 이미지를 포함하는, 제1 비디오 시퀀스를 획득하고, 바디에 대응하는 상기 제1 이미지 내의 시각적 객체 및 상기 바디에 대응하는 상기 제2 이미지 내의 상기 시각적 객체(visual object)를 식별하고, 상기 바디의 적어도 하나의 관절에 대응하는 상기 제1 이미지 내의 상기 시각적 객체의 적어도 하나의 시각적 요소(visual element)의 자세와 상기 적어도 하나의 관절에 대응하는 상기 제2 이미지 내의 상기 시각적 객체의 적어도 하나의 시각적 요소의 자세 사이의 차이에 기반하여, 상기 카메라의 이동과 독립적인, 상기 바디의 자세들을 결정하고, 상기 결정된 자세들을 가지는 새로운 시각적 객체를 포함하는 제2 비디오 시퀀스를 획득하도록, 상기 전자 장치를 야기하는 인스트럭션들을 포함하는, 컴퓨터 판독가능 저장 매체
10 10
청구항 9에 있어서, 상기 하나 이상의 프로그램들은, 상기 전자 장치의 상기 적어도 하나의 프로세서에 의해 실행될 시, 상기 제1 이미지 내의 상기 시각적 객체의 상기 적어도 하나의 요소의 오리엔테이션과 상기 제2 이미지 내의 상기 시각적 객체의 상기 적어도 하나의 시각적 요소의 오리엔테이션 사이의 차이에 기반하여, 상기 제1 이미지 내의 상기 시각적 객체의 상기 적어도 하나의 시각적 요소의 자세와 상기 제2 이미지 내의 상기 시각적 객체의 상기 적어도 하나의 요소의 자세 사이의 차이를 식별하도록, 상기 전자 장치를 야기하는 인스트럭션들을 포함하는 컴퓨터 판독가능 저장 매체
11 11
청구항 9에 있어서, 상기 하나 이상의 프로그램들은, 상기 전자 장치의 상기 적어도 하나의 프로세서에 의해 실행될 시, 이동되는 상기 카메라가 지정된 자세를 가지는 동안 상기 카메라를 통해 획득된 상기 제1 이미지를, 상기 제1 비디오 시퀀스 내에 포함된 복수의 이미지들 중에서, 식별하고, 상기 식별된 제1 이미지 내의 상기 시각적 객체의 상기 적어도 하나의 시각적 요소의 자세와 상기 식별된 제2 이미지 내의 상기 시각적 객체의 상기 적어도 하나의 시각적 요소의 자세 사이의 차이에 기반하여, 상기 바디의 자세들을 결정하도록, 상기 전자 장치를 야기하는 인스트럭션들을 포함하는 컴퓨터 판독가능 저장 매체
12 12
청구항 9에 있어서, 상기 제1 비디오 시퀀스 내의 상기 시각적 객체의 이동(movement)은, 상기 카메라의 이동 및 상기 바디의 이동을 반영하고(reflect), 상기 제2 비디오 시퀀스 내의 상기 새로운 시각적 객체의 이동은, 상기 카메라의 이동 및 상기 바디의 이동 중 상기 바디의 이동만을 반영하는 컴퓨터 판독가능 저장 매체
13 13
청구항 9에 있어서, 상기 제1 이미지 및 상기 제2 이미지를 포함하는 상기 제1 비디오 시퀀스 내의 복수의 이미지들 각각은, 상기 시각적 객체에 의해 점유되는 부분 및 제1 색상만을 가지는 배경 부분만을 포함하는 컴퓨터 판독가능 저장 매체
14 14
청구항 9에 있어서, 상기 제2 비디오 시퀀스는, 고정된 상태의 카메라를 이용하여 상기 바디를 촬영한 비디오 시퀀스에 대응하는 컴퓨터 판독가능 저장 매체
15 15
전자 장치를 동작하기 위한 방법에 있어서, 카메라가 이동되는(moved) 동안, 상기 카메라를 통해 획득된, 제1 이미지 및 상기 제1 이미지 다음의 제2 이미지를 포함하는, 제1 비디오 시퀀스를 획득하는 동작과, 바디에 대응하는 상기 제1 이미지 내의 시각적 객체 및 상기 바디에 대응하는 상기 제2 이미지 내의 상기 시각적 객체(visual object)를 식별하는 동작과, 상기 바디의 적어도 하나의 관절에 대응하는 상기 제1 이미지 내의 상기 시각적 객체의 적어도 하나의 시각적 요소(visual element)의 자세와 상기 적어도 하나의 관절에 대응하는 상기 제2 이미지 내의 상기 시각적 객체의 적어도 하나의 시각적 요소의 자세 사이의 차이에 기반하여, 상기 카메라의 이동과 독립적인, 상기 바디의 자세들을 결정하는 동작과, 상기 결정된 자세들을 가지는 새로운 시각적 객체를 포함하는 제2 비디오 시퀀스를 획득하는 동작을 포함하는 방법
16 16
청구항 15에 있어서, 상기 제1 이미지 내의 상기 시각적 객체의 상기 적어도 하나의 시각적 요소의 오리엔테이션과 상기 제2 이미지 내의 상기 시각적 객체의 상기 적어도 하나의 시각적 요소의 오리엔테이션 사이의 차이에 기반하여, 상기 제1 이미지 내의 상기 시각적 객체의 상기 적어도 하나의 시각적 요소의 자세와 상기 제2 이미지 내의 상기 시각적 객체의 상기 적어도 하나의 요소의 자세 사이의 차이를 식별하는 동작을 더 포함하는 방법
17 17
청구항 15에 있어서, 상기 바디의 자세들을 결정하는 동작은, 이동되는 상기 카메라가 지정된 자세를 가지는 동안 상기 카메라를 통해 획득된 상기 제1 이미지를, 상기 제1 비디오 시퀀스 내에 포함된 복수의 이미지들 중에서, 식별하는 동작과, 상기 식별된 제1 이미지 내의 상기 시각적 객체의 상기 적어도 하나의 시각적 요소의 자세와 상기 식별된 제2 이미지 내의 상기 시각적 객체의 상기 적어도 하나의 시각적 요소의 자세 사이의 차이에 기반하여, 상기 바디의 자세들을 결정하는 동작을 포함하는 방법
18 18
청구항 15에 있어서, 상기 제1 비디오 시퀀스 내의 상기 시각적 객체의 이동(movement)은, 상기 카메라의 이동 및 상기 바디의 이동을 반영하고(reflect), 상기 제2 비디오 시퀀스 내의 상기 새로운 시각적 객체의 이동은, 상기 카메라의 이동 및 상기 바디의 이동 중 상기 바디의 이동만을 반영하는 방법
19 19
청구항 15에 있어서, 상기 제1 이미지 및 상기 제2 이미지를 포함하는 상기 제1 비디오 시퀀스 내의 복수의 이미지들 각각은, 상기 시각적 객체에 의해 점유되는 부분 및 제1 색상만을 가지는 배경 부분만을 포함하는 방법
20 20
청구항 15에 있어서, 상기 제2 비디오 시퀀스는, 고정된 상태의 카메라를 이용하여 상기 바디를 촬영한 비디오 시퀀스에 대응하는 방법
지정국 정보가 없습니다
패밀리정보가 없습니다
국가 R&D 정보가 없습니다.