| 1 |
1
깊이 측정 장치 및 영상 획득 장치를 이용하여 3차원 공간에 대한 깊이 정보 및 영상 데이터를 포함하는 공간 정보를 획득하는 단계;상기 공간 정보에 기초하여 깊이-영상 연계 정보를 구성하고, 상기 깊이-영상 연계 정보에 기초하여 상기 3차원 공간에 대응하는 3차원 가상 공간 모델을 구축하는 단계;상기 3차원 공간에서 사용자 디바이스에 의해 획득된 영상을 포함하는 사용자 정보를 수신하는 단계;상기 3차원 가상 공간 모델 내에서 상기 사용자 정보에 대응하는 대응 정보를 생성하는 단계; 상기 대응 정보와 상기 사용자 정보의 유사도를 산출하는 단계; 및상기 유사도에 기초하여 사용자 포즈로 추정하는 단계를 포함하는 3차원 공간에 대한 사용자 포즈 추정 방법
|
| 2 |
2
제1항에 있어서,상기 3차원 가상 공간 모델을 구축하는 단계는,상기 3차원 공간에 대한 영상 데이터에서 상기 3차원 공간의 구조와 관련된 배경 영역과 상기 3차원 공간에 놓인 물체에 해당하는 비배경 영역을 구분하고, 상기 배경 영역을 이용하여 상기 3차원 가상 공간 모델을 구축하는 것을 특징으로하는3차원 공간에 대한 사용자 포즈 추정 방법
|
| 3 |
3
제1항에 있어서,상기 대응 정보를 생성하는 단계는,상기 사용자 정보에 포함된 영상에서 상기 3차원 공간의 구조와 관련된 배경 영역과 상기 3차원 공간에 놓인 물체에 해당하는 비배경 영역을 구분하는 단계;상기 사용자 정보에 포함된 영상의 배경 영역을 이용하여 상기 사용자 정보를 가공하는 단계; 및상기 3차원 가상 공간 모델 내에서 가공된 사용자 정보에 대응하는 대응 정보를 생성하는 단계를 포함하는3차원 공간에 대한 사용자 포즈 추정 방법
|
| 4 |
4
제1항에 있어서,상기 유사도를 산출하는 단계는,상기 유사도를 높이는 방향으로 상기 대응 정보를 재 생성하는 단계; 및재 생성된 대응 정보에 기초하여 유사도를 재 산출하는 단계를 포함하는3차원 공간에 대한 사용자 포즈 추정 방법
|
| 5 |
5
제1항에 있어서, 상기 유사도를 산출하는 단계는,상기 사용자 정보 및 상기 대응 정보를 비교하기 위한 비교 대상 영역을 추출하는 단계;상기 사용자 정보에서 추출된 비교 대상 영역과 상기 대응 정보에서 추출된 비교 대상 영역에서 공통 영역을 결정하는 단계; 및상기 공통 영역에 기초하여 상기 사용자 정보 및 상기 대응 정보를 각각 재 생성하는 단계를 포함하는3차원 공간에 대한 사용자 포즈 추정 방법
|
| 6 |
6
제1항에 있어서, 상기 유사도를 산출하는 단계는,상기 사용자 디바이스 주변에 대한 추가적인 사용자 정보를 획득하는 단계; 및상기 사용자 정보 및 추가적인 사용자 정보에 기초하여 유사도를 산출하는 단계를 포함하는3차원 공간에 대한 사용자 포즈 추정 방법
|
| 7 |
7
제6항에 있어서, 상기 사용자 포즈를 추정하는 단계는, 상기 사용자 디바이스를 통해 상기 사용자 포즈의 추정에 이용되는 부가적인 정보인 사용자 부가 정보가 획득되는 경우, 상기 사용자 정보 또는 상기 추가적인 사용자 정보와 함께 상기 사용자 부가 정보를 이용하여 상기 사용자 포즈를 추정하는 것을 포함하는3차원 공간에 대한 사용자 포즈 추정 방법
|
| 8 |
8
제6항에 있어서, 상기 추가적인 사용자 정보를 획득하는 단계는,상기 3차원 가상 공간 모델에 기초하여 추가적인 사용자 정보 취득을 위한 안내 정보를 상기 사용자 디바이스로 전송하는 것을 포함하는3차원 공간에 대한 사용자 포즈 추정 방법
|
| 9 |
9
제8항에 있어서, 상기 안내 정보는 상기 3차원 가상 공간 모델 내의 기 설정된 특징점에 대한 사용자 정보 취득 포즈를 포함하고, 상기 추가적인 사용자 정보를 획득하는 단계는 상기 유사도를 높이는 방향으로 반복 수행되는 것을 특징으로 하는3차원 공간에 대한 사용자 포즈 추정 방법
|
| 10 |
10
3차원 공간에 대한 사용자의 위치(position) 및 방향(orientation) 정보를 포함하는 사용자 포즈를 추정하는 방법에 있어서,상기 3차원 공간에서 획득된 영상을 포함하는 사용자 정보를 수신하는 단계; 상기 3차원 공간에 대한 깊이 정보 및 영상 정보를 포함하는 공간 정보에 기초하여 구축된 3차원 가상 공간 모델을 확인하는 단계;상기 3차원 가상 공간 모델 내에서 상기 사용자 정보에 대응하는 대응 정보를 생성하는 단계; 상기 대응 정보와 상기 사용자 정보의 유사도를 산출하는 단계; 및상기 유사도에 기초하여 사용자 포즈를 추정하는 단계를 포함하는 3차원 공간에 대한 사용자 포즈 추정 방법
|
| 11 |
11
제10항에 있어서, 상기 3차원 가상 공간 모델은 상기 3차원 공간에 대한 영상 데이터에서 상기 3차원 공간의 구조와 관련된 배경 영역과 상기 3차원 공간에 놓인 물체에 해당하는 비배경 영역을 구분하고, 상기 배경 영역을 이용하여 구축된 것임을 특징으로 하는3차원 공간에 대한 사용자 포즈 추정 방법
|
| 12 |
12
제10항에 있어서,상기 대응 정보를 생성하는 단계는,상기 사용자 정보에 포함된 영상에서 상기 3차원 공간의 구조와 관련된 배경 영역과 상기 3차원 공간에 놓인 물체에 해당하는 비배경 영역을 구분하는 단계;상기 사용자 정보에 포함된 영상의 배경 영역을 이용하여 상기 사용자 정보를 가공하는 단계; 및상기 3차원 가상 공간 모델 내에서 가공된 사용자 정보에 대응하는 대응 정보를 생성하는 단계를 포함하는3차원 공간에 대한 사용자 포즈 추정 방법
|
| 13 |
13
제10항에 있어서,상기 유사도를 산출하는 단계는,상기 유사도를 높이는 방향으로 상기 대응 정보를 재 생성하는 단계; 및재 생성된 대응 정보에 기초하여 유사도를 재 산출하는 단계를 포함하는3차원 공간에 대한 사용자 포즈 추정 방법
|
| 14 |
14
제10항에 있어서, 상기 유사도를 산출하는 단계는,상기 사용자 정보 및 상기 대응 정보를 비교하기 위한 비교 대상 영역을 추출하는 단계;상기 사용자 정보에서 추출된 비교 대상 영역과 상기 대응 정보에서 추출된 비교 대상 영역에서 공통 영역을 결정하는 단계; 및상기 공통 영역에 기초하여 상기 사용자 정보 및 상기 대응 정보를 각각 재 생성하는 단계를 포함하는3차원 공간에 대한 사용자 포즈 추정 방법
|
| 15 |
15
제10항에 있어서, 상기 유사도를 산출하는 단계는,사용자 디바이스 주변에 대한 추가적인 사용자 정보를 획득하는 단계; 및상기 사용자 정보 및 추가적인 사용자 정보에 기초하여 유사도를 산출하는 단계를 포함하는3차원 공간에 대한 사용자 포즈 추정 방법
|
| 16 |
16
제15항에 있어서, 상기 사용자 포즈를 추정하는 단계는, 상기 사용자 디바이스를 통해 상기 사용자 포즈의 추정에 이용되는 부가적인 정보인 사용자 부가 정보가 획득되는 경우, 상기 사용자 정보 또는 상기 추가적인 사용자 정보와 함께 상기 사용자 부가 정보를 이용하여 상기 사용자 포즈를 추정하는 것을 포함하는3차원 공간에 대한 사용자 포즈 추정 방법
|
| 17 |
17
제15항에 있어서, 상기 추가적인 사용자 정보를 획득하는 단계는,상기 3차원 가상 공간 모델에 기초하여 추가적인 사용자 정보 취득을 위한 안내 정보를 상기 사용자 디바이스로 전송하는 것을 포함하는3차원 공간에 대한 사용자 포즈 추정 방법
|
| 18 |
18
제17항에 있어서, 상기 안내 정보는 상기 3차원 가상 공간 모델 내의 기 설정된 특징점에 대한 사용자 정보 취득 포즈를 포함하고, 상기 추가적인 사용자 정보를 획득하는 단계는 상기 유사도를 높이는 방향으로 반복 수행되는 것을 특징으로 하는3차원 공간에 대한 사용자 포즈 추정 방법
|
| 19 |
19
3차원 공간에 대한 깊이 정보 및 영상 데이터를 포함하는 공간 정보를 획득하는 공간 정보 획득부;상기 공간 정보에 기초하여 깊이-영상 연계 정보를 구성하고, 상기 깊이-영상 연계 정보에 기초하여 상기 3차원 공간에 대응하는 3차원 가상 공간 모델을 생성하는 가상 공간 모델 생성부;상기 3차원 공간에서 사용자 디바이스에 의해 획득된 영상을 포함하는 사용자 정보를 수신하는 사용자 정보 수신부; 및상기 3차원 가상 공간 모델 내에서 상기 사용자 정보에 대응하는 대응 정보를 생성하고, 상기 대응 정보와 상기 사용자 정보의 유사도를 산출하고, 상기 유사도에 기초하여 상기 사용자 포즈를 추정하도록 구성된 적어도 하나의 프로세서를 포함하는 제어부를 포함하는 3차원 공간에 대한 사용자 포즈 추정 장치
|
| 20 |
20
제19항에 있어서, 상기 공간 모델 생성부는,상기 3차원 공간에 대한 영상 데이터에서 상기 3차원 공간의 구조와 관련된 배경 영역과 상기 3차원 공간에 놓인 물체에 해당하는 비배경 영역을 구분하고, 상기 배경 영역을 이용하여 상기 3차원 가상 공간 모델을 구축하는 것을 특징으로하는3차원 공간에 대한 사용자 포즈 추정 장치
|
| 21 |
21
제19항에 있어서, 상기 제어부는상기 사용자 정보에 포함된 영상에서 상기 3차원 공간의 구조와 관련된 배경 영역과 상기 3차원 공간에 놓인 물체에 해당하는 비배경 영역을 구분하고, 상기 사용자 정보에 포함된 영상의 배경 영역을 이용하여 상기 사용자 정보를 가공하고, 상기 3차원 가상 공간 모델 내에서 가공된 사용자 정보에 대응하는 대응 정보를 생성하는3차원 공간에 대한 사용자 포즈 추정 장치
|
| 22 |
22
3차원 공간에 대한 사용자의 위치(position) 및 방향(orientation) 정보를 포함하는 사용자 포즈를 추정하는 장치에 있어서, 상기 3차원 공간에 대한 깊이 정보 및 영상 정보를 포함하는 공간 정보에 기초하여 구축된 3차원 가상 공간 모델을 제공하는 가상 공간 모델 제공부;상기 3차원 공간에서 사용자 디바이스에 의해 획득된 영상을 포함하는 사용자 정보를 수신하는 사용자 정보 수신부; 및상기 3차원 가상 공간 모델 내에서 상기 사용자 정보에 대응하는 대응 정보를 생성하고, 상기 대응 정보와 상기 사용자 정보의 유사도를 산출하고, 상기 유사도에 기초하여 상기 사용자 포즈를 추정하도록 구성된 적어도 하나의 프로세서를 포함하는 제어부를 포함하는 3차원 공간에 대한 사용자 포즈 추정 장치
|
| 23 |
23
제22항에 있어서,상기 3차원 가상 공간 모델은 상기 3차원 공간에 대한 영상 데이터에서 상기 3차원 공간의 구조와 관련된 배경 영역과 상기 3차원 공간에 놓인 물체에 해당하는 비배경 영역을 구분하고, 상기 배경 영역을 이용하여 구축된 것임을 특징으로 하는3차원 공간에 대한 사용자 포즈 추정 장치
|
| 24 |
24
3차원 공간에 대한 영상을 포함하는 사용자 정보를 생성하는 사용자 정보 생성부;상기 사용자 정보를 사용자 포즈 추정 서버로 전송하고, 3차원 가상 공간 모델에서 추정된 사용자 포즈에 대한 정보를 상기 서버로부터 수신하는 통신부; 및상기 사용자 정보 생성부 및 통신부의 동작을 제어하고, 상기 사용자 포즈에 대한 정보를 현재 구동 중인 어플리케이션 또는 구동 시스템으로 전달하도록 구성된 적어도 하나의 프로세서를 포함하는 제어부를 포함하는 3차원 공간에 대한 사용자 포즈 추정 장치
|
| 25 |
25
제24항에 있어서, 상기 3차원 가상 공간 모델은 상기 3차원 공간에 대한 깊이 정보 및 영상 정보를 포함하는 공간 정보에 기초하여 생성되고, 상기 3차원 공간에 대한 영상 데이터에서 상기 3차원 공간의 구조와 관련된 배경 영역과 상기 3차원 공간에 놓인 물체에 해당하는 비배경 영역을 구분하고, 상기 배경 영역을 이용하여 구축된 것임을 특징으로 하는3차원 공간에 대한 사용자 포즈 추정 장치
|
