| 1 |
1
객체에 대하여 다시점으로 촬영한 복수의 영상을 수신하여 상기 복수의 영상의 깊이영상을 추정하는 깊이영상 추정부;상기 깊이영상을 융합하며, 상기 깊이영상 추정부에서 추정된 깊이영상에 대한 신뢰도를 측정하는 신뢰도 추정부를 포함하는 깊이영상 융합부; 및상기 융합된 깊이영상을 이용하여 상기 객체의 모션 정보를 추정하고, 상기 추정된 모션 정보를 기초로 하여 상기 융합된 깊이영상에 대응되는 키볼륨을 업데이트하여 상기 객체를 복원하는 복원부를 포함하며,상기 복수의 영상은 RGB 영상정보 및 IR 영상정보를 포함하고, 상기 깊이영상 추정부는 상기 RGB 영상정보를 스테레오 정합하여 제1 깊이영상으로 추정하고, 상기 IR 영상정보를 스테레오 정합하여 제2 깊이영상으로 추정하는 스테레오 정합부 및 상기 제1 깊이영상 및 제2 깊이영상을 이용하여 전경영역 영상 및 배경영역 영상을 분리하여 객체정보를 획득하는 전배경 분리부를 포함하고,상기 깊이영상 융합부는 깊이영상에 대해 신뢰도를 추정한 후 상기 제1 깊이영상 및 제2 깊이영상을 융합하는 것을 특징으로 하는 모션 정보를 이용한 객체 복원 장치
|
| 2 |
2
제1항에 있어서,상기 객체의 영상을 촬영하는 하나 이상의 카메라 세트를 포함하고, 상기 하나 이상의 카메라 세트는,RGB 카메라 및 IR 카메라 중 적어도 하나 이상을 포함하는 모션 정보를 이용한 객체 복원 장치
|
| 3 |
3
제1항에 있어서, 상기 깊이영상 추정부는,상기 깊이영상을 정합하는 스테레오 정합부; 및상기 깊이영상에서 전경 영역 영상 및 배경 영역 영상을 분리하는 전배경 분리부를 포함하는 모션 정보를 이용한 객체 복원 장치
|
| 4 |
4
제1항에 있어서,상기 복원부는,대응점 비교를 통해 상기 융합된 깊이영상에 대응되는 키 볼륨을 탐색하고, 상기 융합된 깊이영상에 대응되는 키 볼륨이 존재하지 않으면 키 볼륨을 생성하는 키 볼륨 생성부; 및상기 융합된 깊이영상에 대응되는 키 볼륨이 존재하면, 상기 융합된 깊이영상으로부터 상기 객체의 모션 정보를 추정하고, 상기 추정된 모션 정보를 기초로 상기 융합된 깊이영상에 대응되는 키 볼륨을 업데이트하는 키 볼륨 업데이트부를 포함하는 모션 정보를 이용한 객체 복원 장치
|
| 5 |
5
하나 이상의 카메라 세트를 이용하여 객체의 영상을 획득하는 단계; 상기 카메라 세트에서 획득된 영상의 깊이영상을 추정하는 단계;상기 카메라 세트에서 추정된 상기 깊이영상을 융합하는 단계;상기 융합된 깊이영상을 이용하여 상기 객체의 모션 정보를 추정하는 단계;상기 추정된 모션 정보를 기초로 상기 융합된 깊이영상에 대응되는 키 볼륨을 업데이트하는 단계; 및상기 업데이트된 키 볼륨에 기초하여 상기 객체를 복원하는 단계를 포함하며,상기 객체의 영상은 복수의 RGB 영상정보 및 IR 영상정보를 포함하고, 상기 RGB 영상정보는 스테레오 정합되어 제1 깊이영상으로 추정되고, 상기 IR 영상정보는 스테레오 정합되어 제2 깊이영상으로 추정되며,상기 깊이영상을 융합하는 단계는 상기 제1 깊이영상 및 제2 깊이영상에 대해 신뢰도를 추정하는 단계 및 상기 제1 깊이영상 및 제2 깊이영상을 융합하는 단계를 포함하는 모션 정보를 이용한 객체 복원 방법
|
| 6 |
6
제5항에 있어서,상기 깊이영상을 추정하는 단계는,상기 깊이영상을 추정하도록, 상기 카메라 세트로부터 둘 이상의 영상 정보를 수신하여 스테레오 정합을 수행하는 단계; 및 상기 스테레오 정합된 영상에서 전경 영역 영상 및 배경 영역 영상을 분리하여 전배경 분할 마스크를 획득하는 단계를 포함하는 모션 정보를 이용한 객체 복원 방법
|
| 7 |
7
삭제
|
| 8 |
8
삭제
|
| 9 |
9
삭제
|
| 10 |
10
제5항에 있어서,대응점 비교를 통해 상기 융합된 깊이영상에 대응되는 키 볼륨을 탐색하는 단계; 및 상기 융합된 깊이영상에 대응되는 키 볼륨이 존재하지 않으면, 키 볼륨을 생성하는 단계를 더 포함하고,상기 키 볼륨을 업데이트하는 단계는,상기 융합된 깊이영상에 대응되는 키 볼륨이 존재하면, 상기 추정된 모션정보를 기초로 상기 융합된 깊이영상에 대응되는 키 볼륨을 업데이트하는 모션 정보를 이용한 객체 복원 방법
|
| 11 |
11
제5항에 있어서,상기 객체를 복원하는 단계는,상기 업데이트된 키 볼륨을 와핑(warping)하여 메시 및 텍스처를 생성하는 단계를 포함하는 모션 정보를 이용한 객체 복원 방법
|
