| 1 |
1
입력 시점의 깊이 정보를 이용하여, 서로 다른 시점 영상들을 가상 시점에 대하여 워핑하는 단계; 상기 워핑된 시점 영상들의 화소들의 품질 및 깊이를 기초로 상기 화소들에 대한 제1 가중치를 결정하는 단계; 상기 워핑된 시점 영상들의 화소들과 상기 가상 시점과의 위치 관계를 기초로 상기 화소들에 대한 제2 가중치를 결정하는 단계; 상기 제1 가중치 및 상기 제2 가중치를 기초로 상기 화소들에 대한 혼합 가중치를 결정하는 단계;상기 혼합 가중치에 따라 상기 워핑된 시점 영상들을 혼합하는 단계; 및 상기 혼합된 시점 영상들을 기초로 상기 가상 시점의 영상을 합성하는 단계를 포함하는 것을 특징으로 하는 가상 시점 영상 합성 방법
|
| 2 |
2
제1항에 있어서,상기 입력 시점의 상기 시점 영상들을 가상 시점에 대하여 워핑하는 단계는,상기 시점 영상의 화소에 인접한 3개의 화소들로 정의되는 삼각형 단위로 상기 시점 영상을 워핑하는 것을 특징으로 하는 가상 시점 영상 합성 방법
|
| 3 |
3
제2항에 있어서, 상기 워핑된 영상들의 화소의 품질의 값은,상기 시점 영상의 화소에 대응되는 삼각형 단위의 가장 긴 변의 길이에 반비례하는 것을 특징으로 하는, 가상 시점 영상 합성 방법
|
| 4 |
4
제2항에 있어서, 상기 워핑된 영상들의 화소의 깊이의 값은,상기 시점 영상의 화소에 대응되는 삼각형 단위의 3개의 화소들의 깊이 값을 보간하여 결정되는 것을 특징으로 하는, 가상 시점 영상 합성 방법
|
| 5 |
5
제1항에 있어서, 상기 제2 가중치는, 화소의 깊이 정보에 따른 상기 화소의 3차원 공간 상의 제1점, 입력 시점의 카메라 중심을 지시하는 제2점, 및 가상 시점의 카메라 중심을 지시하는 제3점으로 정의되는 영역의 면적을 기초로 결정되는 것을 특징으로 하는, 가상 시점 영상 합성 방법
|
| 6 |
6
제5항에 있어서,상기 제2 가중치는, 상기 영역의 면적에 반비례하도록 결정되는 것을 특징으로 하는, 가상 시점 영상 합성 방법
|
| 7 |
7
제5항에 있어서,상기 제2 가중치는, 상기 입력 시점의 카메라 중심을 지시하는 제2점과 상기 가상 시점의 카메라 중심을 지시하는 제3점 간의 거리와 상기 영역의 면적의 곱에 반비례하도록 결정되는 것을 특징으로 하는, 가상 시점 영상 합성 방법
|
| 8 |
8
제1항에 있어서, 상기 제2 가중치는, 카메라의 리그 구조, 영상의 특성 중 적어도 하나를 기초로 결정되는 것을 특징으로 하는, 가상 시점 영상 합성 방법
|
| 9 |
9
제1항에 있어서, 상기 워핑된 시점 영상들의 서로 다른 화소들의 위치가 동일한 경우, 상기 시점 영상들을 혼합하는 단계는, 상기 서로 다른 화소들의 혼합 가중치를 기초로 가중 혼합된 색상 값을 상기 시점 영상의 혼합에 사용하는 것을 특징으로 하는, 가상 시점 영상 합성 방법
|
| 10 |
10
제1항에 있어서, 합성한 상기 가상 시점의 영상의 홀(hole) 부분을 인페인팅(inpainting)하는 단계를 더 포함하는 것을 특징으로 하는 가상 시점 영상 합성 방법
|
| 11 |
11
입력 시점의 깊이 정보를 이용하여, 서로 다른 시점 영상들을 가상 시점에 대하여 워핑하는 투영부; 상기 워핑된 시점 영상들의 화소들에 대한 혼합 가중치에 따라 상기 워핑된 시점 영상들을 혼합하는 혼합부; 및 상기 혼합된 시점 영상들을 기초로 상기 가상 시점의 영상을 합성하는 합성부를 포함하는 것을 특징으로 하고, 상기 혼합 가중치는, 상기 워핑된 시점 영상들의 화소들의 품질 및 깊이를 기초로 결정되는 상기 화소들에 대한 제1 가중치 및 상기 워핑된 시점 영상들의 화소들과 상기 가상 시점과의 위치 관계를 기초로 결정되는 상기 화소들에 대한 제2 가중치를 기초로 결정되는 가상 시점 영상 합성 장치
|
| 12 |
12
제11항에 있어서, 상기 투영부는, 상기 시점 영상의 화소에 인접한 3개의 화소들로 정의되는 삼각형 단위로 상기 시점 영상을 워핑하는 것을 특징으로 하는 가상 시점 영상 합성 장치
|
| 13 |
13
제12항에 있어서, 상기 워핑된 영상들의 화소의 품질의 값은,상기 시점 영상의 화소에 대응되는 삼각형 단위의 가장 긴 변의 길이에 반비례하는 것을 특징으로 하는, 가상 시점 영상 합성 장치
|
| 14 |
14
제12항에 있어서, 상기 워핑된 영상들의 화소의 깊이의 값은,상기 시점 영상의 화소에 대응되는 삼각형 단위의 3개의 화소들의 깊이 값을 보간하여 결정되는 것을 특징으로 하는, 가상 시점 영상 합성 장치
|
| 15 |
15
제11항에 있어서, 상기 제2 가중치는, 화소의 깊이 정보에 따른 상기 화소의 3차원 공간 상의 제1점, 입력 시점의 카메라 중심을 지시하는 제2점, 및 가상 시점의 카메라 중심을 지시하는 제3점으로 정의되는 영역의 면적을 기초로 결정되는 것을 특징으로 하는, 가상 시점 영상 합성 장치
|
| 16 |
16
제15항에 있어서,상기 제2 가중치는, 상기 영역의 면적에 반비례하도록 결정되는 것을 특징으로 하는, 가상 시점 영상 합성 장치
|
| 17 |
17
제15항에 있어서,상기 제2 가중치는, 상기 입력 시점의 카메라 중심을 지시하는 제2점과 상기 가상 시점의 카메라 중심을 지시하는 제3점 간의 거리와 상기 영역의 면적의 곱에 반비례하도록 결정되는 것을 특징으로 하는, 가상 시점 영상 합성 장치
|
| 18 |
18
제11항에 있어서, 상기 제2 가중치는, 카메라의 리그 구조, 영상의 특성 중 적어도 하나를 기초로 결정되는 것을 특징으로 하는, 가상 시점 영상 합성 장치
|
| 19 |
19
제11항에 있어서, 상기 워핑된 시점 영상들의 서로 다른 화소들의 위치가 동일한 경우, 상기 혼합부는, 상기 서로 다른 화소들의 혼합 가중치를 기초로 가중 혼합된 색상 값을 상기 시점 영상의 혼합에 사용하는 것을 특징으로 하는, 가상 시점 영상 합성 장치
|
| 20 |
20
가상 시점 영상 합성 방법으로 합성된 가상 시점 영상을 저장하는 기록 매체로서, 상기 가상 시점 영상 합성 방법은, 입력 시점의 깊이 정보를 이용하여, 서로 다른 시점 영상들을 가상 시점에 대하여 워핑하는 단계; 상기 워핑된 시점 영상들의 화소들의 품질 및 깊이를 기초로 상기 화소들에 대한 제1 가중치를 결정하는 단계; 상기 워핑된 시점 영상들의 화소들과 상기 가상 시점과의 위치 관계를 기초로 상기 화소들에 대한 제2 가중치를 결정하는 단계; 상기 제1 가중치 및 상기 제2 가중치를 기초로 상기 화소들에 대한 혼합 가중치를 결정하는 단계;상기 혼합 가중치에 따라 상기 워핑된 시점 영상들을 혼합하는 단계; 및 상기 혼합된 시점 영상들을 기초로 상기 가상 시점의 영상을 합성하는 단계를 포함하는 것을 특징으로 하는 기록 매체
|
