| 1 |
1
가상시점 영상을 생성하는 방법으로서,적어도 하나의 입력시점 영상(input-viewpoint image)을 획득하고, 상기 적어도 하나의 입력시점 영상의 픽셀을 가상시점(virtual-viewpoint) 영상좌표계로 워핑시키는 단계,상기 영상좌표계로 워핑된 복수의 픽셀 중 제1 픽셀의 제1 깊이 값과 상기 제1 픽셀에 인접하는 제2 픽셀의 제2 깊이 값 사이의 차이가 미리 결정된 임계치보다 작거나 같으면 상기 제1 픽셀에 패치(patch)를 맵핑하고, 상기 차이가 상기 미리 결정된 임계치보다 크면 상기 제1 픽셀에 상기 패치를 맵핑하지 않는 단계, 그리고상기 워핑된 복수의 픽셀 및/또는 상기 패치를 블렌딩하여 상기 가상시점 영상을 생성하는 단계를 포함하는 가상시점 영상 생성 방법
|
| 2 |
2
제1항에서,상기 제1 픽셀의 깊이 값은 상기 제2 픽셀의 깊이 값보다 작은, 가상시점 영상 생성 방법
|
| 3 |
3
제1항에서,상기 워핑된 복수의 픽셀 및/또는 상기 패치를 블렌딩하여 상기 가상시점 영상을 생성하는 단계는,상기 워핑된 복수의 픽셀의 깊이 값의 분포를 바탕으로 상기 워핑된 복수의 픽셀에 각각 가중치를 할당하는 단계, 그리고상기 가중치를 바탕으로 상기 워핑된 복수의 픽셀 및/또는 상기 패치를 블렌딩하는 단계를 포함하는, 가상시점 영상 생성 방법
|
| 4 |
4
제3항에서,상기 워핑된 복수의 픽셀의 깊이 값의 분포를 바탕으로 상기 워핑된 복수의 픽셀에 각각 가중치를 할당하는 단계는,상기 워핑된 복수의 픽셀 중 밀집 분포 내에 포함된 복수의 픽셀에는 큰 가중치를 할당하고, 상기 워핑된 복수의 픽셀 중 희소 분포를 보이는 픽셀에는 작은 가중치를 할당하는 단계를 포함하는, 가상시점 영상 생성 방법
|
| 5 |
5
제3항에서,상기 가중치를 바탕으로 상기 워핑된 복수의 픽셀 및/또는 상기 패치를 블렌딩하는 단계는,상기 워핑된 복수의 픽셀 중 희소 분포를 보이는 픽셀을 블렌딩에서 제외하고, 상기 워핑된 복수의 픽셀 중 밀집 분포 내에 포함된 복수의 픽셀을 블렌딩에 사용하는 단계를 포함하는, 가상시점 영상 생성 방법
|
| 6 |
6
제3항에서,상기 워핑된 복수의 픽셀 및/또는 상기 패치를 블렌딩하여 상기 가상시점 영상을 생성하는 단계는,상기 패치 중 상대적으로 크기가 큰 패치에 상대적으로 작은 가중치를 할당하고, 상기 패치 중 상대적으로 크기가 작은 패치에 상대적으로 큰 가중치를 할당하는 단계를 더 포함하는, 가상시점 영상 생성 방법
|
| 7 |
7
제1항에서,상기 워핑된 복수의 픽셀 및/또는 상기 패치를 블렌딩하여 상기 가상시점 영상을 생성하는 단계는,상기 워핑된 복수의 픽셀이 상기 적어도 하나의 입력시점 영상의 픽셀과 서로 떨어진 거리에 따른 제1 가중치를 결정하는 단계,상기 워핑된 복수의 픽셀의 깊이 값의 역수에 비례하는 제2 가중치를 결정하는 단계, 그리고상기 제1 가중치 및 상기 제2 가중치를 통합하여 최종 가중치를 결정하고, 상기 최종 가중치를 바탕으로 상기 워핑된 복수의 픽셀 및/또는 상기 패치를 블렌딩하는 단계를 포함하는, 가상시점 영상 생성 방법
|
| 8 |
8
제1항에서,상기 워핑된 복수의 픽셀 및/또는 상기 패치를 블렌딩하여 상기 가상시점 영상을 생성하는 단계는,상기 패치 중 상대적으로 크기가 큰 제1 패치에는 상대적으로 작은 가중치를 할당하고, 상기 패치 중 상대적으로 크기가 작은 제2 패치에는 상대적으로 큰 가중치를 할당하는 단계, 및상기 제1 패치에 할당된 가중치 및 상기 제2 패치에 할당된 가중치를 고려하여 상기 제1 패치 및 상기 제2 패치를 블렌딩하는 단계를 포함하는, 가상시점 영상 생성 방법
|
| 9 |
9
제1항에서,상기 워핑된 복수의 픽셀 및/또는 상기 패치를 블렌딩하여 상기 가상시점 영상을 생성하는 단계는,상기 워핑된 복수의 픽셀이 상기 적어도 하나의 입력시점 영상의 픽셀과 서로 떨어진 거리에 따른 제1 가중치를 결정하는 단계,상기 워핑된 복수의 픽셀의 깊이 값의 역수에 비례하는 제2 가중치를 결정하는 단계, 상기 워핑된 복수의 픽셀의 깊이 값의 분포를 바탕으로 제3 가중치를 결정하는 단계, 상기 패치의 크기에 따른 제4 가중치를 결정하는 단계, 그리고상기 제1 가중치, 상기 제2 가중치, 상기 제3 가중치, 및 상기 제4 가중치를 통합하여 최종 가중치를 결정하고, 상기 최종 가중치를 바탕으로 상기 워핑된 복수의 픽셀 및/또는 상기 패치를 블렌딩하는 단계를 포함하는, 가상시점 영상 생성 방법
|
| 10 |
10
가상시점 영상을 생성하는 장치로서,적어도 하나의 입력시점 영상(input-viewpoint image)의 픽셀을 가상시점(virtual-viewpoint) 영상좌표계로 워핑시키는 워핑부, 및상기 영상좌표계로 워핑된 복수의 픽셀의 깊이 값의 분포를 바탕으로 상기 워핑된 복수의 픽셀에 각각 가중치를 할당하고, 상기 가중치를 바탕으로 상기 워핑된 복수의 픽셀을 블렌딩하는 블렌딩부를 포함하는 가상시점 영상 생성 장치
|
| 11 |
11
제10항에서,상기 블렌딩부는,상기 워핑된 복수의 픽셀 중 밀집 분포 내에 포함된 복수의 픽셀에는 큰 가중치를 할당하고, 상기 워핑된 복수의 픽셀 중 희소 분포를 보이는 픽셀에는 작은 가중치를 할당하는, 가상시점 영상 생성 장치
|
| 12 |
12
제10항에서,상기 블렌딩부는,상기 워핑된 복수의 픽셀 중 희소 분포를 보이는 픽셀을 블렌딩에서 제외하고, 상기 워핑된 복수의 픽셀 중 밀집 분포 내에 포함된 복수의 픽셀을 블렌딩에 사용하는, 가상시점 영상 생성 장치
|
| 13 |
13
제10항에서,상기 블렌딩부는,상기 워핑된 복수의 픽셀이 상기 적어도 하나의 입력시점 영상의 픽셀과 서로 떨어진 거리에 따른 제1 가중치를 결정하고, 상기 워핑된 복수의 픽셀의 깊이 값의 역수에 비례하는 제2 가중치를 결정하고, 상기 제1 가중치 및 상기 제2 가중치를 통합하여 최종 가중치를 결정하며, 상기 최종 가중치를 바탕으로 상기 워핑된 복수의 픽셀 및/또는 상기 패치를 블렌딩하는, 가상시점 영상 생성 장치
|
| 14 |
14
제10항에서,상기 워핑된 복수의 픽셀 중 제1 픽셀의 제1 깊이 값과 상기 제1 픽셀에 인접하는 제2 픽셀의 제2 깊이 값 사이의 차이를 바탕으로 상기 제1 픽셀에 슈퍼픽셀을 맵핑하는 슈퍼픽셀 맵핑부를 더 포함하는 가상시점 영상 생성 장치
|
| 15 |
15
제14항에서,상기 슈퍼픽셀 맵핑부는,상기 차이가 미리 결정된 임계치보다 작거나 같으면 상기 제1 픽셀에 패치(patch)를 맵핑하고, 상기 차이가 상기 미리 결정된 임계치보다 크면 상기 패치를 맵핑하지 않는, 가상시점 영상 생성 장치
|
| 16 |
16
제10항에서,상기 블렌딩부는,상기 적어도 하나의 입력시점 영상 중 제1 입력시점 영상으로부터 복수의 제1 픽셀이 상기 가상시점 영상좌표계의 제1 위치로 워핑될 때, 상기 복수의 제1 픽셀 중 가장 작은 깊이 값을 갖는 픽셀을 상기 제1 입력시점 영상의 대표 픽셀로 결정하는, 가상시점 영상 생성 장치
|
| 17 |
17
제14항에서,상기 블렌딩부는,상기 슈퍼픽셀 중 상대적으로 크기가 큰 슈퍼픽셀에 상대적으로 작은 가중치를 할당하고, 상기 슈퍼픽셀 중 상대적으로 크기가 작은 슈퍼픽셀에 상대적으로 큰 가중치를 할당하는, 가상시점 영상 생성 장치
|
| 18 |
18
제10항에서,상기 블렌딩부는,상기 워핑된 복수의 픽셀이 상기 적어도 하나의 입력시점 영상의 픽셀과 서로 떨어진 거리에 따른 제1 가중치를 결정하고, 상기 워핑된 복수의 픽셀의 깊이 값의 역수에 비례하는 제2 가중치를 결정하고, 상기 워핑된 복수의 픽셀의 깊이 값의 분포를 바탕으로 제3 가중치를 결정하고, 상기 제1 가중치, 상기 제2 가중치, 및 상기 제3 가중치를 통합하여 최종 가중치를 결정하며, 상기 최종 가중치를 바탕으로 상기 워핑된 복수의 픽셀 및/또는 상기 패치를 블렌딩하는, 가상시점 영상 생성 장치
|
| 19 |
19
제14항에서,상기 블렌딩부는,상기 워핑된 복수의 픽셀이 상기 적어도 하나의 입력시점 영상의 픽셀과 서로 떨어진 거리에 따른 제1 가중치를 결정하고, 상기 워핑된 복수의 픽셀의 깊이 값의 역수에 비례하는 제2 가중치를 결정하고, 상기 워핑된 복수의 픽셀의 깊이 값의 분포를 바탕으로 제3 가중치를 결정하고, 상기 패치의 크기에 따른 제4 가중치를 결정하고, 상기 제1 가중치, 상기 제2 가중치, 상기 제3 가중치, 및 상기 제4 가중치를 통합하여 최종 가중치를 결정하며, 상기 최종 가중치를 바탕으로 상기 워핑된 복수의 픽셀 및/또는 상기 패치를 블렌딩하는, 가상시점 영상 생성 장치
|
| 20 |
20
가상시점 영상을 생성하는 장치로서,프로세서 및 메모리를 포함하고,상기 프로세서는 상기 메모리에 포함된 프로그램을 실행하여,영상 촬영 장치로부터 전달된 적어도 하나의 입력시점 영상(input-viewpoint image)의 픽셀을 가상시점(virtual-viewpoint) 영상좌표계로 워핑시키는 단계, 및상기 영상좌표계로 워핑된 복수의 픽셀 중 제1 픽셀의 제1 깊이 값과 상기 제1 픽셀에 인접하는 제2 픽셀의 제2 깊이 값 사이의 차이가 미리 결정된 임계치보다 작거나 같으면 상기 제1 픽셀에 패치(patch)를 맵핑하고, 상기 차이가 상기 미리 결정된 임계치보다 크면 상기 제1 픽셀에 상기 패치를 맵핑하지 않는 단계, 그리고상기 워핑된 복수의 픽셀 및/또는 상기 패치를 블렌딩하여 상기 가상시점 영상을 생성하는 단계를 수행하는, 가상시점 영상 생성 장치
|
