1 |
1
가상 시점의 이미지 생성 방법에 있어서,가상시점을 기준으로 한 적어도 하나의 장면에 대응되는 가상 이미지 제공을 요청받는 과정과,상기 가상시점과 다른 시점을 기준으로 획득된 적어도 하나의 이미지를 사용하여 후보 이미지 셋을 생성하되, 상기 후보 이미지 셋은 상기 가상시점에 대응되며 서로 다른 깊이를 구비하는 적어도 하나의 후보 이미지를 포함하는 것을 특징으로 하는 과정과,상기 적어도 하나의 후보 이미지의 경계를 검출한 적어도 하나의 경계 이미지를 포함하는 경계 이미지 셋을 확인하는 과정과,학습을 통해 구축된 가상시점 영상 생성부에, 상기 후보 이미지 셋 및 경계 이미지 셋을 입력하여, 상기 가상 이미지를 생성하는 과정을 포함하는 것을 특징으로 하는 가상 시점의 이미지 생성 방법
|
2 |
2
제1항에 있어서,상기 적어도 하나의 상기 후보 이미지 셋과, 상기 적어도 하나의 상기 경계 이미지 셋을 입력으로 하고, 상기 가상시점을 기준으로 한 적어도 하나의 장면에 대응되는 이미지를 출력으로 결정하는 학습을 통해 가상시점 영상 생성부를 구축하는 과정을 더 포함하는 것을 특징으로 하는 가상 시점의 이미지 생성 방법
|
3 |
3
제2항에 있어서,상기 가상시점 영상 생성부를 구축하는 과정은,상기 적어도 하나의 후보 이미지 셋에 구비되며 서로 다른 깊이에 각각 대응되는 상기 적어도 하나의 후보 이미지에 대한 색상정보를 결정하는 네트워크를 구축하는 과정을 포함하는 것을 특징으로 하는 가상 시점의 이미지 생성 방법
|
4 |
4
제3항에 있어서,상기 가상시점 영상 생성부를 구축하는 과정은,상기 적어도 하나의 후보 이미지 셋에 구비되며 서로 다른 깊이에 각각 대응되는 상기 적어도 하나의 후보 이미지에 대한 확률정보를 결정하는 네트워크를 구축하는 과정을 포함하는 것을 특징으로 하는 가상 시점의 이미지 생성 방법
|
5 |
5
제4항에 있어서,상기 적어도 하나의 이미지에 대한 확률정보를 결정하는 네트워크를 구축하는 과정은,상기 적어도 하나의 후보 이미지의 픽셀별 확률값을 결정하는 네트워크를 구축하는 과정과,상기 경계 이미지 셋에 구비되는 상기 적어도 하나의 경계 이미지의 픽셀별 확률값을 결정하는 네트워크를 구축하는 과정과,상기 적어도 하나의 후보 이미지의 픽셀별 확률값과, 상기 적어도 하나의 경계 이미지의 픽셀별 확률값을 조합하여 상기 적어도 하나의 후보 이미지에 대한 확률정보를 결정하는 네트워크를 구축하는 과정을 포함하는 것을 특징으로 하는 가상 시점의 이미지 생성 방법
|
6 |
6
제1항에 있어서,상기 가상 이미지를 생성하는 과정은,상기 가상시점 영상 생성부를 사용하여, 상기 적어도 하나의 후보 이미지에 대한 색상정보와, 상기 적어도 하나의 이미지에 대한 확률정보를 결정하는 과정과,결정된 상기 색상정보와 확률정보의 조합에 의해 상기 가상 이미지를 구성하는 과정을 포함하는 것을 특징으로 하는 가상 시점의 이미지 생성 방법
|
7 |
7
제1항에 있어서,상기 후보 이미지 셋은 상기 적어도 하나의 후보 이미지를 다운 샘플링하여 구성한 적어도 하나의 다운 샘플링 이미지를 더 포함하는 것을 특징으로 하는 가상 시점의 이미지 생성 방법
|
8 |
8
가상 시점의 이미지 생성 방법에 있어서,가상시점을 기준으로 한 적어도 하나의 장면에 대응되는 가상 이미지 제공을 요청받는 과정과,상기 가상시점과 다른 시점을 기준으로 획득된 적어도 하나의 참조 이미지를 사용하여 적어도 하나의 경계 이미지를 확인하는 과정과,상기 적어도 하나의 경계 이미지에 기초하여, 상기 적어도 하나의 참조 이미지보다 상대적으로 작은 크기의 적어도 하나의 분할 영역을 설정하는 과정과, 상기 적어도 하나의 분할 영역에 대응되며 적어도 하나의 부분 이미지를 포함하는 적어도 하나의 부분 이미지 셋을 생성하되, 상기 적어도 하나의 부분 이미지는 상기 가상시점에 대응되며 서로 다른 깊이를 구비하는 것을 특징으로 하는 과정과,학습을 통해 구축된 적어도 하나의 가상시점 영상 생성부에, 상기 적어도 하나의 부분 이미지 셋을 각각 입력하여, 상기 적어도 하나의 부분 가상 이미지를 생성하는 과정과,상기 적어도 하나의 부분 가상 이미지를 반영하여 상기 가상 이미지를 생성하는 과정을 포함하는 것을 특징으로 하는 가상 시점의 이미지 생성 방법
|
9 |
9
제8항에 있어서,상기 적어도 하나의 분할 영역에 대응되는 적어도 하나의 부분 경계 이미지를 확인하고, 상기 적어도 하나의 부분 경계 이미지를 포함하는 적어도 하나의 부분 경계 이미지 셋을 생성하는 과정을 더 포함하는 것을 특징으로 하는 가상 시점의 이미지 생성 방법
|
10 |
10
제8항에 있어서상기 적어도 하나의 부분 이미지 셋은, 상기 적어도 하나의 이미지의 제1영역에 대응되는 제1부분 이미지 셋 및 상기 제1영역과 다른 적어도 하나의 제2영역에 대응되는 제2부분 이미지 셋을 포함하는 것을 특징으로 하는 가상 시점의 이미지 생성 방법
|
11 |
11
제10항에 있어서,상기 적어도 하나의 부분 가상 이미지를 생성하는 과정은,제1네트워크를 통해, 상기 제1부분 이미지 셋에 구비되며 서로 다른 깊이에 각각 대응되는 상기 적어도 하나의 제1부분 이미지에 대한 색상정보를 결정하는 과정과,제2네트워크를 통해, 상기 제2부분 이미지 셋에 구비되며 서로 다른 깊이에 각각 대응되는 상기 적어도 하나의 제2부분 이미지에 대한 색상정보를 결정하는 과정을 포함하는 것을 특징으로 하는 가상 시점의 이미지 생성 방법
|
12 |
12
제11항에 있어서,상기 제1네트워크를 통해, 상기 제1부분 이미지 셋에 구비되며 서로 다른 깊이에 각각 대응되는 상기 적어도 하나의 제1부분 이미지에 대한 확률정보를 결정하는 과정을 더 포함하고, 상기 제2네트워크를 통해, 상기 제2부분 이미지 셋에 구비되며 서로 다른 깊이에 각각 대응되는 상기 적어도 하나의 제2부분 이미지에 대한 확률정보를 결정하는 네트워크를 구축하는 과정을 더 포함하는 것을 특징으로 하는 가상 시점의 이미지 생성 방법
|
13 |
13
제12항에 있어서,상기 적어도 하나의 제1부분 이미지에 대한 확률정보를 결정하는 과정은,상기 적어도 하나의 제1부분 이미지의 픽셀별 확률값을 결정하는 과정과,상기 적어도 하나의 제1부분 이미지에 각각 대응되는 상기 적어도 하나의 제1부분 경계 이미지의 픽셀별 확률값을 결정하는 과정과,상기 적어도 하나의 제1부분 이미지의 픽셀별 확률값과, 상기 적어도 하나의 제1부분 경계 이미지의 픽셀별 확률값을 조합하여 상기 적어도 하나의 제1부분 이미지에 대한 최종 확률정보를 결정하는 과정을 포함하고,상기 적어도 하나의 제2부분 이미지에 대한 확률정보를 결정하는 과정은,상기 적어도 하나의 제2부분 이미지의 픽셀별 확률값을 결정하는 과정과,상기 적어도 하나의 제2부분 이미지에 각각 대응되는 상기 적어도 하나의 제2부분 경계 이미지의 픽셀별 확률값을 결정하는 과정과,상기 적어도 하나의 제2부분 이미지의 픽셀별 확률값과, 상기 적어도 하나의 제2부분 경계 이미지의 픽셀별 확률값을 조합하여 상기 적어도 하나의 제2부분 이미지에 대한 확률정보를 결정하는 과정을 포함하는 것을 특징으로 하는 가상 시점의 이미지 생성 방법
|
14 |
14
제8항에 있어서,상기 적어도 하나의 부분 가상 이미지를 생성하는 과정은,상기 적어도 하나의 가상시점 영상 생성부를 사용하여, 상기 적어도 하나의 부분 이미지에 대한 색상정보와, 상기 적어도 하나의 부분 이미지에 대한 확률정보를 결정하는 과정과,결정된 상기 색상정보와 확률정보의 조합에 의해 상기 적어도 하나의 부분 가상 이미지를 구성하는 과정을 포함하는 것을 특징으로 하는 가상 시점의 이미지 생성 방법
|
15 |
15
제8항에 있어서,상기 부분 이미지 셋은 상기 적어도 하나의 부분 이미지를 다운 샘플링하여 구성한 적어도 하나의 다운 샘플링 이미지를 더 포함하는 것을 특징으로 하는 가상 시점의 이미지 생성 방법
|