| 1 |
1
기준시점 깊이영상으로부터 가상시점의 깊이영상을 생성하는 가상시점 영상 생성을 위한 경계 잡음 제거 및 홀 채움 방법에 있어서,(a) 3D 워핑 방법을 통해 상기 기준시점 깊이영상으로부터 가상시점 영상을 생성하되, 상기 가상시점 영상에서 가려짐 영역(occlusion)이 홀의 형태로 나타나는 단계;(b) 홀의 인접 지역에서 경계 잡음 영역을 검출하여, 상기 경계 잡음 영역의 화소를 홀 영역으로 확장하는 단계;(c) 상기 홀 영역에 대응하는 제1 채움 영역을 구하되, 나선형 가중 평균 방법에 의하여 각 홀의 화소를 채울 수 있는 제1 채움 영역을 구하는 단계;(d) 상기 홀 영역에 대응하는 제2 채움 영역을 구하되, 기울기 탐색 방법에 의하여 각 홀의 화소를 채울 수 있는 제2 채움 영역을 구하는 단계;(e) 상기 제1 및 제2 채움 영역들을 가중치로 조합하여 최종 채움 영역을 생성하는 단계; 및,(f) 상기 가상시점 영상의 홀 영역을 상기 최종 채움 영역으로 채워서 최종 가상시점 영상을 생성하는 단계를 포함하는 것을 특징으로 하는 가상시점 영상 생성을 위한 경계 잡음 제거 및 홀 채움 방법
|
| 2 |
2
제1항에 있어서,상기 (b)단계에서, 배경 영역에서 수평방향으로 사전에 정해진 크기의 영역(이하 인접 영역)의 평균을 구하고 상기 인접 영역의 평균을 홀 인접 지역 화소부터 비교하여 절대값 차이가 사전에 정해진 임계치보다 크면 경계 잡음으로 판단하는 것을 특징으로 하는 가상시점 영상 생성을 위한 경계 잡음 제거 및 홀 채움 방법
|
| 3 |
3
제2항에 있어서,상기 (b)단계에서, 상기 인접 영역의 화소(이하 제1 화소)가 경계 잡음으로 판단되면 상기 제1 화소의 위치에 연속된 화소까지 비교를 하여 연속된 경계 잡음을 검출하는 것을 특징으로 하는 가상시점 영상 생성을 위한 경계 잡음 제거 및 홀 채움 방법
|
| 4 |
4
제1항에 있어서,상기 (c)단계 또는 (d)단계에서, 가상시점 영상과 기준시점 영상과의 위치를 고려하여 배경에서 가까운 부분부터 채우는 것을 특징으로 하는 가상시점 영상 생성을 위한 경계 잡음 제거 및 홀 채움 방법
|
| 5 |
5
제4항에 있어서,상기 기준시점 영상의 시점 위치에 대비하여 상기 가상시점 영상의 시점 위치 방향에 있는 화소부터 채우는 것을 특징으로 하는 가상시점 영상 생성을 위한 경계 잡음 제거 및 홀 채움 방법
|
| 6 |
6
제1항에 있어서, 상기 (c)단계는,(c1) 상기 홀 영역의 화소(이하 홀 화소)를 하나 선택하는 단계;(c2) 상기 홀 화소에 이웃하는 화소 중에서 가장 작은 깊이 값을 초기 깊이값으로 결정하고, 상기 초기 깊이값의 화소를 기준 화소로 결정하는 단계;(c3) 상기 기준 화소를 중심으로 나선형으로 탐색하되, 상기 초기 깊이 값과 탐색한 화소간의 깊이 값의 차이가 사전에 정해진 임계치 이하인 화소를 검출하는 단계;(c4) 검출된 화소들의 색상과 깊이 값에 기준 화소와의 거리 차이에 따른 가중치를 곱하고, 곱한 값들의 평균값 구하여, 기준 화소의 색상 값과 깊이 값으로 할당하는 단계; 및,(c5) 상기 (c1)단계 내지 (c4)단계를 상기 홀 영역의 모든 화소에 적용하는 단계를 포함하는 것을 특징으로 하는 가상시점 영상 생성을 위한 경계 잡음 제거 및 홀 채움 방법
|
| 7 |
7
제6항에 있어서,상기 검출된 화소의 색상 값 ST(x,y)와 깊이 값 SD(x,y)를 [수식 1]에 의해 구하는 것을 특징으로 하는 가상시점 영상 생성을 위한 경계 잡음 제거 및 홀 채움 방법
|
| 8 |
8
제1항에 있어서, 상기 (d)단계는,(d1) 홀 화소에서 상기 홀 화소의 주변에 있는 화소로의 방향에 존재하는 화소들의 색상 값 차이로 기울기 값을 구하고, 최대 기울기를 갖는 방향의 화소(이하 최초 화소)를 찾는 단계;(d2) 상기 최초 화소의 방향과 같은 방향 내의 주변 화소 중에서 상기 최초 화소와 색상 값의 차이가 최소인 화소(이하 선택 화소)를 찾는 단계;(d3) 상기 선택 화소로 이동하여, 탐색 범위 내에서 (d2)의 단계를 반복하여 선택 화소를 찾는 단계;(d4) (d1)부터(d3)의 과정에 찾은 모든 선택 화소들의 평균을 구하여 공통 홀의 화소 값으로 할당하는 단계; 및,(d5) 상기 공통 홀의 화소 값으로 상기 홀 영역의 공통 홀을 채울 수 있는 상기 제2 채움 영역을 구하는 단계를 포함하는 것을 특징으로 하는 가상시점 영상 생성을 위한 경계 잡음 제거 및 홀 채움 방법
|
| 9 |
9
제1항에 있어서, 상기 (e)단계에서, 상기 최종 채움 영역의 홀 화소의 색상값 FT(x,y)는 다음 [수식 2]에 의해 계산되는 것을 특징으로 하는 가상시점 영상 생성을 위한 경계 잡음 제거 및 홀 채움 방법
|
