| 1 |
1
동일 영상의 색상영상과 깊이맵에 있어서, 색상영상의 해상도 보다 낮은 해상도를 가진 깊이맵의 업샘플링에 방법에 있어서,상기 색상영상의 색상 차이를 산출하고 변화도 영상을 생성하는 기초정보생성단계;상기 깊이맵에서 업샘플링하고자 하는 화소(P0)와 적어도 둘 이상의 참조 화소 사이의 최단 경로들을 산출하는 경로산출단계;상기 산출된 각각의 경로상에 존재하는 화소 중 상기 변화도가 가장 큰 최대변화도 화소를 획득하는 최대변화도획득단계;상기 산출된 색상 차이 및 상기 획득된 최대변화도에 기반하여 신뢰도를 산출하는 신뢰도산출단계; 및상기 산출된 신뢰도가 기 설정된 신뢰도(Titer) 이상인 화소의 깊이 값을 이용하여 빈 영역을 채우는 업샘플링단계를 포함하는 것을 특징으로 하는 깊이맵 업샘플링 방법
|
| 2 |
2
제 1 항에 있어서,상기 기초정보생성단계에서 산출되는 상기 색상 차이는 특정 화소와 상기 특정 화소와 인접한 화소간의 색상 차이인 것을 특징으로 하는 깊이맵 업샘플링 방법
|
| 3 |
3
제 1 항에 있어서,상기 기초정보생성단계는,상기 색상영상의 YUV 색공간과 RGB 색공간 중 적어도 어느 하나의 색공간에서 상기 변화도 영상을 생성하는 것을 특징으로 하는 깊이맵 업샘플링 방법
|
| 4 |
4
제 1 항에 있어서,상기 생성된 변화도 영상은 특정 화소의 색상 값과 상기 특정 화소와 인접한 4개 화소의 색상 값의 차이 중 가장 큰 값을 택하는 과정을 이용하여 생성한 것을 특징으로 하는 깊이맵 업샘플링 방법
|
| 5 |
5
제 1 항에 있어서,상기 기초정보생성단계는,상기 생성된 변화도 영상을 하기 수학식을 이용하여 필터링된 국부 영역에서의 국부 변화도 영상을 생성하고,[수학식] (단, grad(i)는 상기 특정 화소 i에서의 변화도 값, mgrad(i)는 상기 특정 화소 i와 상하좌우로 인접한 4개 화소의 변화도 평균값, α는 변화도 값을 조절하는 변수로 1보다 큰 상수 값)상기 경로산출단계와 상기 최대변화도획득단계는 상기 필터링된 국부 영역에서의 국부 변화도 영상을 이용하여 수행되는 것을 특징으로 하는 깊이맵 업샘플링 방법
|
| 6 |
6
제 1 항에 있어서,상기 신뢰도산출단계는,수학식을 이용하여 신뢰도를 산출하는 것을 특징으로 하는 깊이맵 업샘플링 방법
|
| 7 |
7
제 1 항에 있어서,상기 업샘플링단계에서, 상기 빈 영역 중 일부가 채워져도 상기 깊이맵에 빈 영역이 존재하는 경우, 상기 신뢰도산출단계와 상기 업샘플링단계를 재 수행하며, 상기 재 수행과정에서 상기 재 수행하기 이전 과정에서 상기 업샘플링단계에서 상기 채워진 빈 영역의 화소를 포함하여 상기 신뢰도를 산출하는 것을 특징으로 하는 깊이맵 업샘플링 방법
|
| 8 |
8
제 7 항에 있어서,상기 기초정보생성단계는, 상기 생성된 변화도 영상을 하기 수학식을 이용하여 필터링된 국부 영역에서의 국부 변화도 영상을 생성하고,[수학식] (단, grad(i)는 상기 특정 화소 i에서의 변화도 값, mgrad(i)는 상기 특정 화소 i와 상하좌우로 인접한 4개 화소의 변화도 평균값, α는 변화도 값을 조절하는 변수로 1보다 큰 상수 값)상기 경로산출단계와 상기 최대변화도획득단계는 상기 필터링된 국부 영역에서의 국부 변화도 영상을 이용하여 수행되며,상기 신뢰도산출단계는,하기 수학식을 이용하여 신뢰도를 산출하는 것을 특징으로 하는 깊이맵 업샘플링 방법
|
| 9 |
9
제 8 항에 있어서,상기 λ(iter)는 상기 신뢰도산출단계와 상기 업샘플링단계가 재 수행되는 횟수가 증가할수록 상기 max_gradient(i,in)의 가중치가 낮게 부여되도록 수치가 조절되는 것을 특징으로 하는 깊이맵 업샘플링 방법
|
| 10 |
10
제 9 항에 있어서,상기 λ(iter)는 상기 재 수행 횟수가 증가함에 따라서 순차적으로 감소되는 것을 특징으로 하는 깊이맵 업샘플링 방법
|
| 11 |
11
제 7 항에 있어서,상기 업샘플링단계는상기 재 수행에 의해서도 빈 영역이 채워지지 않는 부분이 발생하는 경우, 상기 채워지지 않는 부분을 인페인팅(Inpaingting) 방법을 이용하여 채우는 것을 특징으로 하는 깊이맵 업샘플링 방법
|
| 12 |
12
제 7 항에 있어서,상기 기 설정된 신뢰도(Titer)는 상기 재 수행의 반복 횟수가 증가함에 따라 감소되는 것을 특징으로 하는 깊이맵 업샘플링 방법
|
| 13 |
13
동일 영상의 색상영상과 깊이맵에 있어서, 색상영상의 해상도 보다 낮은 해상도를 가진 깊이맵의 업샘플링에 장치에 있어서,상기 색상영상의 색상 차이를 산출하고 변화도 영상을 생성하는 기초정보생성부;상기 깊이맵에서 업샘플링하고자 하는 화소(P0)와 적어도 둘 이상의 참조 화소 사이의 최단 경로들을 산출하는 경로산출부;상기 산출된 각각의 경로상에 존재하는 화소 중 상기 변화도가 가장 큰 최대변화도 화소를 획득하는 최대변화도획득부;상기 산출된 색상 차이 및 상기 획득된 최대변화도에 기반하여 신뢰도를 산출하는 신뢰도산출부; 및상기 산출된 가중치를 이용하여 빈 영역을 채우는 업샘플링부를 포함하는 것을 특징으로 하는 깊이맵 업샘플링 장치
|
| 14 |
14
제 13 항에 있어서,상기 기초정보생성부에서 산출되는 상기 색상 차이는 특정 화소와 상기 특정 화소와 인접한 화소간의 색상 차이인 것을 특징으로 하는 깊이맵 업샘플링 장치
|
| 15 |
15
제 13 항에 있어서,상기 기초정보생성부는,상기 색상영상의 YUV 색공간과 RGB 색공간 중 적어도 어느 하나의 색공간에서 상기 변화도 영상을 생성하는 것을 특징으로 하는 깊이맵 업샘플링 장치
|
| 16 |
16
제 13 항에 있어서,상기 생성된 변화도 영상은 특정 화소의 색상 값과 상기 특정 화소와 인접한 4개 화소의 색상 값의 차이 중 가장 큰 값을 택하는 과정을 이용하여 생성한 것을 특징으로 하는 깊이맵 업샘플링 장치
|
| 17 |
17
제 13 항에 있어서,상기 기초정보생성부는, 상기 생성된 변화도 영상을 하기 수학식을 이용하여 필터링된 국부 영역에서의 국부 변화도 영상을 생성하는 것을 특징으로 하는 깊이맵 업샘플링 장치
|
| 18 |
18
제 13 항에 있어서,상기 신뢰도산출부는, 하기 수학식을 이용하여 신뢰도를 산출하는 것을 특징으로 하는 깊이맵 업샘플링 장치
|
