| 1 |
1
2D 영상을 3D 영상으로 변환하기 위한 깊이 정보를 생성하는 방법에 있어서,상기 2D 영상 내의 연속된 프레임 내에 존재하는 사물의 중심점과 상기 사물의 윤곽선 상의 특정점들의 상대적 위치를 기반으로 상기 2D 영상의 현재 프레임에서의 상기 사물의 윤곽선을 추적하는 윤곽선 추적 단계; 상기 현재 프레임에서의 사물의 윤곽선을 기반으로 상기 현재 프레임에서의 사물 영역과 배경 영역을 분리하는 영역 분리 단계; 및상기 분리된 사물 영역과 상기 배경 영역을 기반으로 상기 현재 프레임에서의 깊이맵을 생성하는 깊이맵 생성 단계를 포함하는 것을 특징으로 하는 깊이 정보 생성 방법
|
| 2 |
2
제 1 항에 있어서, 상기 윤곽선 추적 단계는상기 현재 프레임의 이전 프레임에서의 사물의 중심점과 상기 사물의 윤곽선 상의 특징점을 통해 상기 이전 프레임에서의 사물의 윤곽선을 추출하는 단계; 및상기 이전 프레임에서의 사물의 윤곽선을 기반으로 상기 현재 프레임에서의 상기 사물의 윤곽선을 추적하는 단계를 포함하는 것을 특징으로 하는 깊이 정보 생성 방법
|
| 3 |
3
제 1 항에 있어서, 상기 윤곽선 추적 단계는상기 현재 프레임의 이전 프레임의 상기 사물 내의 중심점과 특징점 사이의 angular-radial distance의 변화에 대한 제한을 둔 MRF(Markov Random Field) 에너지를 이용하여 상기 이전 프레임의 사물 윤곽선에서 KLT(Kanade-Lucas-Tomash) 특징점을 추적하는 단계; 및상기 KLT 특징점을 이용하여 상기 현재 프레임에서의 상기 사물의 윤곽선을 추적하는 단계를 포함하는 것을 특징으로 하는 깊이 정보 생성 방법
|
| 4 |
4
제 1 항에 있어서, 상기 윤곽선 추적 단계는상기 현재 프레임의 이전 프레임의 상기 사물의 윤곽선, 상기 현재 프레임의 영상 및 상기 현재 프레임으로 1차 추적된 상기 사물의 중심점을 기반으로 상기 이전 프레임의 특징점으로부터 상기 현재 프레임으로의 추정된 움직임 값들의 집합을 산출하는 단계; 및상기 움직임 값들의 집합을 기반으로 에너지 함수를 이용하여 상기 현재 프레임에서의 상기 사물의 윤곽선을 추적하는 단계를 포함하는 것을 특징으로 하는 깊이 정보 생성 방법
|
| 5 |
5
제 1 항에 있어서, 상기 영역 분리 단계는상기 현재 프레임을 기준으로 양쪽에 배치된 두 개의 키프레임의 화소들을 통해 상기 현재 프레임에서의 상기 사물 영역과 상기 배경 영역을 분리하여 상기 사물의 윤곽선을 정제하는 단계를 포함하는 것을 특징으로 하는 깊이 정보 생성 방법
|
| 6 |
6
제 5 항에 있어서, 상기 영역 분리 단계는상기 현재 프레임의 이전 프레임의 사물에 가려져 참조할 수 없었던 배경의 화소들을 상기 두 개의 키프레임의 화소들을 사용하여 참조함으로써 상기 현재 프레임에서의 상기 사물 영역과 상기 배경 영역을 분리하는 단계를 포함하는 것을 특징으로 하는 깊이 정보 생성 방법
|
| 7 |
7
제 1 항에 있어서, 상기 깊이맵 생성 단계는 상기 현재 프레임을 제외한 다른 프레임의 사물 영역과 배경 영역의 깊이맵을 기반으로 상기 현재 프레임의 상기 사물 영역과 상기 배경 영역과의 거리에 따른 가중치를 적용함으로써 현재 깊이맵을 생성하는 단계를 포함하는 것을 특징으로 하는 깊이 정보 생성 방법
|
| 8 |
8
제 1 항에 있어서, 상기 현재 프레임을 제외한 다른 프레임은 상기 현재 프레임의 이전 프레임및 상기 현재 프레임을 기준으로 양쪽에 배치된 두 개의 키프레임 중 두번째 키프레임 중 적어도 어느 하나인 것을 특징으로 하는 깊이 정보 생성 방법
|
| 9 |
9
2D 영상을 3D 영상으로 변환하기 위한 깊이 정보를 생성하는 장치에 있어서,상기 2D 영상 내의 연속된 프레임 내에 존재하는 사물의 중심점과 상기 사물의 윤곽선 상의 특정점들의 상대적 위치를 기반으로 상기 2D 영상 내의 현재 프레임에서의 상기 사물의 윤곽선을 추적하는 윤곽선 추적부; 상기 현재 프레임에서의 사물의 윤곽선을 기반으로 상기 현재 프레임에서의 사물 영역과 배경 영역을 분리하는 영역 분리부; 및상기 분리된 사물 영역과 상기 배경 영역을 기반으로 상기 현재 프레임에서의 깊이맵을 생성하는 깊이맵 생성부를 포함하는 것을 특징으로 하는 깊이 정보 생성 장치
|
| 10 |
10
제 9 항에 있어서, 상기 윤곽선 추적부는상기 현재 프레임의 이전 프레임에서의 사물의 중심점과 상기 사물의 윤곽선 상의 특징점을 통해 상기 이전 프레임에서의 사물의 윤곽선을 추출하는 이전 프레임 윤곽선 추출부; 및상기 이전 프레임에서의 사물의 윤곽선을 기반으로 상기 현재 프레임에서의 상기 사물의 윤곽선을 추적하는 제 1 추적부를 포함하는 것을 특징으로 하는 깊이 정보 생성 장치
|
| 11 |
11
제 9 항에 있어서, 상기 윤곽선 추적부는상기 현재 프레임의 이전 프레임의 상기 사물 내의 중심점과 특징점 사이의 angular-radial distance의 변화에 대한 제한을 둔 MRF(Markov Random Field) 에너지를 이용하여 상기 이전 프레임의 사물 윤곽선에서 KLT(Kanade-Lucas-Tomash) 특징점을 추적하는 KLT 특징점 추적부; 및상기 KLT 특징점을 이용하여 상기 현재 프레임에서의 상기 사물의 윤곽선을 추적하는 제 2 추적부를 포함하는 것을 특징으로 하는 깊이 정보 생성 장치
|
| 12 |
12
제 9 항에 있어서, 상기 윤곽선 추적부는상기 현재 프레임의 이전 프레임의 상기 사물의 윤곽선, 상기 현재 프레임의 영상 및 상기 현재 프레임으로 1차 추적된 상기 사물의 중심점을 기반으로 상기 이전 프레임의 특징점으로부터 상기 현재 프레임으로의 추정된 움직임 값들의 집합을 산출하는 산출부; 및상기 움직임 값들의 집합을 기반으로 에너지 함수를 이용하여 상기 현재 프레임에서의 상기 사물의 윤곽선을 추적하는 제 3 추적부를 포함하는 것을 특징으로 하는 깊이 정보 생성 장치
|
| 13 |
13
제 9 항에 있어서, 상기 영역 분리부는상기 현재 프레임을 기준으로 양쪽에 배치된 두 개의 키프레임의 화소들을 통해 상기 현재 프레임에서의 상기 사물 영역과 상기 배경 영역을 분리하여 상기 사물의 윤곽선을 정제하는 것을 특징으로 하는 깊이 정보 생성 장치
|
| 14 |
14
제 13 항에 있어서, 상기 영역 분리부는상기 현재 프레임의 이전 프레임의 사물에 가려져 참조할 수 없었던 배경의 화소들을 상기 두 개의 키프레임의 화소들을 사용하여 참조함으로써 상기 현재 프레임에서의 상기 사물 영역과 상기 배경 영역을 분리하는 것을 특징으로 하는 깊이 정보 생성 장치
|
| 15 |
15
제 9 항에 있어서, 상기 깊이맵 생성부는 상기 현재 프레임을 제외한 다른 프레임의 사물 영역과 배경 영역의 깊이맵을 기반으로 상기 현재 프레임의 상기 사물 영역과 상기 배경 영역과의 거리에 따른 가중치를 적용함으로써 현재 깊이맵을 생성하는 것을 특징으로 하는 깊이 정보 생성 방법
|
| 16 |
16
제 15 항에 있어서, 상기 현재 프레임을 제외한 다른 프레임은 상기 현재 프레임의 이전 프레임및 상기 현재 프레임을 기준으로 양쪽에 배치된 두 개의 키프레임 중 두번째 키프레임 중 적어도 어느 하나인 것을 특징으로 하는 깊이 정보 생성 장치
|
| 17 |
17
2D 영상을 3D 영상으로 변환하기 위한 깊이 정보를 생성하는 방법에 있어서,상기 2D 영상의 현재 프레임을 사물 영역과 배경 영역으로 분리하는 단계; 및상기 현재 프레임을 제외한 다른 프레임의 사물 영역과 배경 영역의 깊이맵을 기반으로 상기 현재 프레임의 상기 사물 영역과 상기 배경 영역과의 거리에 따른 가중치를 적용함으로써 상기 현재 프레임의 깊이맵을 생성하는 단계를 포함하는 것을 특징으로 하는 깊이 정보 생성 방법
|
| 18 |
18
제 17 항에 있어서,상기 현재 프레임을 제외한 다른 프레임은 상기 현재 프레임의 이전 프레임및 상기 현재 프레임을 기준으로 양쪽에 배치된 두 개의 키프레임 중 두 번째 키프레임 중 적어도 어느 하나인 것을 특징으로 하는 깊이 정보 생성 방법
|
| 19 |
19
2D 영상을 3D 영상으로 변환하기 위한 깊이 정보를 생성하는 장치에 있어서,상기 2D 영상의 현재 프레임을 사물 영역과 배경 영역으로 분리하는 영역 분리부; 및상기 현재 프레임을 제외한 다른 프레임의 사물 영역과 배경 영역의 깊이맵을 기반으로 상기 현재 프레임의 상기 사물 영역과 상기 배경 영역과의 거리에 따른 가중치를 적용함으로써 상기 현재 프레임의 깊이맵을 생성하는 깊이맵 생성부를 포함하는 것을 특징으로 하는 깊이 정보 생성 장치
|
| 20 |
20
제 19 항에 있어서,상기 현재 프레임을 제외한 다른 프레임은 상기 현재 프레임의 이전 프레임및 상기 현재 프레임을 기준으로 양쪽에 배치된 두 개의 키프레임 중 두번째 키프레임 중 적어도 어느 하나인 것을 특징으로 하는 깊이 정보 생성 장치
|
