| 1 |
1
스테레오 영상을 촬영하는 카메라;상기 스테레오 영상의 좌측영상 및 우측영상으로부터 특징점을 검출하는 영상 처리부;상기 좌측영상 및 상기 우측영상 간 검출된 특징점을 바탕으로 상기 좌측영상 및 상기 우측영상 사이에 존재하는 N 개의 시점 중 n 번째 시점을 기준으로 상기 좌측영상 및 상기 우측영상 중 거리상 먼 방향의 영상을 n 시점으로 워핑하여 n 시점에 대한 기준영상을 생성하는 기준영상 생성부; 및상기 기준영상을 이용하여 n 시점에 대한 워핑식을 계산하고 상기 계산된 워핑식을 이용하여 n 시점에 대한 최종워핑영상을 생성하는 워핑영상 생성부를 포함하며,상기 워핑영상 생성부는, 상기 좌측영상 및 상기 우측영상 간 검출된 특징점을 바탕으로 n 시점을 기준으로 상기 좌측영상 및 상기 우측영상 중 거리상 가까운 방향의 영상으로부터 구성된 메쉬 그리드들을 상기 워핑식을 근거로 n 시점으로 워핑하여 상기 n시점에 대한 최종워핑영상을 생성하는 것을 특징으로 하는 다시점 영상 생성 장치
|
| 2 |
2
청구항 1에 있어서,상기 기준영상 생성부는,상기 좌측영상과 상기 우측영상 사이의 상대거리가 1인 경우, n 시점의 위치와 상기 좌측영상 간 상대 거리가 0
|
| 3 |
3
청구항 1에 있어서,상기 워핑영상 생성부는,상기 좌측영상과 상기 우측영상 사이의 상대거리가 1인 경우, n 시점의 위치와 상기 좌측영상 간 상대 거리가 0
|
| 4 |
4
청구항 1에 있어서,상기 워핑영상 생성부는,상기 n 시점의 기준영상을 이용하여 n 시점에 대한 워핑 제한조건을 설정하고, 설정된 상기 워핑 제한조건을 반영하여 상기 워핑식을 결정하는 것을 특징으로 하는 다시점 영상 생성 장치
|
| 5 |
5
청구항 4에 있어서,상기 워핑 제한조건은,상기 좌측영상 및 상기 우측영상 중 상기 n 시점으로부터 거리상 가까운 방향의 영상으로부터 계산된 메쉬들의 변형 정도, 해당 영상을 워핑하는 경우에 대응점들의 유지 정도, 해당 영상으로부터 계산된 에지 영역의 점에 대한 유지 정도, 해당 영상의 워핑 시 시간적 일관성 및 상기 n 시점의 기준영상과 워핑 후 영상의 유사도 중 적어도 하나를 포함하는 것을 특징으로 하는 다시점 영상 생성 장치
|
| 6 |
6
청구항 1에 있어서,상기 영상 처리부는,상기 좌측영상 및 상기 우측영상의 특징점 간 변이를 계산하는 것을 특징으로 하는 다시점 영상 생성 장치
|
| 7 |
7
청구항 1에 있어서,상기 영상 처리부는,상기 좌측영상 및 상기 우측영상 중 적어도 하나를 메쉬 그리드 단위로 분할하고, 분할된 각 메쉬별로 점, 선, 면 중 적어도 하나의 정보를 추출하는 것을 특징으로 하는 다시점 영상 생성 장치
|
| 8 |
8
청구항 1에 있어서,상기 영상 처리부는,상기 좌측영상 및 상기 우측영상 중 적어도 하나로부터 에지 영역을 검출하여 에지 영역의 선, 점 정보를 추출하는 것을 특징으로 하는 다시점 영상 생성 장치
|
| 9 |
9
스테레오 영상이 입력되면, 상기 스테레오 영상의 좌측영상 및 우측영상으로부터 특징점을 검출하는 단계;상기 좌측영상 및 상기 우측영상 간 검출된 특징점들을 기반으로 상기 좌측영상 및 상기 우측영상 사이에 존재하는 N 개의 시점 중 n 번째 시점을 기준으로 상기 좌측영상 및 상기 우측영상 중 거리상 먼 방향의 영상을 n 시점으로 워핑하여 n 시점에 대한 기준영상을 생성하는 단계;상기 기준영상을 이용하여 n 시점에 대한 워핑식을 계산하는 단계; 및상기 좌측영상 및 상기 우측영상 간 검출된 특징점들을 기반으로 n 시점을 기준으로 상기 좌측영상 및 상기 우측영상 중 거리상 가까운 방향의 영상을 이용해 상기 워핑식을 근거로 n 시점으로 워핑하여 상기 n시점에 대한 최종워핑영상을 생성하는 단계를 포함하는 것을 특징으로 하는 다시점 영상 생성 방법
|
| 10 |
10
청구항 9에 있어서,상기 n 시점에 대한 기준영상을 생성하는 단계는,상기 좌측영상과 상기 우측영상 사이의 상대거리가 1인 경우, n 시점의 위치와 상기 좌측영상 간 상대 거리가 0
|
| 11 |
11
청구항 9에 있어서,상기 최종워핑영상을 생성하는 단계는,상기 좌측영상과 상기 우측영상 사이의 상대거리가 1인 경우, n 시점의 위치와 상기 좌측영상 간 상대 거리가 0
|
| 12 |
12
청구항 9에 있어서,상기 n 시점에 대한 워핑식을 계산하는 단계는,상기 n 시점의 기준영상을 이용하여 n 시점에 대한 워핑 제한조건을 설정하는 단계를 포함하며,상기 설정된 상기 워핑 제한조건을 반영하여 상기 워핑식을 결정하는 것을 특징으로 하는 다시점 영상 생성 방법
|
| 13 |
13
청구항 12에 있어서,상기 워핑 제한조건은,상기 좌측영상 및 상기 우측영상 중 상기 n 시점으로부터 거리상 가까운 방향의 영상으로부터 계산된 메쉬들의 변형 정도, 해당 영상을 워핑하는 경우에 대응점들의 유지 정도, 해당 영상으로부터 계산된 에지 영역의 특징점에 대한 유지 정도, 해당 영상의 워핑 시 시간적 일관성 및 상기 n 시점의 기준영상과 워핑 후 영상의 유사도 중 적어도 하나를 포함하는 것을 특징으로 하는 다시점 영상 생성 방법
|
| 14 |
14
청구항 9에 있어서,상기 특징점을 검출하는 단계는,상기 좌측영상 및 상기 우측영상의 특징점 간 변이를 계산하는 단계;상기 좌측영상 및 상기 우측영상 중 적어도 하나를 메쉬 그리드 단위로 분할하고, 분할된 각 메쉬별로 점, 선, 면 중 적어도 하나의 정보를 추출하는 단계; 및상기 좌측영상 및 상기 우측영상 중 적어도 하나로부터 에지 영역을 검출하여 에지 영역의 선, 점 정보를 추출하는 단계를 포함하는 것을 특징으로 하는 다시점 영상 생성 방법
|
