1 |
1
현재 컬러 이미지 프레임의 동적 객체 에지를 표시하는 에지 가중치 지도를 생성하는 단계;상기 에지 가중치 지도에 기초하여, 상기 현재 컬러 이미지 프레임에 대응되는 깊이 지도의 현재 깊이 화소가 상기 동적 객체 에지에 속하는지 여부를 판단하는 단계; 및상기 판단 결과에 기초하여, 상기 현재 깊이 화소에게 깊이 에지 가중치 및 컬러 에지 가중치가 적용된 제1 가중치 삼방향 필터링을 선택적으로 수행하는 단계를 포함하며,상기 제1 가중치 삼방향 필터링을 선택적으로 수행하는 단계는상기 현재 깊이 화소가 상기 동적 객체 에지에 속하면 상기 동적 객체 에지에 속하는 현재 깊이 화소에 상기 제1 가중치 삼방향 필터링을 수행하고, 상기 현재 깊이 화소가 상기 동적 객체 에지에 속하지 않으면 상기 동적 객체 에지에 속하지 않는 현재 깊이 화소에 상기 깊이 에지 가중치 및 상기 컬러 에지 가중치가 적용되지 않은 제2 가중치 삼방향 필터링을 수행하는 것을 특징으로 하는 깊이 지도 보정 방법
|
2 |
2
삭제
|
3 |
3
제1항에 있어서, 상기 제1 가중치 삼방향 필터링을 수행하는 단계는 하기 수학식 1 내지 수학식 5에 의거하여 수행되고, 상기 제2 가중치 삼방향 필터링을 수행하는 단계는 하기 수학식 6에 의거하여 수행되는 것을 특징으로 하는 깊이 지도 보정 방법
|
4 |
4
제1항에 있어서, 상기 제1 가중치 삼방향 필터링을 수행하는 단계는상기 현재 깊이 화소와 상기 현재 깊이 화소를 중심으로 한 윈도우에 속하는 인접 화소들간의 유클리디안 거리, 상기 현재 깊이 화소의 화소 값과 상기 현재 깊이 화소를 중심으로 한 윈도우에 속하는 인접 화소들간의 화소 값간의 차이, 상기 현재 컬러 이미지 프레임에서의 상기 현재 깊이 화소에 대응되는 위치의 현재 컬러 화소의 화소 값과 상기 인접 화소들에 대응되는 위치의 대응 인접 화소들의 화소 값간의 차이, 상기 깊이 에지 가중치 및 상기 컬러 에지 가중치에 기초하여 수행되는 것을 특징으로 하는 깊이 지도 보정 방법
|
5 |
5
제4항에 있어서, 상기 제1 가중치 삼방향 필터링을 수행하는 단계는 상기 현재 깊이 화소와 상기 인접 화소들간의 유클리디안 거리의 표준 편차인 거리 표준 편차 및 상기 현재 깊이 화소가 속한 상기 윈도우의 크기에 기초하여 생성되는 기본 가중치에 더 기초하여 수행되는 것을 특징으로 하는 깊이 지도 보정 방법
|
6 |
6
제4항에 있어서, 기본 가중치가 상기 현재 깊이 화소와 상기 현재 깊이 화소를 중심으로 한 윈도우에 속하는 인접 화소들간의 유클리디안 거리의 표준 편차인 거리 표준 편차 및 상기 현재 깊이 화소가 속한 상기 윈도우의 크기에 기초하여 생성될 때, 상기 깊이 에지 가중치는 상기 기본 가중치 및 상기 인접 화소들의 화소 값에 기초하여 생성되고,상기 컬러 에지 가중치는 상기 기본 가중치 및 상기 현재 컬러 이미지 프레임에서의 상기 인접 화소들에 대응되는 위치의 대응 인접 화소들의 화소 값에 기초하여 생성되는 것을 특징으로 하는 깊이 지도 보정 방법
|
7 |
7
제1항에 있어서, 상기 현재 컬러 이미지 프레임의 경계와 상기 깊이 지도의 경계 사이의 영역에 존재하는 경계 잡음 영역에 존재하는 상기 현재 깊이 화소를 현재 경계 잡음 화소로서 검출하는 단계를 더 포함하고, 상기 제1 가중치 삼방향 필터링을 수행하는 단계는 상기 현재 경계 잡음 화소와 상기 현재 경계 잡음 화소를 중심으로 한 윈도우에 속하는 인접 화소들간의 유클리디안 거리 각각을 2로 나누고 가우스 함수를 적용한 값, 상기 현재 경계 잡음 화소의 화소 값과 상기 인접 화소들의 화소 값간의 차이, 상기 현재 컬러 이미지 프레임에서의 상기 현재 경계 잡음 화소에 대응되는 위치의 현재 컬러 화소의 화소 값과 상기 인접 화소들에 대응되는 위치의 대응 인접 화소들의 화소 값간의 차이, 상기 깊이 에지 가중치 및 상기 컬러 에지 가중치에 기초하여 상기 현재 경계 잡음 화소에 대한 상기 제1 가중치 삼방향 필터링이 수행되는 것을 특징으로 하는 깊이 지도 보정 방법
|
8 |
8
제1항에 있어서, 상기 에지 가중치 지도를 생성하는 단계는상기 현재 컬러 이미지 프레임의 현재 컬러 화소가 속하는 윈도우에 속하는 모든 화소들의 화소 값과 상기 현재 컬러 이미지 프레임 직전의 이전 컬러 이미지 프레임에서의 대응되는 윈도우에 속하는 모든 화소들의 화소 값간의 평균 절대 차이(Mean Absolute Difference) 연산 결과가 임계치 이상인 윈도우를 선별하여 복수의 동적 객체 윈도우를 생성하는 단계; 및상기 복수의 동적 객체 윈도우에서 동적 객체 에지를 검출하고, 상기 검출된 동적 객체 에지를 이용하여 상기 에지 가중치 지도를 생성하는 단계를 포함하는 것을 특징으로 하는 깊이 지도 보정 방법
|
9 |
9
제1항에 있어서,상기 에지 가중치 지도를 생성하는 단계는상기 현재 컬러 이미지 프레임의 현재 컬러 화소가 속하는 윈도우에 속하는 모든 화소들의 화소 값과 상기 현재 컬러 이미지 프레임 직전의 이전 컬러 이미지 프레임에서의 대응되는 윈도우에 속하는 모든 화소들의 화소 값간의 평균 절대 차이(Mean Absolute Difference) 연산에 기초하여 제1 중간 이미지를 생성하는 단계;상기 제1 중간 이미지에서 상기 현재 컬러 이미지 프레임의 에지를 차감한 후, 음수 화소값을 0으로 치환하여 제2 중간 이미지를 생성하는 단계; 및상기 제1 중간 이미지에서 상기 제2 중간 이미지를 차감하여 상기 에지 가중치 지도를 생성하는 단계를 포함하는 것을 특징으로 하는 깊이 지도 보정 방법
|
10 |
10
현재 컬러 이미지 프레임의 동적 객체 에지를 표시하는 에지 가중치 지도를 생성하는 지도 생성부;상기 에지 가중치 지도에 기초하여, 상기 현재 컬러 이미지 프레임에 대응되는 깊이 지도의 현재 깊이 화소가 상기 동적 객체 에지에 속하는지 여부를 판단하는 판단부; 및상기 판단 결과에 기초하여, 상기 현재 깊이 화소에게 깊이 에지 가중치 및 컬러 에지 가중치가 적용된 제1 가중치 삼방향 필터링을 선택적으로 수행하는 보정부를 포함하며,상기 보정부는상기 현재 깊이 화소가 상기 동적 객체 에지에 속하면 상기 동적 객체 에지에 속하는 현재 깊이 화소에 상기 제1 가중치 삼방향 필터링을 수행하고, 상기 현재 깊이 화소가 상기 동적 객체 에지에 속하지 않으면 상기 동적 객체 에지에 속하지 않는 현재 깊이 화소에 상기 깊이 에지 가중치 및 상기 컬러 에지 가중치가 적용되지 않은 제2 가중치 삼방향 필터링을 수행하는 것을 특징으로 하는 깊이 지도 보정 장치
|
11 |
11
삭제
|
12 |
12
제10항에 있어서, 상기 보정부는 상기 제1 가중치 삼방향 필터링은 하기 수학식 1 내지 수학식 5에 의거하여 수행하고, 상기 제2 가중치 삼방향 필터링은 하기 수학식 6에 의거하여 수행하는 것을 특징으로 하는 깊이 지도 보정 장치
|
13 |
13
제10항에 있어서, 상기 보정부는 상기 현재 깊이 화소와 상기 현재 깊이 화소를 중심으로 한 윈도우에 속하는 인접 화소들간의 유클리디안 거리, 상기 현재 깊이 화소의 화소 값과 상기 현재 깊이 화소를 중심으로 한 윈도우에 속하는 인접 화소들간의 화소 값간의 차이, 상기 현재 컬러 이미지 프레임에서의 상기 현재 깊이 화소에 대응되는 위치의 현재 컬러 화소의 화소 값과 상기 인접 화소들에 대응되는 위치의 대응 인접 화소들의 화소 값간의 차이, 상기 깊이 에지 가중치 및 상기 컬러 에지 가중치에 기초하여 상기 제1 가중치 삼방향 필터링을 수행하는 것을 특징으로 하는 깊이 지도 보정 장치
|
14 |
14
제13항에 있어서, 상기 보정부는 상기 현재 깊이 화소와 상기 인접 화소들간의 유클리디안 거리의 표준 편차인 거리 표준 편차 및 상기 현재 깊이 화소가 속한 상기 윈도우의 크기에 기초하여 생성되는 기본 가중치에 더 기초하여 상기 제1 가중치 삼방향 필터링을 수행하는 것을 특징으로 하는 깊이 지도 보정 장치
|
15 |
15
제13항에 있어서, 기본 가중치가 상기 현재 깊이 화소와 상기 현재 깊이 화소를 중심으로 한 윈도우에 속하는 인접 화소들간의 유클리디안 거리의 표준 편차인 거리 표준 편차 및 상기 현재 깊이 화소가 속한 상기 윈도우의 크기에 기초하여 생성될 때, 상기 깊이 에지 가중치는 상기 기본 가중치 및 상기 인접 화소들의 화소 값에 기초하여 생성되고,상기 컬러 에지 가중치는 상기 기본 가중치 및 상기 현재 컬러 이미지 프레임에서의 상기 인접 화소들에 대응되는 위치의 대응 인접 화소들의 화소 값에 기초하여 생성되는 것을 특징으로 하는 깊이 지도 보정 장치
|
16 |
16
제10항에 있어서, 상기 보정부는 상기 현재 컬러 이미지 프레임의 경계와 상기 깊이 지도의 경계 사이의 영역에 존재하는 경계 잡음 영역에 존재하는 상기 현재 깊이 화소를 현재 경계 잡음 화소로서 검출하는 동작을 더 수행하고, 상기 현재 경계 잡음 화소와 상기 현재 경계 잡음 화소를 중심으로 한 윈도우에 속하는 인접 화소들간의 유클리디안 거리 각각을 2로 나누고 가우스 함수를 적용한 값, 상기 현재 경계 잡음 화소의 화소 값과 상기 인접 화소들의 화소 값간의 차이, 상기 현재 컬러 이미지 프레임에서의 상기 현재 경계 잡음 화소에 대응되는 위치의 현재 컬러 화소의 화소 값과 상기 인접 화소들에 대응되는 위치의 대응 인접 화소들의 화소 값간의 차이, 상기 깊이 에지 가중치 및 상기 컬러 에지 가중치에 기초하여 상기 현재 경계 잡음 화소에 대한 상기 제1 가중치 삼방향 필터링을 수행하는 것을 특징으로 하는 깊이 지도 보정 장치
|
17 |
17
제10항에 있어서, 상기 지도 생성부는 상기 현재 컬러 이미지 프레임의 현재 컬러 화소가 속하는 윈도우에 속하는 모든 화소들의 화소 값과 상기 현재 컬러 이미지 프레임 직전의 이전 컬러 이미지 프레임에서의 대응되는 윈도우에 속하는 모든 화소들의 화소 값간의 평균 절대 차이(Mean Absolute Difference) 연산 결과가 임계치 이상인 윈도우를 선별하여 복수의 동적 객체 윈도우를 생성하고, 상기 복수의 동적 객체 윈도우에서 동적 객체 에지를 검출한 후, 상기 검출된 동적 객체 에지를 이용하여 상기 에지 가중치 지도를 생성하는 것을 특징으로 하는 깊이 지도 보정 장치
|
18 |
18
제10항에 있어서,상기 지도 생성부는상기 현재 컬러 이미지 프레임의 현재 컬러 화소가 속하는 윈도우에 속하는 모든 화소들의 화소 값과 상기 현재 컬러 이미지 프레임 직전의 이전 컬러 이미지 프레임에서의 대응되는 윈도우에 속하는 모든 화소들의 화소 값간의 평균 절대 차이(Mean Absolute Difference) 연산에 기초하여 제1 중간 이미지를 생성하고, 상기 제1 중간 이미지에서 상기 현재 컬러 이미지 프레임의 에지를 차감한 후, 음수 화소값을 0으로 치환하여 제2 중간 이미지를 생성한 후, 상기 제1 중간 이미지에서 상기 제2 중간 이미지를 차감하여 상기 에지 가중치 지도를 생성하는 것을 특징으로 하는 깊이 지도 보정 장치
|