1 |
1
학습 얼굴 영상으로부터, 미리 결정되는 특정 주파수를 기준으로 상기 특정 주파수 보다 낮은 주파수로 구성되는 저주파 성분과, 상기 특정 주파수 보다 높은 주파수로 구성되는 고주파 성분을 분리하는 주파수 성분 식별부;상기 저주파 성분 및 상기 고주파 성분 각각을 복수 개의 영역으로 분할하는 영역 분할부;상기 복수 개의 영역에서, 상기 저주파 성분과 관련한 저주파 영상패치와, 상기 고주파 성분과 관련한 고주파 영상패치를 추출하는 영상패치 추출부; 및복원대상 얼굴 영상이 입력됨에 따라, 상기 저주파 영상패치 및 상기 고주파 영상패치를 이용하여, 상기 복원대상 얼굴 영상으로부터 분리된 제1 성분을 제2 성분으로 복원하는 영상 복원부를 포함하고,상기 영상 복원부는,상기 복원대상 얼굴 영상을 보간(interpolation)하고,저역통과필터(LPF)를 이용하여, 상기 보간된 복원대상 얼굴 영상으로부터 상기 제1 성분을 분리하며,상기 저주파 영상패치 및 상기 고주파 영상패치 중 적어도 하나와 연관된 희소 표현법을 이용하여, 상기 제1 성분 보다 높은 주파수의 상기 제2 성분을 생성하는고해상도 얼굴 영상 복원 장치
|
2 |
2
제1항에 있어서,상기 주파수 성분 식별부는,상기 학습 얼굴 영상의 해상도를 높이고,저역통과필터(LPF)를 이용하여, 상기 해상도가 높아진 학습 얼굴 영상으로부터 상기 저주파 성분을 분리하며,상기 학습 얼굴 영상과 상기 저주파 성분과의 차를 고려하여, 상기 고주파 성분을 분리하는고해상도 얼굴 영상 복원 장치
|
3 |
3
제1항에 있어서,상기 영상패치 추출부는,상기 영역에서 임의의 픽셀을 샘플링하고,상기 픽셀의 일부와, 상기 영역과 인접하는 다른 영역에서 샘플링한 픽셀의 일부를 중첩하여, 상기 저주파 영상패치 및 상기 고주파 영상패치를 추출하는고해상도 얼굴 영상 복원 장치
|
4 |
4
제1항에 있어서,상기 영상패치 추출부는,상기 분할된 영역 중, 오브젝트의 선정된 부위와 관련하는 영역을 확인하고,상기 확인된 영역에서, 상기 저주파 영상패치 및 상기 고주파 영상패치를 추출하는고해상도 얼굴 영상 복원 장치
|
5 |
5
삭제
|
6 |
6
제1항에 있어서,상기 영상 복원부는, 양방향(Bilateral) 필터를 이용하여, 상기 제2 성분에 대해 에지를 강화하고,상기 강화한 제2 성분과, 상기 제1 성분을 합하여, 상기 복원대상 얼굴 영상에 대한 고해상도 얼굴 영상을 획득하는고해상도 얼굴 영상 복원 장치
|
7 |
7
학습 얼굴 영상으로부터, 미리 결정되는 특정 주파수를 기준으로 상기 특정 주파수 보다 낮은 주파수로 구성되는 저주파 성분과, 상기 특정 주파수 보다 높은 주파수로 구성되는 고주파 성분을 분리하는 단계;상기 저주파 성분 및 상기 고주파 성분 각각을 복수 개의 영역으로 분할하는 단계;상기 복수 개의 영역에서, 상기 저주파 성분과 관련한 저주파 영상패치와, 상기 고주파 성분과 관련한 고주파 영상패치를 추출하는 단계; 및복원대상 얼굴 영상이 입력됨에 따라, 상기 저주파 영상패치 및 상기 고주파 영상패치를 이용하여, 상기 복원대상 얼굴 영상으로부터 분리된 제1 성분을 제2 성분으로 복원하는 단계를 포함하고,상기 복원하는 단계는,상기 복원대상 얼굴 영상을 보간하는 단계;저역통과필터를 이용하여, 상기 보간된 복원대상 얼굴 영상으로부터 상기 제1 성분을 분리하는 단계; 및상기 저주파 영상패치 및 상기 고주파 영상패치 중 적어도 하나와 연관된 희소 표현법을 이용하여, 상기 제1 성분 보다 높은 주파수의 상기 제2 성분을 생성하는 단계를 포함하는 고해상도 얼굴 영상 복원 방법
|
8 |
8
제7항에 있어서,상기 학습 얼굴 영상으로부터, 미리 결정되는 특정 주파수를 기준으로 상기 특정 주파수 보다 낮은 주파수로 구성되는 저주파 성분과, 상기 특정 주파수 보다 높은 주파수로 구성되는 고주파 성분을 분리하는 단계는,상기 학습 얼굴 영상의 해상도를 높이는 단계;저역통과필터를 이용하여, 상기 해상도가 높아진 학습 얼굴 영상으로부터 상기 저주파 성분을 분리하는 단계; 및상기 학습 얼굴 영상과 상기 저주파 성분과의 차를 고려하여, 상기 고주파 성분을 분리하는 단계를 포함하는 고해상도 얼굴 영상 복원 방법
|
9 |
9
제7항에 있어서,상기 추출하는 단계는,상기 영역에서 임의의 픽셀을 샘플링하는 단계; 및상기 픽셀의 일부와, 상기 영역과 인접하는 다른 영역에서 샘플링한 픽셀의 일부를 중첩하여, 상기 저주파 영상패치 및 상기 고주파 영상패치를 추출하는 단계를 포함하는 고해상도 얼굴 영상 복원 방법
|
10 |
10
제7항에 있어서,상기 추출하는 단계는,상기 분할된 영역 중, 오브젝트의 선정된 부위와 관련하는 영역을 확인하는 단계; 및상기 확인된 영역에서, 상기 저주파 영상패치 및 상기 고주파 영상패치를 추출하는 단계를 포함하는 고해상도 얼굴 영상 복원 방법
|
11 |
11
삭제
|
12 |
12
제7항에 있어서,상기 제2 성분을 생성하는 단계는,상기 제1 성분을 복수 개의 영역으로 분할하고, 상기 분할된 영역 중에서 복원하고자 하는 복원영역과 관련하여 추출된 상기 저주파 영상패치 및 상기 고주파 영상패치를 식별하는 단계;상기 분할된 영역들에 대한 특징벡터를 추출하는 단계;상기 특징벡터를 주어진 에 대입하여, 상기 α가 최소일 때의 희소계수벡터를 계산하는 단계 -상기 F는 특징벡터, 상기 Dli는 상기 저주파 영상패치와 연관된 딕셔러니, 상기 y는 상기 복원영역과 연관된 희소 표현, 상기 ε는 기준값임-상기 희소계수벡터를, 상기 고주파 영상패치와 연관된 딕셔러니에 곱셈 적용하여, 상기 제2 성분을 생성하는 단계를 포함하는 고해상도 얼굴 영상 복원 방법
|
13 |
13
제7항에 있어서,상기 고해상도 얼굴 영상 복원 방법은,양방향 필터를 이용하여, 상기 제2 성분에 대해 에지를 강화하는 단계; 및상기 강화한 제2 성분과, 상기 제1 성분을 합하여, 상기 복원대상 얼굴 영상에 대한 고해상도 얼굴 영상을 획득하는 단계를 더 포함하는 고해상도 얼굴 영상 복원 방법
|