| 1 |
1
입력 영상을 수신하는 영상 입력부;상기 입력 영상에서 얼굴 영역 후보 및 얼굴 요소 후보를 추출하는 후보 추출부;상기 후보 추출부에 의하여 추출된 복수개의 얼굴 요소 후보를 기반으로 추출된 얼굴 영역 후보가 최종 얼굴 영역인지 검증하는 얼굴 영역 검증부;기정의된 얼굴평균모델을 기반으로 생성되는 상기 추출된 복수개의 얼굴 요소 후보가 포함된 최종 얼굴 영역에 대한 얼굴 포즈 스코어에 대응하여 복수개의 최종 얼굴 요소를 산정하는 얼굴 요소 산정부; 및상기 복수개의 최종 얼굴 요소 간의 위치 패턴을 기반으로 상기 복수개의 최종 얼굴 요소가 포함된 최종 얼굴 영역 중 최종 정면 얼굴을 검출하는 최종 정면 얼굴 검출부를 포함하는 것을 특징으로 하는 얼굴 포즈를 이용한 정면 얼굴 검출 장치
|
| 2 |
2
청구항 1에 있어서,상기 후보 추출부는,미리 학습된 얼굴 검출데이터에 대응하여 얼굴 영역 후보를 추출하는 얼굴 영역 후보 추출부; 및미리 학습된 얼굴 요소 검출데이터에 대응하여 좌안, 우안, 코 및 입을 포함하는 얼굴 요소 후보를 추출하는 얼굴 요소 후보 추출부를 포함하는 것을 특징으로 하는 얼굴 포즈를 이용한 정면 얼굴 검출 장치
|
| 3 |
3
청구항 1에 있어서,상기 얼굴 영역 검증부는,상기 후보 추출부로부터 추출된 얼굴 영역 후보가 좌안, 우안, 코 및 입을 포함하는 경우에 상기 추출된 얼굴 영역 후보를 최종 얼굴 영역으로 판단함으로써 상기 추출된 얼굴 영역 후보를 검증하는 것을 특징으로 하는 얼굴 포즈를 이용한 정면 얼굴 검출 장치
|
| 4 |
4
청구항 1에 있어서,상기 얼굴 요소 산정부는,기정의된 얼굴평균모델에, 상기 추출된 복수개의 얼굴 요소 후보가 포함된 최종 얼굴을 매칭함으로써 생성되는 상기 추출된 복수개의 얼굴 요소 후보 각각에 대한 3차원 좌표를 기반으로 상기 최종 얼굴 영역에 대한 얼굴 포즈 스코어를 산정하는 스코어 산정부를 포함하되,상기 얼굴 포즈 스코어는,상기 최종 얼굴 영역의 X축, Y축 및 Z축 방향의 회전 각도 및 상기 최종 얼굴 영역과 카메라와의 거리 각각에, 서로 다른 소정의 가중치를 부여하여 더한 값인 것을 특징으로 하는 얼굴 포즈를 이용한 정면 얼굴 검출 장치
|
| 5 |
5
청구항 4에 있어서,상기 얼굴 요소 산정부는,상기 최종 얼굴 영역에 대한 얼굴 포즈 스코어가 기정의된 최소 스코어 이하의 값을 갖는지를 판단하여 상기 최종 얼굴 영역에 대한 얼굴 포즈 스코어가 기정의된 최소 스코어 이하의 값을 갖는 경우 상기 최종 얼굴 영역에 포함된 상기 추출된 복수개의 얼굴 요소 후보를, 최종 얼굴 요소로 1차적으로 산정하는 제 1 산정부를 포함하는 것을 특징으로 하는 얼굴 포즈를 이용한 정면 얼굴 검출 장치
|
| 6 |
6
청구항 5에 있어서,상기 얼굴 요소 산정부는,상기 제 1 산정부에 의하여 1차적으로 산정된 최종 얼굴 요소 중 좌안과 코와의 거리와, 우안과 코와의 거리의 차이가 기정해진 차이 이하의 값을 갖는 것을 만족하는지를 판단함으로써 상기 최종 얼굴 영역에 포함된 상기 추출된 복수개의 얼굴 요소 후보를, 최종 얼굴 요소로 2차적으로 산정하는 제 2 산정부를 포함하는 것을 특징으로 하는 얼굴 포즈를 이용한 정면 얼굴 검출 장치
|
| 7 |
7
청구항 6에 있어서,상기 얼굴 요소 산정부는,상기 제 2 산정부에 의하여 2차적으로 산정된 최종 얼굴 요소 중 좌안 또는 우안으로부터 코와의 거리가, 코로부터 입과의 거리보다 큰 값을 갖는 것을 만족하는지를 판단함으로써 상기 최종 얼굴 영역에 포함된 상기 추출된 복수개의 얼굴 요소 후보를, 최종 얼굴 요소로 3차적으로 산정하는 제 3 산정부를 포함하는 것을 특징으로 하는 얼굴 포즈를 이용한 정면 얼굴 검출 장치
|
| 8 |
8
청구항 1에 있어서,상기 최종 정면 얼굴 검출부는,상기 얼굴 요소 산정부에 의하여 산정된 복수개의 최종 얼굴 요소 각각에 대한 3차원 좌표를 2차원 평면에 투영함으로써 상기 복수개의 최종 얼굴 요소 간의 위치 패턴을 획득하는 위치 패턴 획득부를 포함하는 것을 특징으로 하는 얼굴 포즈를 이용한 정면 얼굴 검출 장치
|
| 9 |
9
청구항 8에 있어서,상기 최종 정면 얼굴 검출부는,상기 위치 패턴 획득부로부터 획득된 위치 패턴이, 기정해진 패턴인 기준 패턴에 대응되는지를 판단하고, 상기 획득된 위치 패턴이 상기 기준 패턴에 대응되는 경우 상기 복수개의 최종 얼굴 요소가 포함된 최종 얼굴 영역을 최종 얼굴로 검출하는 위치 패턴 분석부를 포함하는 것을 특징으로 하는 얼굴 포즈를 이용한 정면 얼굴 검출 장치
|
| 10 |
10
청구항 9에 있어서,상기 최종 정면 얼굴 검출부는,상기 획득된 위치 패턴이 상기 기준 패턴에 대응되지 않는 경우,입의 양쪽 끝부분인 신규 얼굴 요소를 추가함으로써 생성되는 상기 기준 패턴과 상이한 신규 기준 패턴을 생성함으로써 상기 기준 패턴을 보정하는 기준 패턴 보정부를 더 포함하는 것을 특징으로 하는 얼굴 포즈를 이용한 정면 얼굴 검출 장치
|
| 11 |
11
영상 입력부에 의하여, 입력 영상을 수신하는 단계;후보 추출부에 의하여, 상기 입력 영상에서 얼굴 영역 후보 및 얼굴 요소 후보를 추출하는 단계;얼굴 영역 검증부에 의하여, 상기 추출하는 단계에서 추출된 복수개의 얼굴 요소 후보를 기반으로 추출된 얼굴 영역 후보가 최종 얼굴 영역인지 검증하는 단계;얼굴 요소 산정부에 의하여, 기정의된 얼굴평균모델을 기반으로 생성되는 상기 추출된 복수개의 얼굴 요소 후보가 포함된 최종 얼굴 영역에 대한 얼굴 포즈 스코어에 대응하여 복수개의 최종 얼굴 요소를 산정하는 단계; 및최종 정면 얼굴 검출부에 의하여, 상기 복수개의 최종 얼굴 요소 간의 위치 패턴을 기반으로 상기 복수개의 최종 얼굴 요소가 포함된 최종 얼굴 영역 중 최종 정면 얼굴을 검출하는 단계를 포함하는 것을 특징으로 하는 얼굴 포즈를 이용한 정면 얼굴 검출 방법
|
| 12 |
12
청구항 11에 있어서,상기 검증하는 단계는,상기 추출하는 단계에서 추출된 얼굴 영역 후보가 좌안, 우안, 코 및 입을 포함하는 경우에 상기 추출된 얼굴 영역 후보를 최종 얼굴 영역으로 판단함으로써 상기 추출된 얼굴 영역 후보를 검증하는 것을 특징으로 하는 얼굴 포즈를 이용한 정면 얼굴 검출 방법
|
| 13 |
13
청구항 11에 있어서,상기 복수개의 최종 얼굴 요소를 산정하는 단계는,스코어 산정부에 의하여, 기정의된 얼굴평균모델에, 상기 추출된 복수개의 얼굴 요소 후보가 포함된 최종 얼굴을 매칭함으로써 생성되는 상기 추출된 복수개의 얼굴 요소 후보 각각에 대한 3차원 좌표를 기반으로 상기 최종 얼굴 영역에 대한 얼굴 포즈 스코어를 산정하는 단계를 포함하되,상기 얼굴 포즈 스코어는,상기 최종 얼굴 영역의 X축, Y축 및 Z축 방향의 회전 각도 및 상기 최종 얼굴 영역과 카메라와의 거리 각각에, 서로 다른 소정의 가중치를 부여하여 더한 값인 것을 특징으로 하는 얼굴 포즈를 이용한 정면 얼굴 검출 방법
|
| 14 |
14
청구항 13에 있어서,상기 복수개의 최종 얼굴 요소를 산정하는 단계는,제 1 산정부에 의하여, 상기 최종 얼굴 영역에 대한 얼굴 포즈 스코어가 기정의된 최소 스코어 이하의 값을 갖는지를 판단하여 상기 최종 얼굴 영역에 대한 얼굴 포즈 스코어가 기정의된 최소 스코어 이하의 값을 갖는 경우 상기 최종 얼굴 영역에 포함된 상기 추출된 복수개의 얼굴 요소 후보를, 최종 얼굴 요소로 1차적으로 산정하는 단계를 포함하는 것을 특징으로 하는 얼굴 포즈를 이용한 정면 얼굴 검출 방법
|
| 15 |
15
청구항 14에 있어서,상기 복수개의 최종 얼굴 요소를 산정하는 단계는,상기 1차적으로 산정하는 단계 이후에,제 2 산정부에 의하여, 상기 1차적으로 산정하는 단계에서 1차적으로 산정된 최종 얼굴 요소 중 좌안과 코와의 거리와, 우안과 코와의 거리의 차이가 기정해진 차이 이하의 값을 갖는 것을 만족하는지를 판단함으로써 상기 최종 얼굴 영역에 포함된 상기 추출된 복수개의 얼굴 요소 후보를, 최종 얼굴 요소로 2차적으로 산정하는 단계를 더 포함하는 것을 특징으로 하는 얼굴 포즈를 이용한 정면 얼굴 검출 방법
|
| 16 |
16
청구항 15에 있어서,상기 복수개의 최종 얼굴 요소를 산정하는 단계는,상기 2차적으로 산정하는 단계 이후에,제 3 산정부에 의하여, 상기 2차적으로 산정하는 단계에서 2차적으로 산정된 최종 얼굴 요소 중 좌안 또는 우안으로부터 코와의 거리가, 코로부터 입과의 거리보다 큰 값을 갖는 것을 만족하는지를 판단함으로써 상기 최종 얼굴 영역에 포함된 상기 추출된 복수개의 얼굴 요소 후보를, 최종 얼굴 요소로 3차적으로 산정하는 단계를 더 포함하는 것을 특징으로 하는 얼굴 포즈를 이용한 정면 얼굴 검출 방법
|
| 17 |
17
청구항 11에 있어서,상기 검출하는 단계는,위치 패턴 획득부에 의하여, 상기 복수개의 최종 얼굴 요소를 산정하는 단계에서 산정된 복수개의 최종 얼굴 요소 각각에 대한 3차원 좌표를 2차원 평면에 투영함으로써 상기 복수개의 최종 얼굴 요소 간의 위치 패턴을 획득하는 단계를 포함하는 것을 특징으로 하는 얼굴 포즈를 이용한 정면 얼굴 검출 방법
|
| 18 |
18
청구항 17에 있어서,상기 검출하는 단계는,상기 위치 패턴을 획득하는 단계 이후에,위치 패턴 분석부에 의하여, 상기 위치 패턴을 획득하는 단계에서 획득된 위치 패턴이, 기정해진 패턴인 기준 패턴에 대응되는지를 판단하고, 상기 획득된 위치 패턴이 상기 기준 패턴에 대응되는 경우 상기 복수개의 최종 얼굴 요소가 포함된 최종 얼굴 영역을 최종 정면 얼굴로 검출하는 단계를 더 포함하는 것을 특징으로 하는 얼굴 포즈를 이용한 정면 얼굴 검출 방법
|
| 19 |
19
청구항 18에 있어서,상기 검출하는 단계는,패턴 보정부에 의하여, 상기 획득된 위치 패턴이 상기 기준 패턴에 대응되지 않는 경우, 입의 양쪽 끝부분인 신규 얼굴 요소를 추가함으로써 생성되는 상기 기준 패턴과 상이한 신규 기준 패턴을 생성함으로써 상기 기준 패턴을 보정하는 단계를 더 포함하는 것을 특징으로 하는 얼굴 포즈를 이용한 정면 얼굴 검출 방법
|
| 20 |
20
신규 기준 패턴 생성부에 의하여, 입의 양쪽 끝부분인 신규 얼굴 요소를 추가함으로써 생성되는 신규 기준 패턴을 생성하는 단계;신규 후보 추출부에 의하여, 입력 영상에서 신규 얼굴 요소 후보를 추출하는 단계;신규 얼굴 요소 산정부에 의하여, 기정의된 얼굴평균모델을 기반으로 생성되는 상기 추출된 신규 얼굴 요소 후보가 포함된 최종 얼굴 영역에 대한 얼굴 포즈 스코어에 대응하여 복수개의 최종 얼굴 요소를 산정하는 단계; 및신규 최종 정면 얼굴 검출부에 의하여, 상기 복수개의 최종 얼굴 요소 간의 위치 패턴과 상기 신규 기준 패턴을 대비하여 상기 복수개의 최종 얼굴 요소가 포함된 최종 얼굴 영역 중 최종 얼굴을 검출하는 단계를 포함하는 것을 특징으로 하는 얼굴 포즈를 이용한 정면 얼굴 검출 방법
|
