| 1 |
1
하나의 프레임에 존재하는 모든 얼굴 영역들을 검출하고, 각 얼굴 영역의 얼굴들을 인식하고, 상기 검출된 얼굴 영역에 대한 정보 및 인식 결과를 이용하여 후보 얼굴 영역들 및 각 후보 얼굴 영역에 대한 후보 인물들을 선택하고, 상기 선택된 후보 얼굴 영역들 및 후보 인물들에 대한 리스트를 제공하는 프레임 후보 인물 선택 장치; 상기 프레임 후보 인물 선택 장치를 이용하여, 샷을 구성하는 모든 프레임에 대하여 후보 얼굴 영역들 및 각 후보 얼굴 영역들에 대한 후보 인물들로 구성된 리스트를 획득하여 저장하는 샷 후보 인물 획득 장치; 및샷을 구성하는 모든 프레임에서 획득된 후보 얼굴 영역 정보 및 후보 인물들에 대한 레이블들로 구성된 리스트를 이용하여, 샷의 주요 인물을 검출하는 주요 인물 검출 장치;를 구비하고, 상기 주요 인물 검출 장치는, 상기 샷 후보 인물 검출 장치에 의해 모든 프레임에서 선택된 각 후보 얼굴 영역 좌표들에 대한 영역 검출 횟수를 측정하고, 상기 영역 검출 횟수가 사전 설정된 기준 이상인 얼굴 영역들만을 주요 얼굴 영역으로 검출하는 주요 얼굴 영역 검출 모듈; 및샷을 구성하는 모든 프레임에 대하여 상기 검출된 각 주요 얼굴 영역에 대한 후보 인물 검출 횟수를 측정하고, 상기 후보 인물 검출 횟수가 사전 설정된 기준 이상인 레이블을 샷내의 주요 인물로 선택하는 주요 인물 선택 모듈;을 구비하여, 연속되는 복수 개의 프레임으로 구성되는 샷의 주요 인물을 검출하는 것을 특징으로 하는 샷 단위 주요 인물 검출 시스템
|
| 2 |
2
제1항에 있어서, 상기 프레임 후보 인물 선택 장치는, 하나의 프레임에 존재하는 모든 얼굴 영역을 검출하는 얼굴 영역 검출 모듈;상기 얼굴 영역 검출 모듈에 의해 검출된 얼굴 영역들에 대한 정보를 획득하는 얼굴 영역 정보 검출 모듈;주요 인물에 대한 얼굴 사진을 기초로 한 사전 학습에 의해 완성된 얼굴 인식기를 이용하여, 상기 검출된 얼굴 영역들에 대하여 가장 큰 확률값을 갖는 주요 인물로 인식하고, 각 얼굴 영역들에 대하여 인식된 주요 인물에 대한 레이블(Label) 및 그 확률값을 제공하는 얼굴 인식 모듈;상기 얼굴 영역 정보 검출 모듈에 의해 얻은 각 얼굴 영역에 대한 정보를 이용하여 해당 얼굴 영역에 대한 가중값을 획득하고, 각 얼굴 영역에 대하여 상기 얼굴 인식 모듈에 의해 얻은 확률값을 해당 얼굴 영역에 대한 가중값을 이용하여 보정하여, 각 얼굴 영역에서 인식된 주요 인물에 대한 보정 확률값을 획득하는 보정 모듈;사전 설정된 기준값보다 큰 보정 확률값을 갖는 얼굴 영역들을 후보 얼굴 영역으로 선택하고, 상기 선택된 후보 얼굴 영역들에 대하여 인식된 주요 인물들을 해당 프레임에 대한 후보 인물들로 선택하는 필터 모듈; 및상기 필터 모듈에 의해 선택된 후보 얼굴 영역들 및 후보 인물들에 대한 레이블들을 출력하는 후보 인물 출력 모듈;을 구비하여, 상기 프레임 후보 인물 선택 장치가 단일의 프레임에 대하여 후보 인물들을 선택하는 것을 특징으로 하는 샷 단위 주요 인물 검출 시스템
|
| 3 |
3
제2항에 있어서, 상기 얼굴 영역 정보 검출 모듈이 획득하는 얼굴 영역들에 대한 정보는, 각 얼굴 영역에 대한 크기 정보 및 각 얼굴 영역에 대한 위치 정보 중 하나 또는 둘로 이루어진 것을 특징으로 하는 샷 단위 주요 인물 검출 시스템
|
| 4 |
4
제2항에 있어서, 상기 보정 모듈의 가중값은 제1 가중값 및 제2 가중값 중 하나로 이루어지거나 제1 및 제2 가중값을 모두 반영하여 이루어지고, 상기 제1 가중값은 각 얼굴 영역의 크기를 이용하여 계산된 가중값이며, 상기 제2 가중값은 각 얼굴 영역의 위치를 이용하여 계산된 가중값인 것을 특징으로 하는 샷 단위 주요 인물 검출 시스템
|
| 5 |
5
제4항에 있어서, 상기 제1 가중값은 각 얼굴 영역에 대한 크기와 가장 큰 얼굴 영역의 크기의 비율을 이용하여 계산된 가중값이며, 상기 제2 가중값은 프레임의 중심 좌표와 각 얼굴 영역의 중심 좌표의 이격 거리를 이용하여 계산된 가중값인 것을 특징으로 하는 샷 단위 주요 인물 검출 시스템
|
| 6 |
6
삭제
|
| 7 |
7
제1항에 있어서, 상기 주요 얼굴 영역 검출 모듈은, 샷내의 연속되는 두 개의 프레임들에서 적어도 일부 영역이 서로 중첩되는 후보 얼굴 영역들이 있는 경우, 상기 두 개의 후보 얼굴 영역의 전체 면적에 대한 중첩 면적의 비율이 사전 설정된 기준값 이상이면 상기 두 개의 후보 얼굴 영역은 동일 얼굴 영역으로 설정하고, 해당 얼굴 영역에 대한 영역 검출 횟수를 증가시키는 것을 특징으로 하는 것을 특징으로 하는 샷 단위 주요 인물 검출 시스템
|
| 8 |
8
삭제
|
| 9 |
9
삭제
|
| 10 |
10
삭제
|
| 11 |
11
하나의 프레임에 존재하는 모든 얼굴 영역들을 검출하고, 각 얼굴 영역의 얼굴들을 인식하고, 상기 검출된 얼굴 영역에 대한 정보 및 인식 결과를 이용하여 후보 얼굴 영역들 및 각 후보 얼굴 영역에 대한 후보 인물들을 선택하고, 상기 선택된 후보 얼굴 영역들 및 후보 인물들에 대한 리스트를 제공하는 프레임 후보 인물 선택 단계; 상기 프레임 후보 인물 선택 단계를 이용하여, 샷을 구성하는 모든 프레임에 대한 후보 얼굴 영역들 및 후보 인물들에 대한 레이블들을 획득하여 저장하는 샷 후보 인물 획득 단계; 및샷을 구성하는 모든 프레임에서 획득된 후보 얼굴 영역들 및 후보 인물들에 대한 레이블들을 이용하여, 샷의 주요 인물을 검출하는 주요 인물 검출 단계;를 구비하고, 상기 주요 인물 검출 단계는 (b1) 상기 샷 후보 인물 검출 단계에서 모든 프레임에서 선택된 각 후보 얼굴 영역들에 대한 영역 검출 횟수를 측정하고, 상기 영역 검출 횟수가 사전 설정된 기준 이상인 후보 얼굴 영역들만을 주요 얼굴 영역으로 검출하는 주요 얼굴 영역 검출 단계; 및(b2) 샷을 구성하는 모든 프레임에 대하여 상기 검출된 각 주요 얼굴 영역에 대한 후보 인물 검출 횟수를 측정하고, 상기 후보 인물 검출 횟수가 사전 설정된 기준 이상인 레이블을 샷내의 주요 인물로 선택하는 주요 인물 선택 단계;을 구비하여, 연속되는 복수 개의 프레임으로 구성되는 샷의 주요 인물을 검출하는 것을 특징으로 하는 샷 단위 주요 인물 검출 방법
|
| 12 |
12
제11항에 있어서, 상기 프레임 후보 인물 선택 단계는, (a1) 하나의 프레임에 존재하는 모든 얼굴 영역을 검출하는 얼굴 영역 검출 단계;(a2) 상기 얼굴 영역 검출 단계에서 검출된 얼굴 영역들에 대한 정보를 획득하는 얼굴 영역 정보 검출 단계;(a3) 주요 인물에 대한 얼굴 사진을 기초로 한 사전 학습에 의해 완성된 얼굴 인식기를 이용하여, 상기 검출된 얼굴 영역들에 대하여 가장 큰 확률값을 갖는 주요 인물로 인식하고, 각 얼굴 영역들에 대하여 인식된 주요 인물에 대한 레이블(Label) 및 그 확률값을 제공하는 얼굴 인식 단계;(a4) 상기 얼굴 영역 정보 검출 단계에 의해 얻은 각 얼굴 영역에 대한 정보를 이용하여 해당 얼굴 영역에 대한 가중값을 획득하고, 각 얼굴 영역에 대하여 상기 얼굴 인식 모듈에 의해 얻은 확률값을 해당 얼굴 영역에 대한 가중값을 이용하여 보정하여, 각 얼굴 영역에서 인식된 주요 인물에 대한 보정 확률값을 획득하는 단계;(a5) 사전 설정된 기준값보다 큰 보정 확률값을 갖는 얼굴 영역들을 후보 얼굴 영역들로 선택하고, 상기 선택된 후보 얼굴 영역들에 대하여 인식된 주요 인물들을 해당 프레임에 대한 후보 인물들로 선택하는 단계; 및(a6) 상기 선택된 후보 얼굴 영역들 및 후보 인물들에 대한 레이블들을 출력하는 단계;를 구비하여, 상기 프레임 후보 인물 선택 단계에서는 단일의 프레임에 대하여 후보 인물들을 선택하는 것을 특징으로 하는 샷 단위 주요 인물 검출 방법
|
| 13 |
13
제12항에 있어서, 상기 얼굴 영역 정보 검출 단계에서 획득하는 얼굴 영역들에 대한 정보는, 각 얼굴 영역에 대한 크기 정보 및 각 얼굴 영역에 대한 위치 정보 중 하나 또는 둘로 이루어진 것을 특징으로 하는 샷 단위 주요 인물 검출 방법
|
| 14 |
14
제12항에 있어서, 상기 (a4) 단계의 가중값은 제1 가중값 및 제2 가중값 중 하나로 이루어지거나 제1 및 제2 가중값을 모두 반영하여 이루어지고, 상기 제1 가중값은 각 얼굴 영역에 대한 크기와 가장 큰 얼굴 영역의 크기의 비율을 이용하여 계산된 가중값이며, 상기 제2 가중값은 프레임의 중심 좌표와 각 얼굴 영역의 중심 좌표의 이격 거리를 이용하여 계산된 가중값인 것을 특징으로 하는 샷 단위 주요 인물 검출 방법
|
| 15 |
15
삭제
|
| 16 |
16
삭제
|
| 17 |
17
삭제
|
