1 |
1
등장인물 정보 인식 방법으로서,입력된 비디오로부터 등장인물을 인식하는 단계;상기 인식된 등장인물에 대한 캐스팅 정보를 탐지하는 단계; 및상기 캐스팅 정보를 기초로 상기 등장인물을 재인식하는 단계를 포함하는 등장인물 정보 인식 방법
|
2 |
2
제1항에 있어서,상기 입력된 비디오로부터 등장인물을 인식하는 단계는,상기 등장인물의 대표 얼굴을 추출하는 단계를 포함하는 등장인물 정보 인식 방법
|
3 |
3
제2항에 있어서,상기 등장인물의 대표 얼굴을 추출하는 단계는,연속된 프레임에서 나타나는 얼굴 이미지에 대해 각 프레임에서 얼굴 영역을 검출하는 단계;샷 단위로 동일 인물의 얼굴을 클러스터 단위로 클러스터링하는 단계; 및상기 클러스터에서 대표 얼굴을 선택하는 단계를 포함하는 등장인물 정보 인식 방법
|
4 |
4
제2항에 있어서,상기 입력된 비디오로부터 등장인물을 인식하는 단계는,상기 대표 얼굴을 정규화하는 단계;상기 정규화된 대표 얼굴의 이미지에서 대표 얼굴 특징을 추출하는 단계;상기 대표 얼굴 특징을 인물 데이터베이스에 저장된 얼굴 특징들과 비교하는 단계; 및상기 대표 얼굴 특징과 상기 저장된 얼굴 특징 간에 유사도 값을 부여하여 랭킹하는 단계를 포함하는 등장인물 정보 인식 방법
|
5 |
5
제1항에 있어서,상기 인식된 등장인물에 대한 캐스팅 정보를 탐지하는 단계는,캐스팅 데이터베이스에 저장된 각 비디오의 캐스팅 정보에 상기 인식된 등장인물이 포함되는지 여부를 검사하는 단계;상기 저장된 각 비디오의 캐스팅 정보 별로 상기 인식된 등장인물의 포함 정도를 점수화하고 랭킹하는 단계; 및상기 입력된 비디오의 후보 캐스팅 정보를 선정하는 단계를 포함하는 등장인물 정보 인식 방법
|
6 |
6
제5항에 있어서,상기 캐스팅 정보를 기초로 상기 등장인물을 재인식하는 단계는,상기 후보 캐스팅 정보로 인물 데이터베이스를 제약하는 단계;상기 제약된 인물 데이터베이스로부터 상기 등장인물을 재인식하는 단계;상기 후보 캐스팅 정보에 대해 상기 재인식된 등장인물 별로 유사도 점수를 산출하여 합산하는 단계; 및상기 합산된 유사도 점수를 비교하여 상기 후보 캐스팅 정보 중에서 최상위 점수를 가지는 캐스팅 정보로 등장인물을 인식하여 얻어진 결과를 최종 결과로 선택하는 단계를 포함하는 등장인물 정보 인식 방법
|
7 |
7
입력된 비디오에 나타나는 얼굴을 인식하여 인물 데이터베이스로부터 상기 얼굴을 가진 인물 정보를 얻는 등장인물 인식 모듈;상기 인물 정보를 입력 받아 캐스팅 데이터베이스로부터 캐스팅 정보를 찾아내는 캐스팅 정보 자동 탐지 모듈; 및상기 캐스팅 정보를 기초로 상기 등장인물을 재인식하는 등장인물 인식 정확도 향상 모듈을 포함하는 등장인물 정보 인식기
|
8 |
8
제7항에 있어서,상기 등장인물 인식 모듈은,상기 비디오의 연속된 프레임에서 나타나는 상기 등장인물의 대표 얼굴을 추출하는 대표 얼굴 추출부; 및상기 대표 얼굴의 특징을 상기 인물 데이터베이스에 저장된 얼굴 특징들과 비교하고 유사도 값을 부여하여 랭킹하는 인물 인식부를 포함하는 등장인물 정보 인식기
|
9 |
9
제7항에 있어서,상기 캐스팅 정보 자동 탐지 모듈은,상기 캐스팅 데이터베이스에 저장된 각 비디오의 캐스팅 정보에 상기 인식된 등장인물이 포함되는지 여부를 검사하고, 상기 저장된 각 비디오의 캐스팅 정보 별로 상기 인식된 등장인물의 포함 정도를 점수화하고 랭킹하여 후보 캐스팅 정보를 선정하는,등장인물 정보 인식기
|
10 |
10
제9항에 있어서,상기 등장인물 인식 정확도 향상 모듈은,상기 후보 캐스팅 정보로 제약된 인물 데이터베이스로부터 상기 등장인물을 재인식하고, 상기 후보 캐스팅 정보에 대해 상기 재인식된 등장인물 별로 합산된 유사도 점수를 비교하여 최상위 점수를 가지는 캐스팅 정보로 등장인물을 인식하여 얻어진 결과를 최종 결과로 선택하는,등장인물 정보 인식기
|
11 |
11
인물 정보를 저장하는 인물 데이터베이스;캐스팅 정보를 저장하는 캐스팅 데이터베이스; 및입력된 비디오에 나타나는 등장인물의 얼굴을 인식하여 상기 인물 데이터베이스로부터 상기 얼굴을 가진 상기 인물 정보를 얻고, 상기 인물 정보를 입력 받아 상기 캐스팅 데이터베이스로부터 상기 캐스팅 정보를 찾아내며, 상기 캐스팅 정보를 기초로 상기 등장인물을 재인식하는 등장인물 정보 인식기를 포함하는 등장인물 정보 인식 시스템
|
12 |
12
제11항에 있어서,상기 인물 데이터베이스는,각 인물 명을 주요키(primary key)로 하고, 각 인물의 얼굴 이미지를 다중값 속성으로 갖는 인물 개체로 모델링되는 개체-관계 모델을 저장하는,등장인물 정보 인식 시스템
|
13 |
13
제11항에 있어서,상기 인물 데이터베이스는,얼굴 이미지에 대해 추출된 얼굴 특징 정보를 색인하여 저장하는,등장인물 정보 인식 시스템
|
14 |
14
제11항에 있어서,상기 캐스팅 데이터베이스는,비디오 개체 및 등장인물 개체가 캐스팅 관계로 연결되는 개체-관계 모델을 저장하는,등장인물 정보 인식 시스템
|
15 |
15
비디오를 입력 받는 입력장치;처리장치; 및처리장치에 의한 실행 시 처리장치가 동작들을 수행하도록 하는 명령어들을 포함하는 컴퓨터 저장매체를 포함하고, 상기 동작들은,상기 비디오로부터 등장인물을 인식하는 단계;상기 인식된 등장인물에 대한 캐스팅 정보를 탐지하는 단계; 및상기 캐스팅 정보를 기초로 상기 등장인물을 재인식하는 단계를 포함하는 등장인물 정보 인식 장치
|