| 1 |
1
동영상의 오디오 콘텐츠에서 화자 별 음성을 분리하고, 화자 별 음성에 대한 음성 프레임 정보를 생성하는 오디오 분석부;동영상의 비디오 콘텐츠에서 등장하는 인물들의 얼굴을 인식하여 등장인물을 구분하고, 등장인물에 대한 얼굴인식 프레임 정보를 생성하는 비디오 분석부; 및음성 프레임 정보와 얼굴인식 프레임 정보를 조합하여 인식된 얼굴과 음성을 매칭하고, 전체 프레임에 대하여 등장인물의 등장 여부를 나타내는 등장인물 프레임 벡터를 생성하는 제어부;를 포함하는 동영상 분석 장치
|
| 2 |
2
제 1 항에 있어서, 상기 제어부는 등장인물이 임계값 이하의 연속된 프레임에 등장하는 경우 해당 프레임에는 등장하지 않은 것으로 등장인물 프레임 벡터를 보정하는 동영상 분석 장치
|
| 3 |
3
제 2 항에 있어서, 상기 장치는등장인물이 등장하는 프레임들에 대한 북마킹 정보를 생성하는 메타정보 생성부;를 더 포함하는 동영상 분석 장치
|
| 4 |
4
제 3 항에 있어서,메타정보 생성부는 등장인물 별 등장 시간 및 등장 횟수를 계산하고, 등장 시간 및 등장 횟수를 포함하는 인물별 등장 정보를 생성하는 동영상 분석 장치
|
| 5 |
5
제 3 항에 있어서,메타정보 생성부는 등장인물을 노드로 하고, 동일한 장면에 등장하는 등장인물을 엣지로 연결하고, 동시 등장 빈도수를 엣지 가중치로 하는 그래프를 정의하여 그래프 분석을 통해 주요 등장인물, 등장인물 간 관계도를 포함하는 인물 관계도 정보를 생성하는 동영상 분석 장치
|
| 6 |
6
제 3 항에 있어서, 상기 장치는얼굴 인식된 등장인물을 제시하여 검색할 등장인물을 적어도 한 명 선택 받고, 검색된 프레임들을 재생하여 표시하는 사용자 인터페이스; 및북마킹 정보를 이용하여 선택된 등장인물이 등장하는 프레임들을 검색하는 프레임 검색부;를 더 포함하는 동영상 분석 장치
|
| 7 |
7
제 3 항에 있어서, 상기 장치는얼굴 인식된 등장인물을 제시하여 검색할 등장인물을 적어도 한 명 선택 받고, 검색된 프레임들을 재생하여 표시하는 사용자 인터페이스; 및북마킹 정보를 이용하여 선택된 등장인물이 등장하는 프레임들을 편집하여 클립 영상을 생성하는 클립 영상 편집부;를 더 포함하는 동영상 분석 장치
|
| 8 |
8
동영상을 입력 받아 처리하는 동영상 분석 장치에서 실행되는 프로그램 명령어들로 적어도 일부가 구현되는 동영상 분석 방법에 있어서,동영상의 오디오 콘텐츠에서 화자 별 음성을 분리하는 단계;화자 별 음성에 대한 음성 프레임 정보를 생성하는 단계;동영상의 비디오 콘텐츠에서 등장하는 인물들의 얼굴을 인식하여 등장인물을 구분하는 단계;등장인물에 대한 얼굴인식 프레임 정보를 생성하는 단계;음성 프레임 정보와 얼굴인식 프레임 정보를 조합하여 인식된 얼굴과 음성을 매칭하는 단계; 및전체 프레임에 대하여 등장인물의 등장 여부를 나타내는 등장인물 프레임 벡터를 생성하는 단계;를 포함하는 동영상 분석 방법
|
| 9 |
9
제 8 항에 있어서, 상기 방법은등장인물이 임계값 이하의 연속된 프레임에 등장하는 경우 해당 프레임에는 등장하지 않은 것으로 등장인물 프레임 벡터를 보정하는 단계;를 더 포함하는 동영상 분석 방법
|
| 10 |
10
제 9 항에 있어서, 상기 방법은등장인물이 등장하는 프레임들에 대한 북마킹 정보를 생성하는 단계;를 더 포함하는 동영상 분석 방법
|
| 11 |
11
제 10 항에 있어서, 상기 방법은등장인물 별 등장 시간 및 등장 횟수를 계산하고, 등장 시간 및 등장 횟수를 포함하는 인물별 등장 정보를 생성하는 단계;를 더 포함하는 동영상 분석 방법
|
| 12 |
12
제 10 항에 있어서, 상기 방법은그래프 분석을 통해 주요 등장인물, 등장인물 간 관계도를 포함하는 인물 관계도 정보를 생성하는 단계;를 더 포함하되,그래프는 등장인물을 노드로 하고, 동일한 장면에 등장하는 등장인물을 엣지로 연결하고, 동시 등장 빈도수를 엣지 가중치로 하여 정의되는 동영상 분석 방법
|
| 13 |
13
제 10 항에 있어서, 상기 방법은북마킹 정보를 이용하여 선택된 등장인물이 등장하는 프레임들을 검색하는 단계;를 더 포함하되,검색할 등장인물의 선택은 동영상 분석 장치의 얼굴 인식된 등장인물을 제시하여 검색할 등장인물을 선택 받는 사용자 인터페이스를 통해 적어도 한 명 선택되는 동영상 분석 방법
|
| 14 |
14
제 10 항에 있어서, 상기 방법은북마킹 정보를 이용하여 선택된 등장인물이 등장하는 프레임들을 편집하여 클립 영상을 생성하는 단계;를 더 포함하되,검색할 등장인물의 선택은 동영상 분석 장치의 얼굴 인식된 등장인물을 제시하여 검색할 등장인물을 선택 받는 사용자 인터페이스를 통해 적어도 한 명 선택되는 동영상 분석 방법
|
