| 1 |
1
인물 중심 장면 생성 및 비디오 요약 장치에 의해 수행되는 사용자 선호도 입력 기반의 인물 중심 장면 생성 및 비디오 요약 방법으로서,(a) 입력 비디오 내 선호 인물 및 선호 관계와 관련하여 수신한 사용자 입력에 기초하여, 하나 이상의 요약 후보 인물을 결정하는 단계;(b) 상기 하나 이상의 요약 후보 인물을 포함하는 상기 입력 비디오 내의 출현 인물의 식별을 위한 학습을 수행하여 상기 입력 비디오 내 출현 인물을 인식하는 단계;(c) 출현 인물 인식 결과에 기초하여, 상기 입력 비디오 내에서 같은 출현 인물이 등장하는 프레임들에 관한 1차 장면을 생성하는 단계;(d) 생성된 1차 장면 중에서 상기 (a) 단계에서 결정된 하나 이상의 요약 후보 인물이 등장하는 1차 장면을 추출하여 상기 하나 이상의 요약 후보 인물과 관련되는 2차 장면을 생성하고, 상기 하나 이상의 요약 후보 인물별로 산출되는 출현 횟수를 고려하여 가중치를 생성하는 단계; 및(e) 상기 가중치를 기초로 상기 2차 장면 중 요약 대상 장면을 선별하여 요약 비디오를 생성하는 단계를 포함하는, 인물 중심 장면 생성 및 비디오 요약 방법
|
| 2 |
2
제1항에 있어서,상기 (b) 단계에서, 상기 입력 비디오 내의 출현 인물의 식별을 위한 학습은 출현 인물에 대한 이미지를 외부로부터 수집하여 이루어지는 것인, 인물 중심 장면 생성 및 비디오 요약 방법
|
| 3 |
3
제1항에 있어서,상기 (b) 단계는, 상기 입력 비디오 내의 출현 인물이 프레임 단위로 인식되도록 프레임 별로 출현 인물 정보를 검출 및 저장하고,상기 (d) 단계는, 프레임 별로 검출된 출현 인물 정보를 활용하여 출현 비율이 상대적으로 높은 요약 후보 인물에 대하여 더 높은 가중치를 부여하는 것인, 인물 중심 장면 생성 및 비디오 요약 방법
|
| 4 |
4
제1항에 있어서,상기 사용자 입력에는, 선호 인물에 대한 선호도 및 선호 관계에 대한 선호도 중 적어도 하나를 포함하는 사용자 선호도가 포함되고,상기 (e) 단계에서, 상기 요약 대상 장면은 상기 가중치와 상기 사용자 선호도를 고려한 우선 순위에 기반하여 선별되는 것인, 인물 중심 장면 생성 및 비디오 요약 방법
|
| 5 |
5
제1항에 있어서,상기 (d) 단계에서 생성되는 2차 장면은, 상기 입력 비디오 내 장면 위치 정보, 장면 내 출현 인물 정보 및 장면 내 출현 인물별 출현 횟수 정보를 장면 정보로서 포함하는 것인, 인물 중심 장면 생성 및 비디오 요약 방법
|
| 6 |
6
제5항에 있어서,상기 (e) 단계는, 선별된 요약 대상 장면별 장면 정보를 이용하여 상기 요약 비디오로 생성하는 것인, 인물 중심 장면 생성 및 비디오 요약 방법
|
| 7 |
7
제1항에 있어서,상기 (a) 단계에서, 상가 하나 이상의 요약 후보 인물은, 선호 인물 및 선호 인물과 선호 관계에 의해 연결되는 연결 인물을 포함하는 것인, 인물 중심 장면 생성 및 비디오 요약 방법
|
| 8 |
8
제1항에 있어서,상기 (a) 단계는, 상기 입력 비디오와 관련하여 사전 정의된 인물간 관계 설정을 고려하여 상기 요약 후보 인물을 결정하는 것인, 인물 중심 장면 생성 및 비디오 요약 방법
|
| 9 |
9
제8항에 있어서,상기 (a) 단계에서, 상기 사용자 입력은 상기 사전 정의된 인물간 관계 설정을 기초로 선호 인물 및 선호 관계를 선택하여 이루어지는 것인, 인물 중심 장면 생성 및 비디오 요약 방법
|
| 10 |
10
사용자 선호도 입력 기반의 인물 중심 장면 생성 및 비디오 요약 장치에 있어서,입력 비디오 내 선호 인물 및 선호 관계와 관련하여 수신한 사용자 입력에 기초하여, 하나 이상의 요약 후보 인물을 결정하는 선호도 분석부;상기 하나 이상의 요약 후보 인물을 포함하는 상기 입력 비디오 내의 출현 인물의 식별을 위한 학습을 수행하여 상기 입력 비디오 내 출현 인물을 인식하는 사전 학습부;출현 인물 인식 결과에 기초하여, 상기 입력 비디오 내에서 같은 출현 인물이 등장하는 프레임들에 관한 1차 장면을 생성하고, 생성된 1차 장면 중에서 상기 선호도 분석부에서 결정된 상기 하나 이상의 요약 후보 인물이 등장하는 1차 장면을 추출하여 상기 하나 이상의 요약 후보 인물과 관련되는 2차 장면을 생성하는 장면 생성부;상기 하나 이상의 요약 후보 인물별로 산출되는 출현 횟수를 고려하여 가중치를 생성하는 인물 가중치 계산부; 및상기 가중치를 기초로 상기 2차 장면 중 요약 대상 장면을 선별하여 요약 비디오를 생성하는 요약 비디오 편집부,를 포함하는, 인물 중심 장면 생성 및 비디오 요약 장치
|
| 11 |
11
제10항에 있어서,상기 사전 학습부는,출현 인물에 대한 이미지를 외부로부터 수집하여 상기 입력 비디오 내의 출현 인물의 식별을 위한 학습을 수행하는 것인, 인물 중심 장면 생성 및 비디오 요약 장치
|
| 12 |
12
제10항에 있어서,상기 사전 학습부는,상기 입력 비디오 내의 출현 인물이 프레임 단위로 인식되도록 프레임 별로 출현 인물 정보를 검출 및 저장하고,상기 인물 가중치 계산부는,프레임 별로 검출된 출현 인물 정보를 활용하여 출현 비율이 상대적으로 높은 요약 후보 인물에 대하여 더 높은 가중치를 부여하는 것인, 인물 중심 장면 생성 및 비디오 요약 장치
|
| 13 |
13
제10항에 있어서,상기 사용자 입력에는, 선호 인물에 대한 선호도 및 선호 관계에 대한 선호도 중 적어도 하나를 포함하는 사용자 선호도가 포함되고,상기 요약 비디오 편집부는,상기 가중치와 상기 사용자 선호도를 고려한 우선 순위에 기반하여 상기 요약 대상 장면을 선별하는 것인, 인물 중심 장면 생성 및 비디오 요약 장치
|
| 14 |
14
제10항에 있어서,상기 장면 생성부는,상기 입력 비디오 내 장면 위치 정보, 장면 내 출현 인물 정보 및 장면 내 출현 인물별 출현 횟수 정보를 장면 정보로서 포함하는 상기 2차 장면을 생성하는 것인, 인물 중심 장면 생성 및 비디오 요약 장치
|
| 15 |
15
제14항에 있어서,상기 요약 비디오 편집부는,선별된 요약 대상 장면별 장면 정보를 이용하여 상기 요약 비디오로 생성하는 것인, 인물 중심 장면 생성 및 비디오 요약 장치
|
| 16 |
16
제10항에 있어서,상기 선호도 분석부는,상기 입력 비디오와 관련하여 사전 정의된 인물간 관계 설정을 고려하여 상기 요약 후보 인물을 결정하는 것인, 인물 중심 장면 생성 및 비디오 요약 장치
|
