| 1 |
1
관심 객체 식별에 의한 비디오 요약을 생성하는 방법으로서,영상 장비에 의해 촬영된 비디오에서 이벤트 객체를 검출하는 단계; 상기 이벤트 객체의 속성을 프레임별로 추출하는 단계; 각각의 프레임에 포함된 이벤트 객체의 속성을 프레임 간에 비교하여 이벤트 객체를 식별하는 단계;식별된 이벤트 객체를 이벤트 객체의 속성에 따라 군집화하는 단계; 관심 객체의 속성을 포함한 사용자 입력을 수신하는 경우, 상기 이벤트 객체의 속성과 관심 객체의 속성에 기초하여 상기 관심 객체의 속성에 대응하는 군집을 필터링하는 단계; 필터링된 군집의 튜브를 생성하는 단계 - 상기 필터링된 군집의 튜브는 상기 필터링된 군집에 포함된 이벤트 객체를 튜브화하여 생성됨; 및상기 필터링된 군집의 튜브에 기초하여 관심 객체에 대한 비디오 요약을 생성하는 단계를 포함하되, 상기 관심 객체에 대한 비디오 요약을 생성하는 단계는:상기 관심 객체의 속성에 대응하는 군집에 포함된 이벤트 객체의 튜브를 이동시키는 단계 - 상기 이벤트 객체의 튜브는 시간적 일관성을 유지하면서 공간적 충돌이 소정 임계치 미만이 될 때까지 이동됨 - 를 포함하는 것을 특징으로 하는 방법
|
| 2 |
2
제1항에 있어서, 상기 이벤트 객체를 식별하는 단계는, 상기 이벤트 객체의 속성과 관심 객체의 속성을 비교하여 상기 속성들 간의 차이가 소정의 제1 임계치 이하인 경우 동일한 이벤트 객체로 식별하는 단계를 포함하는 방법
|
| 3 |
3
제2항에 있어서, 상기 이벤트 객체를 식별하는 단계는,시간별 순서가 인접한 두 프레임 간의 이벤트 객체의 속성을 비교하는 것을 특징으로 하는 방법
|
| 4 |
4
제3항에 있어서, 상기 이벤트 객체를 식별하는 단계는,동일한 이벤트 객체로 각각 식별된 하나 이상의 이벤트 객체에 있어서, 상기 하나 이상의 이벤트 객체 간의 속성을 비교하는 단계를 더 포함하는 방법
|
| 5 |
5
제1항에 있어서, 상기 비디오는,서로 상이한 지점에 위치하는 복수 개의 영상 장비에서 각각 촬영된 것을 특징으로 하는 방법
|
| 6 |
6
제5항에 있어서, 상기 비디오 중 적어도 두 개의 비디오 사이에서 이벤트 객체를 식별하는 단계를 더 포함하는 방법
|
| 7 |
7
제1항에 있어서, 상기 이벤트 객체의 속성을 추출하는 단계는,컨볼루션 레이어(convolution layer), 풀링 레이어(pooling layer), 및 완전 연결 레이어(fully connected layer) 중 적어도 하나를 포함하는 속성 추출 모델을 사용하는 것을 특징으로 하는 방법
|
| 8 |
8
제1항에 있어서, 상기 이벤트 객체의 속성을 추출하는 단계는,LBP(Local Binary Pattern), HOG(Histogram of Oriented Gradient), SIFT(Scale Invariant Feature Transform) 중 어느 하나를 사용하는 것을 특징으로 하는 방법
|
| 9 |
9
제8항에 있어서, 상기 이벤트 객체를 식별하는 단계는,KFC(kernlized correlation filter) 기반의 칼만 필터(kalman filter)를 사용하는 것을 특징으로 하는 방법
|
| 10 |
10
제1항에 있어서, 상기 이벤트 객체의 속성을 추출하는 단계는,상기 이벤트 객체의 위치가 프레임별로 추출되는 경우, 상기 이벤트 객체를 식별한 이후에 상기 이벤트 객체의 프레임별 위치에 기초하여 상기 이벤트 객체의 움직임 방향 및 움직임 패턴 중 하나 이상을 더 추출하는 단계를 더 포함하는 방법
|
| 11 |
11
제1항에 있어서, 상기 관심 객체에 대한 비디오 요약을 생성하는 단계는,상기 관심 객체에 대응하는 튜브 간에 시간적 일관성을 유지하면서, 공간적 충돌을 최소화하여 비디오 요약을 생성하는 것을 특징으로 하는 방법
|
| 12 |
12
제1항에 있어서,상기 관심 객체에 대응하는 이벤트 객체를 촬영한 영상 장비의 위치 정보에 기초하여 상기 관심 객체의 이동 경로를 사용자에게 제공하는 단계를 더 포함하는 방법
|
| 13 |
13
컴퓨터에 의해 판독 가능하고, 상기 컴퓨터에 의해 동작 가능한 프로그램 명령어를 저장하는 컴퓨터 판독가능한 기록매체로서, 상기 프로그램 명령어가 상기 컴퓨터의 프로세서에 의해 실행되는 경우 상기 프로세서가 제1항 내지 제12항 중 어느 하나의 항에 따른 관심 객체 식별에 의한 비디오 요약 생성 방법을 수행하게 하는 컴퓨터 판독가능 기록매체
|
| 14 |
14
관심 객체 식별에 의한 비디오 요약을 생성하는 방법으로서,영상 장비에 의해 촬영된 복수 개의 비디오에서 이벤트 객체를 검출하는 단계; 상기 이벤트 객체의 제1 속성을 프레임별로 추출하는 단계; 각각의 프레임에 포함된 이벤트 객체의 속성을 프레임 간에 비교하여 이벤트 객체를 식별하는 단계;상기 식별된 이벤트 객체의 튜브를 생성하는 단계;상기 이벤트 객체의 튜브에 기초하여 이벤트 객체의 제2 속성을 추출하는 단계;식별된 이벤트 객체를 이벤트 객체의 속성에 따라 군집화하는 단계; 사용자 입력을 수신하는 경우, 상기 이벤트 객체의 속성과 관심 객체의 속성에 기초하여 상기 관심 객체의 속성에 대응하는 군집을 필터링하는 단계; 상기 필터링된 군집의 튜브를 생성하는 단계 - 상기 필터링된 군집의 튜브는 상기 필터링된 군집에 포함된 이벤트 객체를 튜브화하여 생성됨; 및상기 필터링된 군집의 튜브에 기초하여 관심 객체에 대한 비디오 요약을 생성하는 단계를 포함하되, 상기 관심 객체에 대한 비디오 요약을 생성하는 단계는:상기 관심 객체의 속성에 대응하는 군집에 포함된 이벤트 객체의 튜브를 이동시키는 단계 - 상기 이벤트 객체의 튜브는 시간적 일관성을 유지하면서 공간적 충돌이 소정 임계치 미만이 될 때까지 이동됨 - 를 포함하는 것을 특징으로 하는 방법
|
| 15 |
15
제14항에 있어서, 상기 이벤트 객체의 제2 속성을 추출하는 단계는,상기 이벤트 객체의 튜브의 밀도를 산출하는 단계;상기 밀도가 소정의 제2 임계치를 초과하는지 판단하는 단계;상기 제2 임계치를 초과하는 영역을 핵심 영역(key region)으로 결정하는 단계; 및상기 핵심 영역에 기초하여 상기 관심 객체의 움직임 방향, 및 움직임 패턴 중 하나의 속성 이상을 추출하는 단계를 포함하는 방법
|
| 16 |
16
제14항에 있어서, 상기 제1 속성은 이벤트 객체의 종류를 포함하고,상기 제2 속성은 이벤트 객체의 움직임 방향 및 움직임 패턴 중 적어도 하나를 포함하는 방법
|
| 17 |
17
관심 객체 식별에 의한 비디오 요약 생성 방법을 수행하는 비디오 요약 생성 시스템으로서,복수 개의 영상 장비; 그리고 비디오 처리부를 포함하되, 상기 비디오 처리부는,상기 복수 개의 영상 장비에 의해 촬영된 비디오에서 이벤트 객체를 검출하는 이벤트 객체 검출부;상기 이벤트 객체의 속성을 추출하는 속성 추출부;이벤트 객체의 속성을 프레임 간에 비교하여 이벤트 객체를 식별하는 식별부;식별된 이벤트 객체를 이벤트 객체의 속성에 따라 군집화하는 군집화부;관심 객체의 속성을 포함한 사용자 입력을 수신하는 경우, 상기 이벤트 객체의 속성과 관심 객체의 속성에 기초하여 상기 관심 객체의 속성에 대응하는 군집을 필터링하는 필터링부;상기 관심 객체에 대응하는 군집의 튜브를 생성하는 튜브 생성부; 및상기 군집의 튜브에 기초하여 관심 객체에 대한 비디오 요약을 생성하는 비디오 요약부를 포함하되, 상기 튜브 생성부는:상기 관심 객체의 속성에 대응하여 필터링된 군집을 상기 관심 객체에 대응하는 군집으로 획득하고, 상기 필터링된 군집에 포함된 이벤트 객체를 튜브화하여 상기 군집의 튜브를 생성하도록 더 구성되고, 상기 비디오 요약부는:상기 관심 객체의 속성에 대응하는 군집에 포함된 이벤트 객체의 튜브를 이동시키도록 더 구성되며, 상기 이벤트 객체의 튜브는 시간적 일관성을 유지하면서 공간적 충돌이 소정 임계치 미만이 될 때까지 이동되는 것을 특징으로 하는 비디오 요약 생성 시스템
|
