| 1 |
1
컴퓨팅 디바이스에 의한 비디오의 장면 상황 정보 생성 방법에 있어서,복수의 이미지를 포함하는 비디오에 대하여 장면 전환 시점을 검출하는 단계;이미지의 분류 라벨을 이용하여 학습한 네트워크로 이미지의 특정 위치에서 스코어를 산출하는 방식을 적용한 약한 지도 학습 기반으로 비디오 단위로 학습한 분류 모델에 의해 이미지 단위로 장면 상황 정보를 생성하는 단계; 및상기 비디오의 장면 전환 시점을 기준으로 상기 장면 상황 정보를 필터링하는 단계를 포함하며,상기 장면 전환 시점을 검출하는 단계는, 상기 비디오에 특징 추출 모델을 적용하여 이미지마다 시각 특징을 추출하고, 상기 시각 특징의 시간에 따른 변화를 기반으로 상기 비디오에서 장면 전환 시점을 검출하며, 상기 시각 특징의 시간에 따른 변화는 상기 시각 특징을 시간축에 대해 2차 미분하여 산출하는 것을 특징으로 하는 비디오의 장면 상황 정보 생성 방법
|
| 2 |
2
삭제
|
| 3 |
3
삭제
|
| 4 |
4
제1항에 있어서,상기 장면 상황 정보를 생성하는 단계는,상기 비디오의 시간축에 영역 매핑 알고리즘을 적용하여 상기 분류 모델을 지도 학습하고 상기 장면 상황 정보를 생성하는 것을 특징으로 하는 비디오의 장면 상황 정보 생성 방법
|
| 5 |
5
제4항에 있어서,상기 장면 상황 정보를 생성하는 단계는,상기 비디오를 구성하는 복수의 이미지로부터 영역 맵을 추출하고, 추출한 영역 맵에 관한 통계적 스코어를 산출하고 비디오 전체를 대표하는 영역 맵을 상기 복수의 이미지에 적용하여, 이미지 단위로 상기 장면 상황 정보를 생성하는 것을 특징으로 하는 비디오의 장면 상황 정보 생성 방법
|
| 6 |
6
제1항에 있어서,상기 장면 상황 정보를 필터링하는 단계는,상기 장면 상황 정보에 시간에 따른 상태를 추적하는 재귀 필터를 적용하며, 상기 장면 전환 시점에서 상기 상태를 초기화한 후 필터링 과정을 진행하는 것을 특징으로 하는 비디오의 장면 상황 정보 생성 방법
|
| 7 |
7
제6항에 있어서,상기 재귀 필터는 상기 분류 모델의 출력 벡터를 입력받아 상기 장면 전환 시점에서 새로 필터링을 시작하며, 시간에 따라 필터링 과정을 진행하여 상기 출력 벡터의 노이즈를 제거하는 것을 특징으로 하는 비디오의 장면 상황 정보 생성 방법
|
| 8 |
8
복수의 이미지를 포함하는 비디오에 대하여 장면 전환 시점을 검출하는 장면 전환 시점 검출부;이미지의 분류 라벨을 이용하여 학습한 네트워크로 이미지의 특정 위치에서 스코어를 산출하는 방식을 적용한 약한 지도 학습 기반으로 비디오 단위로 학습한 분류 모델에 의해 이미지 단위로 장면 상황 정보를 생성하는 장면 상황 정보 생성부; 및상기 비디오의 장면 전환 시점을 기준으로 상기 장면 상황 정보를 필터링하는 장면 상황 정보 필터부를 포함하며,상기 장면 전환 시점 검출부는, 상기 비디오에 특징 추출 모델을 적용하여 이미지마다 시각 특징을 추출하고, 상기 시각 특징의 시간에 따른 변화를 기반으로 상기 비디오에서 장면 전환 시점을 검출하며, 상기 시각 특징의 시간에 따른 변화는 상기 시각 특징을 시간축에 대해 2차 미분하여 산출하는 것을 특징으로 하는 비디오의 장면 상황 정보 생성 장치
|
| 9 |
9
삭제
|
| 10 |
10
삭제
|
| 11 |
11
제8항에 있어서,상기 장면 상황 정보 생성부는,상기 비디오의 시간축에 영역 매핑 알고리즘을 적용하여 상기 분류 모델을 지도 학습하고 상기 장면 상황 정보를 생성하는 것을 특징으로 하는 비디오의 장면 상황 정보 생성 장치
|
| 12 |
12
제11항에 있어서,상기 장면 상황 정보 생성부는,상기 비디오를 구성하는 복수의 이미지로부터 영역 맵을 추출하고, 추출한 영역 맵에 관한 통계적 스코어를 산출하고 비디오 전체를 대표하는 영역 맵을 상기 복수의 이미지에 적용하여, 이미지 단위로 상기 장면 상황 정보를 생성하는 것을 특징으로 하는 비디오의 장면 상황 정보 생성 장치
|
| 13 |
13
제8항에 있어서,상기 장면 상황 정보 필터부는,상기 장면 상황 정보에 시간에 따른 상태를 추적하는 재귀 필터를 적용하며, 상기 장면 전환 시점에서 상기 상태를 초기화한 후 필터링 과정을 진행하는 것을 특징으로 하는 비디오의 장면 상황 정보 생성 장치
|
| 14 |
14
제13항에 있어서,상기 재귀 필터는 상기 분류 모델의 출력 벡터를 입력받아 상기 장면 전환 시점에서 새로 필터링을 시작하며, 시간에 따라 필터링 과정을 진행하여 상기 출력 벡터의 노이즈를 제거하는 것을 특징으로 하는 비디오의 장면 상황 정보 생성 장치
|
| 15 |
15
프로세서에 의해 실행 가능한 컴퓨터 프로그램 명령어들을 포함하는 비일시적(Non-Transitory) 컴퓨터 판독 가능한 매체에 기록되어 비디오의 장면 상황 정보 생성을 위한 컴퓨터 프로그램으로서, 상기 컴퓨터 프로그램 명령어들이 컴퓨팅 디바이스의 적어도 하나의 프로세서에 의해 실행되는 경우에,복수의 이미지를 포함하는 비디오에 대하여 장면 전환 시점을 검출하는 단계;이미지의 분류 라벨을 이용하여 학습한 네트워크로 이미지의 특정 위치에서 스코어를 산출하는 방식을 적용한 약한 지도 학습 기반으로 비디오 단위로 학습한 분류 모델에 의해 이미지 단위로 장면 상황 정보를 생성하는 단계; 및상기 비디오의 장면 전환 시점을 기준으로 상기 장면 상황 정보를 필터링하는 단계를 포함한 동작들을 수행하며,상기 장면 전환 시점을 검출하는 단계는, 상기 비디오에 특징 추출 모델을 적용하여 이미지마다 시각 특징을 추출하고, 상기 시각 특징의 시간에 따른 변화를 기반으로 상기 비디오에서 장면 전환 시점을 검출하며, 상기 시각 특징의 시간에 따른 변화는 상기 시각 특징을 시간축에 대해 2차 미분하여 산출하는 것을 특징으로 하는 컴퓨터 프로그램
|
