| 1 |
1
샷 경계 검출 방법에 있어서,복수의 프레임들을 포함하는 영상을 입력받는 단계;상기 영상을 프레임 단위로 나누는 단계;상기 영상에 포함된 샷들 사이의 전환에 기초하여 상기 샷들 사이의 경계를 지시하는 컷과 관련된 프레임의 유형을 분류하는 분류모델에 따라, 상기 복수의 프레임들을 컷과 무관한 프레임에 대응하는 제1 유형, 컷의 이전 프레임에 대응하는 제2 유형 및 컷의 이후 프레임에 대응하는 제3 유형 중 어느 하나로 분류하는 단계; 및상기 분류모델로부터 프레임 순서대로 출력되는 유형들의 시퀀스에 기초하여, 상기 영상 내 적어도 하나의 컷을 검출하는 단계를 포함하는샷 경계 검출 방법
|
| 2 |
2
제1항에 있어서,상기 제2 유형은 컷의 직전 프레임에 대응하고,상기 제3 유형은 컷의 직후 프레임에 대응하는,샷 경계 검출 방법
|
| 3 |
3
제1항에 있어서,상기 컷을 검출하는 단계는상기 시퀀스로부터, 상기 제2 유형의 프레임 및 상기 제2 유형의 프레임 뒤에 인접한 상기 제3 유형의 프레임을 포함하는 프레임 페어(pair)를 추출하는 단계; 및상기 프레임 페어에 포함된 두 프레임들 중 적어도 하나를 상기 컷에 대응하는 적어도 하나의 프레임으로 검출하는 단계를 포함하는샷 경계 검출 방법
|
| 4 |
4
제1항에 있어서,상기 컷을 검출하는 단계는상기 컷을 위하여 미리 정의된 유형 패턴에 기초하여, 상기 시퀀스 내 적어도 하나의 제2 유형이나 적어도 하나의 제3 유형이 노이즈인지 여부를 판단하는 단계; 및상기 판단 결과에 기초하여 상기 적어도 하나의 제2 유형이나 상기 적어도 하나의 제3 유형을 상기 제1 유형으로 변경함으로써, 상기 노이즈를 제거하는 단계를 포함하는샷 경계 검출 방법
|
| 5 |
5
제1항에 있어서,상기 복수의 프레임들에는 시간적 순서에 따라 인덱스 번호가 부여된 것을 특징으로 하는샷 경계 검출 방법
|
| 6 |
6
제5항에 있어서,상기 컷을 검출하는 단계는상기 시퀀스로부터, 상기 제2 유형의 프레임 및 상기 제2 유형의 프레임 뒤에 인접한 상기 제3 유형의 프레임을 포함하는 프레임 페어(pair)를 추출하는 단계; 및상기 프레임 페어에 포함된 두 프레임들 중 적어도 하나의 인덱스 번호 를 출력하는 단계를 포함하는샷 경계 검출 방법
|
| 7 |
7
제1항에 있어서,상기 분류모델은 신경망을 포함하고,상기 신경망의 파라미터들은 트레이닝 영상에 기초하여, 상기 트레이닝 영상의 프레임 이미지로부터 상기 트레이닝 영상의 프레임 유형을 추정하도록 학습(training)된 것을 특징으로 하는샷 경계 검출 방법
|
| 8 |
8
샷 경계 검출 장치에 있어서,영상 내 샷들 사이의 경계를 지시하는 컷과 관련된 프레임의 유형을 분류하는 분류모델을 저장하는 메모리; 및상기 분류모델에 따라 입력 영상에 포함된 복수의 프레임들을 컷과 무관한 프레임에 대응하는 제1 유형, 컷의 직전 프레임에 대응하는 제2 유형 및 컷의 직후 프레임에 대응하는 제3 유형 중 어느 하나로 분류하고, 상기 분류모델로부터 프레임 순서대로 출력되는 유형들의 시퀀스에 기초하여 상기 입력 영상 내 적어도 하나의 컷을 검출하는 적어도 하나의 프로세서를 포함하는샷 경계 검출 장치
|
| 9 |
9
제8항에 있어서,상기 제2 유형은 컷의 직전 프레임에 대응하고,상기 제3 유형은 컷의 직후 프레임에 대응하는,샷 경계 검출 장치
|
| 10 |
10
제8항에 있어서,상기 프로세서는상기 시퀀스로부터, 상기 제2 유형의 프레임 및 상기 제2 유형의 프레임 뒤에 인접한 상기 제3 유형의 프레임을 포함하는 프레임 페어(pair)를 추출하고,상기 프레임 페어에 포함된 두 프레임들 중 적어도 하나를 상기 컷에 대응하는 적어도 하나의 프레임으로 검출하는,샷 경계 검출 장치
|
| 11 |
11
제8항에 있어서,상기 프로세서는상기 컷을 위하여 미리 정의된 유형 패턴에 기초하여, 상기 시퀀스 내 적어도 하나의 제2 유형이나 적어도 하나의 제3 유형이 노이즈인지 여부를 판단하고,상기 판단 결과에 기초하여 상기 적어도 하나이 제2 유형이나 상기 적어도 하나의 제3 유형을 상기 제1 유형으로 변경함으로써, 상기 노이즈를 제거하는,샷 경계 검출 장치
|
| 12 |
12
제8항에 있어서,상기 복수의 프레임들에는 시간적 순서에 따라 인덱스 번호가 부여된 것을 특징으로 하는샷 경계 검출 장치
|
| 13 |
13
제12항에 있어서,상기 프로세서는상기 시퀀스로부터, 상기 제2 유형의 프레임 및 상기 제2 유형의 프레임 뒤에 인접한 상기 제3 유형의 프레임을 포함하는 프레임 페어(pair)를 추출하고,상기 프레임 페어에 포함된 두 프레임들 중 적어도 하나의 인덱스 번호를 출력하는,샷 경계 검출 장치
|
| 14 |
14
제8항에 있어서,상기 분류모델은 신경망을 포함하고,상기 신경망의 파라미터들은 트레이닝 영상에 기초하여, 상기 트레이닝 영상의 프레임 이미지로부터 상기 트레이닝 영상의 프레임 유형을 추정하도록 학습(training)된 것을 특징으로 하는샷 경계 검출 장치
|
| 15 |
15
하드웨어와 결합되어 제1항 내지 제7항 중 어느 하나의 항의 방법을 실행시키기 위하여 매체에 저장된 컴퓨터 프로그램
|
