| 1 |
1
전자 장치에서, 영상 시퀀스에 대한 캡션(caption) 정보를 생성하는 방법에 있어서,상기 영상 시퀀스에 포함된 복수 개의 영상들을 획득하는 단계;상기 복수 개의 영상 각각에 대하여 특징 정보를 추출하는 단계;상기 추출된 특징 정보들을 상기 복수 개의 영상들의 순서에 따라 순차적으로 처리함으로써, 상기 영상 시퀀스의 특징에 관한 제1 특징 정보를 획득하는 단계; 상기 추출된 특징 정보들 간의 적어도 하나의 유사도에 기초하여 결정된 상기 영상 시퀀스의 특징에 관한 제2 특징 정보를 획득하는 단계; 및상기 제1 특징 정보 및 상기 제2 특징 정보에 기초하여, 상기 영상 시퀀스에 대한 캡션 정보를 생성하는 단계를 포함하는, 방법
|
| 2 |
2
제1항에 있어서, 상기 제2 특징 정보를 획득하는 단계는상기 적어도 하나의 유사도 값에 기초하여, 상기 복수 개의 영상 각각에 대한 특징 정보를 수정하는 단계; 및상기 복수 개의 영상 각각에 대하여 수정된 특징 정보에 기초하여, 상기 제2 특징 정보를 획득하는 단계를 포함하는, 방법
|
| 3 |
3
제2항에 있어서, 상기 제2 특징 정보는상기 복수 개의 영상 각각에 대하여 수정된 특징 정보들이 결합 연산(concatenation operation)을 통해 서로 결합됨으로써, 획득되는, 방법
|
| 4 |
4
제1항에 있어서, 상기 캡션 정보를 생성하는 단계는상기 제1 특징 정보 및 상기 제2 특징 정보를 결합하는 단계; 및상기 결합된 정보에 기초하여, 상기 영상 시퀀스에 대한 캡션 정보를 생성하는 단계를 포함하는, 방법
|
| 5 |
5
제4항에 있어서, 상기 제2 특징 정보는,상기 제1 특징 정보와 결합될 수 있는 형태로 변환된 후, 상기 제1 특징 정보와 결합되는, 방법
|
| 6 |
6
제4항에 있어서, 상기 제1 특징 정보 및 상기 제2 특징 정보에 포함된 특징 값들 중, 서로 대응되는 특징 값들에 대한 대표값에 기초하여, 상기 제1 특징 정보 및 상기 제2 특징 정보가 결합되는, 방법
|
| 7 |
7
제1항에 있어서, 상기 적어도 하나의 유사도는상기 복수 개의 영상의 특징 정보들 대신, 상기 제1 특징 정보를 획득하기 위하여, 상기 복수 개의 영상의 특징 정보들이 순차적으로 처리될 때마다 획득되는 정보들에 기초하여, 획득되는, 방법
|
| 8 |
8
영상 시퀀스에 대한 캡션 정보를 생성하는 전자 장치는,상기 영상 시퀀스에 포함된 복수 개의 영상들을 저장하는 메모리;상기 복수 개의 영상 각각에 대하여 특징 정보를 추출하고, 상기 추출된 특징 정보들을 상기 복수 개의 영상들의 순서에 따라 순차적으로 처리함으로써, 상기 영상 시퀀스의 특징에 관한 제1 특징 정보를 획득하고, 상기 추출된 특징 정보들 간의 적어도 하나의 유사도에 기초하여 결정된 상기 영상 시퀀스의 특징에 관한 제2 특징 정보를 획득하고, 상기 제1 특징 정보 및 상기 제2 특징 정보에 기초하여, 상기 영상 시퀀스에 대한 캡션 정보를 생성하는, 적어도 하나의 프로세서; 및상기 생성된 캡션 정보에 기초한 정보를 출력하는 출력부를 포함하는, 전자 장치
|
| 9 |
9
제8항에 있어서, 상기 적어도 하나의 프로세서는상기 적어도 하나의 유사도 값에 기초하여, 상기 복수 개의 영상 각각에 대한 특징 정보를 수정하고, 상기 복수 개의 영상 각각에 대하여 수정된 특징 정보에 기초하여, 상기 제2 특징 정보를 획득하는, 전자 장치
|
| 10 |
10
제9항에 있어서, 상기 제2 특징 정보는상기 복수 개의 영상 각각에 대하여 수정된 특징 정보들이 결합 연산을 통해 서로 결합됨으로써, 획득되는, 전자 장치
|
| 11 |
11
제8항에 있어서, 상기 적어도 하나의 프로세서는상기 제1 특징 정보 및 상기 제2 특징 정보를 결합하고, 상기 결합된 정보에 기초하여, 상기 영상 시퀀스에 대한 캡션 정보를 생성하는, 전자 장치
|
| 12 |
12
제11항에 있어서, 상기 제2 특징 정보는,상기 제1 특징 정보와 결합될 수 있는 형태로 변환된 후, 상기 제1 특징 정보와 결합되는, 전자 장치
|
| 13 |
13
제11항에 있어서, 상기 제1 특징 정보 및 상기 제2 특징 정보에 각각 포함된, 서로 대응되는 특징 값들에 대한 대표값에 기초하여, 상기 제1 특징 정보 및 상기 제2 특징 정보가 결합되는, 전자 장치
|
| 14 |
14
제8항에 있어서, 상기 적어도 하나의 유사도는상기 복수 개의 영상의 특징 정보들 대신, 상기 제1 특징 정보를 획득하기 위하여, 상기 복수 개의 영상의 특징 정보들이 순차적으로 처리될 때마다 획득되는 정보들에 기초하여, 획득되는, 전자 장치
|
| 15 |
15
영상 시퀀스에 포함된 복수 개의 영상들을 획득하는 동작;상기 복수 개의 영상 각각에 대하여 특징 정보를 추출하는 동작;상기 추출된 특징 정보들을 상기 복수 개의 영상들의 순서에 따라 순차적으로 처리함으로써, 상기 영상 시퀀스의 특징에 관한 제1 특징 정보를 획득하는 동작; 상기 추출된 특징 정보들 간의 적어도 하나의 유사도에 기초하여 결정된 상기 영상 시퀀스의 특징에 관한 제2 특징 정보를 획득하는 동작; 및상기 제1 특징 정보 및 상기 제2 특징 정보에 기초하여, 상기 영상 시퀀스에 대한 캡션 정보를 생성하는 동작을 수행하도록 하는 프로그램이 저장된 기록매체를 포함하는, 컴퓨터 프로그램 제품
|
