1 |
1
소스 비디오 데이터에서, 제1 동적 특성 인코더를 통해 시간 동적 특성이 인코딩된 소스 비디오 데이터에 대한 외형 억압 동적 특성을 특정 채널에 삽입하는 동적 채널 임베디드부;대상 이미지 데이터의 외형과 상기 임베디드된 특정 채널을 결합하여 가변 길이의 비디오 시퀀스를 생성하는 생성부; 및상기 소스 비디오 데이터와 상기 비디오 시퀀스 사이의 프레임 정확도를 구별하고, 상기 소스 비디오 데이터에 대한 외형 억압 동적 특성과 비디오 시퀀스에 대한 외형 억압 동적 특성 사이의 동적 특성 일관성을 구별하는 판별부를 포함하되,상기 판별부는상기 소스 비디오 데이터와 상기 비디오 시퀀스 사이의 프레임 정확도를 구별하는 공간 판별부; 및상기 소스 비디오 데이터에 대한 외형 억압 동적 특성과 상기 비디오 시퀀스에 대한 외형 억압 동적 특성 사이의 동적 특성 일관성을 구별하는 동적 판별부를 포함하며, 상기 공간 판별부는상기 소스 비디오 데이터 및 상기 비디오 시퀀스를 시간에서의 복수의 프레임으로 구분하여 프레임에 대한 정확도를 판단하고, 프레임이 실제 프레임(상기 소스 비디오 데이터의 프레임)인지 또는 생성된 프레임(상기 비디오 시퀀스의 프레임)인지를 구별하며, 상기 동적 판별부는제2 동적 특성 인코더를 통해 획득되는 상기 비디오 시퀀스에 대한 외형 억압 동적 특성과 상기 제1 동적 특성 인코더를 통해 획득되는 상기 소스 비디오 데이터에 대한 외형 억압 동적 특성을 비교하고, 외형 억압 동적 특성이 현실 동적 특성(상기 소스 비디오 데이터의 동적 특성)인지 또는 생성된 동적 특성(상기 비디오 시퀀스의 동적 특성)인지를 구별하며, 상기 동적 판별부는상기 비디오 시퀀스의 가변 길이에 영향을 받지 않기 위해, 시간 T까지의 상기 비디오 시퀀스에 대한 외형 억압 동적 특성만을 이용하여 동적 특성 일관성을 구별하는 것을 특징으로 하는, 생성적 적대 네트워크를 이용한 비디오 시퀀스 생성 시스템
|
2 |
2
제1항에 있어서,상기 동적 채널 임베디드부는상기 소스 비디오 데이터에 대한 외형 억압 동적 특성을 상기 특정 채널에 삽입하여 시간 T에서의 상기 소스 비디오 데이터에 대한 외형과 외형 억압 동적 특성을 결합하는 생성적 적대 네트워크를 이용한 비디오 시퀀스 생성 시스템
|
3 |
3
제2항에 있어서,상기 동적 채널 임베디드부는드롭아웃(dropout)을 이용하여 상기 소스 비디오 데이터에 대한 외형 억압 동적 특성에 노이즈를 생성하는 것을 특징으로 하는 생성적 적대 네트워크를 이용한 비디오 시퀀스 생성 시스템
|
4 |
4
제1항에 있어서,상기 생성부는유넷 네트워크(Unet Network) 구조를 사용하여 상기 대상 이미지 데이터의 외형을 보존하는 생성적 적대 네트워크를 이용한 비디오 시퀀스 생성 시스템
|
5 |
5
제4항에 있어서,상기 생성부는상기 판별부를 통해 판별되는 상기 비디오 시퀀스에 대한 공간적 및 시간적 일관성에 기초하여 최종 비디오 시퀀스를 생성하는 것을 특징으로 하는 생성적 적대 네트워크를 이용한 비디오 시퀀스 생성 시스템
|
6 |
6
삭제
|
7 |
7
삭제
|
8 |
8
삭제
|
9 |
9
삭제
|
10 |
10
제1항에 있어서,상기 제1 동적 특성 인코더 및 상기 제2 동적 특성 인코더는 상기 소스 비디오 데이터 또는 상기 비디오 시퀀스의 제1 프레임을 복제하여 정적 시퀀스를 생성하고, 순환신경망(recurrent neural networks; RNN)를 이용하여 상기 소스 비디오 데이터 또는 상기 비디오 시퀀스의 잠재 시공간 특징 및 상기 정적 시퀀스의 잠재 시공간 특징을 획득하며, 상기 소스 비디오 데이터 또는 상기 비디오 시퀀스의 잠재 시공간 특징에서 상기 정적 시퀀스의 잠재 시공간 특징을 제거하여 상기 소스 비디오 데이터에 대한 외형 억압 동적 특성 또는 상기 비디오 시퀀스에 대한 외형 억압 동적 특성을 제공하는 생성적 적대 네트워크를 이용한 비디오 시퀀스 생성 시스템
|
11 |
11
소스 비디오 데이터의 동적 특성과 대상 이미지 데이터의 외형을 이용하여 가변 길이의 비디오 시퀀스를 생성하고, 판별 결과에 기초하여 최종 비디오 시퀀스를 생성하는 생성기 네트워크; 및상기 소스 비디오 데이터와 상기 비디오 시퀀스 사이의 프레임 정확도를 구별하고, 소스 비디오 데이터에 대한 외형 억압 동적 특성과 비디오 시퀀스에 대한 외형 억압 동적 특성 사이의 동적 특성 일관성을 구별하는 판별기 네트워크를 포함하되,상기 생성기 네트워크 및 상기 판별기 네트워크는 교대로 수행되는 것을 특징으로 하며,상기 판별기 네트워크는상기 소스 비디오 데이터와 상기 비디오 시퀀스 사이의 프레임 정확도를 구별하는 공간 판별부; 및상기 소스 비디오 데이터에 대한 외형 억압 동적 특성과 상기 비디오 시퀀스에 대한 외형 억압 동적 특성 사이의 동적 특성 일관성을 구별하는 동적 판별부를 포함하고,상기 공간 판별부는상기 소스 비디오 데이터 및 상기 비디오 시퀀스를 시간에서의 복수의 프레임으로 구분하여 프레임에 대한 정확도를 판단하고, 프레임이 실제 프레임(상기 소스 비디오 데이터의 프레임)인지 또는 생성된 프레임(상기 비디오 시퀀스의 프레임)인지를 구별하며, 상기 동적 판별부는제2 동적 특성 인코더를 통해 획득되는 상기 비디오 시퀀스에 대한 외형 억압 동적 특성과 제1 동적 특성 인코더를 통해 획득되는 상기 소스 비디오 데이터에 대한 외형 억압 동적 특성을 비교하고, 외형 억압 동적 특성이 현실 동적 특성(상기 소스 비디오 데이터의 동적 특성)인지 또는 생성된 동적 특성(상기 비디오 시퀀스의 동적 특성)인지를 구별하며, 상기 동적 판별부는상기 비디오 시퀀스의 가변 길이에 영향을 받지 않기 위해, 시간 T까지의 상기 비디오 시퀀스에 대한 외형 억압 동적 특성만을 이용하여 동적 특성 일관성을 구별하는 것을 특징으로 하는, 생성적 적대 네트워크를 이용한 비디오 시퀀스 생성 시스템
|
12 |
12
제11항에 있어서,상기 생성기 네트워크는상기 소스 비디오 데이터에서, 상기 제1 동적 특성 인코더를 통해 시간 동적 특성이 인코딩된 상기 소스 비디오 데이터에 대한 외형 억압 동적 특성을 특정 채널에 삽입하는 동적 채널 임베디드부; 및상기 대상 이미지 데이터의 외형과 상기 임베디드된 특정 채널을 결합하여 가변 길이의 상기 비디오 시퀀스를 생성하는 생성부를 포함하는 생성적 적대 네트워크를 이용한 비디오 시퀀스 생성 시스템
|
13 |
13
삭제
|
14 |
14
생성적 적대 네트워크를 이용한 비디오 시퀀스 생성 시스템의 동작 방법에 있어서, 제1 동적 특성 인코더를 통해 시간 동적 특성이 인코딩된 소스 비디오 데이터에 대한 외형 억압 동적 특성을 특정 채널에 삽입하는 단계; 대상 이미지 데이터의 외형과 상기 임베디드된 특정 채널을 결합하여 가변 길이의 비디오 시퀀스를 생성하는 단계;상기 소스 비디오 데이터와 상기 비디오 시퀀스 사이의 프레임 정확도를 구별하고, 상기 소스 비디오 데이터에 대한 외형 억압 동적 특성과 비디오 시퀀스에 대한 외형 억압 동적 특성 사이의 동적 특성 일관성을 구별하는 단계; 및구별 결과에 기초하여, 상기 비디오 시퀀스에 대한 공간적 및 시간적 일관성에 기초하여 최종 비디오 시퀀스를 출력하는 단계를 포함하되,상기 프레임의 정확도를 구별하고, 동적 특성 일관성을 구별하는 단계는상기 소스 비디오 데이터 및 상기 비디오 시퀀스를 시간에서의 복수의 프레임으로 구분하여 프레임에 대한 정확도를 판단하고, 프레임이 실제 프레임(상기 소스 비디오 데이터의 프레임)인지 또는 생성된 프레임(상기 비디오 시퀀스의 프레임)인지를 구별하며, 상기 프레임의 정확도를 구별하고, 동적 특성 일관성을 구별하는 단계는제2 동적 특성 인코더를 통해 획득되는 상기 비디오 시퀀스에 대한 외형 억압 동적 특성과 상기 제1 동적 특성 인코더를 통해 획득되는 상기 소스 비디오 데이터에 대한 외형 억압 동적 특성을 비교하고, 외형 억압 동적 특성이 현실 동적 특성(상기 소스 비디오 데이터의 동적 특성)인지 또는 생성된 동적 특성(상기 비디오 시퀀스의 동적 특성)인지를 구별하며, 상기 비디오 시퀀스의 가변 길이에 영향을 받지 않기 위해, 시간 T까지의 상기 비디오 시퀀스에 대한 외형 억압 동적 특성만을 이용하여 동적 특성 일관성을 구별하는 것을 특징으로 하는, 생성적 적대 네트워크를 이용한 비디오 시퀀스 생성 방법
|
15 |
15
제14항에 있어서,상기 소스 비디오 데이터를 특정 채널에 삽입하는 단계는 상기 소스 비디오 데이터에 대한 외형 억압 동적 특성을 상기 특정 채널에 삽입하여 시간 T에서의 상기 소스 비디오 데이터에 대한 외형과 외형 억압 동적 특성을 결합하는 생성적 적대 네트워크를 이용한 비디오 시퀀스 생성 방법
|
16 |
16
제14항에 있어서,상기 가변 길이의 비디오 시퀀스를 생성하는 단계는유넷 네트워크(Unet Network) 구조를 사용하여 상기 대상 이미지 데이터의 외형을 보존하는 생성적 적대 네트워크를 이용한 비디오 시퀀스 생성 방법
|
17 |
17
삭제
|
18 |
18
삭제
|
19 |
19
제14항 내지 제16항 중 어느 한 항의 방법을 수행하기 위하여 컴퓨터로 판독 가능한 기록 매체에 저장된 컴퓨터 프로그램
|