| 1 |
1
다양한 형태의 퍼스널 미디어를 복수의 모달리티(modality) 기반으로 의미를 분석하고, 의미를 갖는 최소 단위인 미디어 조각으로 분할하는 복합 모달리티 융합 분석부;상기 분할된 미디어 조각들을 의미를 고려하여 저장 및 검색하는 시맨틱 기반 지능형 검색부;사용자 모델링을 통해 상기 사용자의 프로파일을 학습하고 분석하며, 상기 시맨틱 기반 지능형 검색부에 의해 검색된 미디어 조각들 중 상기 사용자가 원하는 미디어 조각을 취사 선택하여 추천하는 퍼스널 미디어 추천부; 및상기 사용자에 의해 입력된 시나리오에 따라 상기 퍼스널 미디어 추천부에서 추천하는 복수의 미디어 조각을 이용하여 새로운 퍼스널 미디어를 창작하는 퍼스널 미디어 창작부;를 포함하는 다중-모달리티 특징 융합을 통한 퍼스널 미디어 자동 재창작 시스템
|
| 2 |
2
제1항에 있어서, 상기 복합 모달리티 융합 분석부는,상기 퍼스널 미디어에서 음성, 소리, 텍스트, 동영상 이미지 중 적어도 하나의 모달리티를 분리하여 특징을 분석하는 것인 다중-모달리티 특징 융합을 통한 퍼스널 미디어 자동 재창작 시스템
|
| 3 |
3
제2항에 있어서, 상기 복합 모달리티 융합 분석부는,상기 분리된 모달리티와 기학습된 학습데이터의 모달리티 간의 연관관계를 기반으로 분할 가능한 객체 및 행위를 검출하여 물리적 단위의 상기 미디어 조각들로 분할하는 것인 다중-모달리티 특징 융합을 통한 퍼스널 미디어 자동 재창작 시스템
|
| 4 |
4
제3항에 있어서, 상기 시맨틱 기반 지능형 검색부는,상기 미디어 조각의 효율적인 관리를 위해, 상기 분할된 미디어 조각들의 시맨틱을 고려하여 메타데이터 인덱싱을 생성하여 의미 기반으로 저장하는 것인 다중-모달리티 특징 융합을 통한 퍼스널 미디어 자동 재창작 시스템
|
| 5 |
5
제4항에 있어서, 상기 시맨틱 기반 지능형 검색부는,상기 시나리오를 해석하여 검색을 위한 키워드를 추출하고 질의어를 생성하며, 상기 키워드, 상기 키워드와 관련된 연관 키워드 및 상기 키워드와 관련된 연관 미디어 중 적어도 하나를 활용하여 검색 범위를 확장시켜 지능적으로 상기 시나리오에 대한 미디어 조각을 검색하는 것인 다중-모달리티 특징 융합을 통한 퍼스널 미디어 자동 재창작 시스템
|
| 6 |
6
제5항에 있어서, 상기 퍼스널 미디어 추천부는,기저장된 선호도 모델을 기반으로 상기 검색된 미디어 조각들 중 일부를 취사선택하는 것인 다중-모달리티 특징 융합을 통한 퍼스널 미디어 자동 재창작 시스템
|
| 7 |
7
제6항에 있어서, 상기 퍼스널 미디어 창작부는,상기 시나리오를 해석하여 재생을 위한 순서를 만들고, 상기 취사 선택된 미디어 조각들을 배치하여 재생하는 것인 다중-모달리티 특징 융합을 통한 퍼스널 미디어 자동 재창작 시스템
|
| 8 |
8
제7항에 있어서, 상기 퍼스널 미디어 창작부는,상기 취사 선택된 미디어 조각들의 포맷이 동일하지 않은 경우, 상기 취사 선택된 미디어 조각들의 포맷을 동일한 포맷으로 변환하는 것인 다중-모달리티 특징 융합을 통한 퍼스널 미디어 자동 재창작 시스템
|
| 9 |
9
제8항에 있어서, 상기 퍼스널 미디어 창작부는,상기 사용자가 원하는 재생 시간 길이에 따라 상기 새로운 퍼스널 미디어의 재생 시간 길이를 조정하거나, 상기 취사 선택된 미디어 조각들의 경계면에서 발생 가능한 부자연스러움을 자연스럽고 끊김 없는 재생을 위해 조정하는 최적화 동작을 수행하는 것인 다중-모달리티 특징 융합을 통한 퍼스널 미디어 자동 재창작 시스템
|
| 10 |
10
다양한 형태의 퍼스널 미디어를 복수의 모달리티(modality) 기반으로 의미를 분석하고, 의미를 갖는 최소 단위인 미디어 조각으로 분할하는 단계;상기 분할된 미디어 조각들을 의미를 고려하여 저장 및 검색하는 단계;사용자 모델링을 통해 상기 사용자의 프로파일을 학습하고 분석하며, 상기 사용자에 의해 입력된 시나리오에 따라 검색된 미디어 조각들 중 상기 사용자가 원하는 미디어 조각을 취사 선택하여 추천하는 단계; 및상기 추천된 복수의 미디어 조각을 이용하여 새로운 퍼스널 미디어를 창작하는 단계;를 포함하는 다중-모달리티 특징 융합을 통한 퍼스널 미디어 자동 재창작 방법
|
| 11 |
11
제10항에 있어서, 상기 분할하는 단계는,상기 퍼스널 미디어에서 음성, 소리, 텍스트, 동영상 이미지 중 적어도 하나의 모달리티를 분리하여 특징을 분석하는 것인 다중-모달리티 특징 융합을 통한 퍼스널 미디어 자동 재창작 방법
|
| 12 |
12
제11항에 있어서, 상기 분할하는 단계는,상기 분리된 모달리티와 기학습된 학습데이터의 모달리티 간의 연관관계를 기반으로 분할 가능한 객체 및 행위를 검출하여 물리적 단위의 상기 미디어 조각들로 분할하는 것인 다중-모달리티 특징 융합을 통한 퍼스널 미디어 자동 재창작 방법
|
| 13 |
13
제12항에 있어서, 상기 검색하는 단계는,상기 미디어 조각의 효율적인 관리를 위해, 상기 분할된 미디어 조각들의 시맨틱을 고려하여 메타데이터 인덱싱을 생성하여 의미 기반으로 저장하는 것인 다중-모달리티 특징 융합을 통한 퍼스널 미디어 자동 재창작 방법
|
| 14 |
14
제13항에 있어서, 상기 검색하는 단계는,상기 시나리오를 해석하여 검색을 위한 키워드를 추출하고 질의어를 생성하며, 상기 키워드, 상기 키워드와 관련된 연관 키워드 및 상기 키워드와 관련된 연관 미디어 중 적어도 하나를 활용하여 검색 범위를 확장시켜 지능적으로 상기 시나리오에 대한 미디어 조각을 검색하는 것인 다중-모달리티 특징 융합을 통한 퍼스널 미디어 자동 재창작 방법
|
| 15 |
15
제14항에 있어서, 상기 추천하는 단계는,기저장된 선호도 모델을 기반으로 상기 검색된 미디어 조각들 중 일부를 취사선택하는 것인 다중-모달리티 특징 융합을 통한 퍼스널 미디어 자동 재창작 방법
|
| 16 |
16
제15항에 있어서, 상기 창작하는 단계는,상기 시나리오를 해석하여 재생을 위한 순서를 만들고, 상기 취사 선택된 미디어 조각들을 배치하여 재생하는 것인 다중-모달리티 특징 융합을 통한 퍼스널 미디어 자동 재창작 방법
|
| 17 |
17
제16항에 있어서, 상기 창작하는 단계는,상기 취사 선택된 미디어 조각들의 포맷이 동일하지 않은 경우, 상기 취사 선택된 미디어 조각들의 포맷을 동일한 포맷으로 변환하는 것인 다중-모달리티 특징 융합을 통한 퍼스널 미디어 자동 재창작 방법
|
| 18 |
18
제17항에 있어서, 상기 창작하는 단계는,상기 사용자가 원하는 재생 시간 길이에 따라 상기 새로운 퍼스널 미디어의 재생 시간 길이를 조정하거나, 상기 취사 선택된 미디어 조각들의 경계면에서 발생 가능한 부자연스러움을 자연스럽고 끊김없는 재생을 위해 조정하는 최적화 동작을 수행하는 것인 다중-모달리티 특징 융합을 통한 퍼스널 미디어 자동 재창작 방법
|
