| 1 |
1
네트워크를 통해 사용자 단말기로 멀티미디어 검색 서비스를 제공하는 웹서버를 포함하는, 스케치를 이용한 멀티미디어 검색 시스템에 있어서,상기 사용자 단말기는,멀티터치 입력이 가능한 멀티터치부;상기 멀티터치부에 입력된 스케치로부터 스케치 특징벡터를 추출하는 스케치 특징벡터 추출부; 및상기 네트워크를 통해 상기 웹서버와 통신하며, 상기 스케치 특징벡터를 상기 웹서버로 전송하는 단말 통신부를 포함하며,상기 웹서버는,멀티미디어 정보가 저장되는 데이터베이스;상기 스케치 특징벡터를 기초로 상기 데이터베이스로부터 상기 스케치에 대응되는 매칭 멀티미디어를 검색하는 검색부; 및상기 네트워크를 통해 상기 사용자 단말기와 통신하며, 상기 매칭 멀티미디어 및 상기 매칭 멀티미이디어와 관련된 매칭 연관정보를 상기 사용자 단말기로 전송하는 웹 통신부를 포함하는, 스케치를 이용한 멀티미디어 검색 시스템
|
| 2 |
2
제 1항에 있어서,상기 멀티미디어 정보는, 이미지 정보, 3D 모델 정보, 비디오 정보, 오디오 정보, 악보 정보, 텍스트 정보 등을 포함하는, 스케치를 이용한 멀티미디어 검색 시스템
|
| 3 |
3
제 1항에 있어서,상기 스케치는, 상기 사용자 단말기의 사용자가 상기 멀티터치부로 입력하는 손으로 그린 모든 정보를 포함하는, 스케치를 이용한 멀티미디어 검색 시스템
|
| 4 |
4
제 1항에 있어서,상기 사용자 단말기는,상기 스케치로부터 문자, 도형, 기호, 심볼 중에서 적어도 하나의 정보를 인식하는, 스케치 인식부를 더 포함하는, 스케치를 이용한 멀티미디어 검색 시스템
|
| 5 |
5
제 1항에 있어서,상기 멀티터치부는, 멀티터치 스크린을 포함하며,상기 멀티터치로 입력되는 스케치를 상기 멀티터치 스크린에 디스플레이하는, 스케치를 이용한 멀티미디어 검색 시스템
|
| 6 |
6
제 5항에 있어서,상기 멀티터치부는, 상기 웹 통신부로부터 전송되는 상기 매칭 멀티미디어 및 상기 매칭 연관정보를 상기 멀티터치 스크린에 디스플레이하는, 스케치를 이용한 멀티미디어 검색 시스템
|
| 7 |
7
제 1항에 있어서,상기 스케치 특징벡터 추출부는, HOG(Histogram of Oriented Gradients) 알고리즘을 적용하여 상기 스케치 특징벡터를 추출하는, 스케치를 이용한 멀티미디어 검색 시스템
|
| 8 |
8
제 1항에 있어서,상기 검색부는, 상기 데이터베이스에 저장된 멀티미디어 정보로부터 멀티미디어 특징벡터를 추출하며, 상기 멀티미디어 특징벡터와 상기 스케치 특징벡터의 유사도(Similarity)를 비교하여 상기 스케치에 대응되는 상기 매칭 멀티미디어를 검색하는, 스케치를 이용한 멀티미디어 검색 시스템
|
| 9 |
9
제 2항에 있어서,상기 검색부는, 상기 멀티미디어 정보가 상기 3D 모델 정보인 경우에 복수의 방향으로부터 투사되는 복수의 암시윤곽(Suggestive Contour)을 추출하는 암시윤곽 추출모듈; 상기 복수의 암시윤곽에 HOG 알고리즘을 적용하여 상기 복수의 암시윤곽으로부터 각각의 암시윤곽 특징벡터를 추출하는 특징벡터 추출모듈;상기 스케치 특징벡터와 상기 각각의 암시윤곽 특징벡터 사이의 유사도를 측정하는 유사도 측정모듈; 및상기 유사도를 기초로 상기 매칭 멀티미디어를 검색하는 검색모듈을 포함하는, 스케치를 이용한 멀티미디어 검색 시스템
|
| 10 |
10
제 9항에 있어서,상기 검색부는, 상기 각각의 암시윤곽 특징벡터에 압축 센싱(Compressive Sensing) 알고리즘을 적용하여 상기 각각의 암시윤곽 특징벡터를 계층별로 분류하는 분류모듈을 더 포함하는, 스케치를 이용한 멀티미디어 검색 시스템
|
| 11 |
11
스케치를 이용한 멀티미디어 검색 시스템에 있어서,멀티터치 입력이 가능한 멀티터치 입력부;상기 멀티터치에 입력된 스케치로부터 스케치 특징벡터를 추출하는 특징벡터 추출부; 및상기 스케치 특징벡터를 기초로 상기 스케치에 대응되는 매칭 멀티미디어를 검색하는 검색부를 포함하는, 스케치를 이용한 멀티미디어 검색 시스템
|
| 12 |
12
제 11항에 있어서,멀티미디어 정보를 저장하는 저장부를 더 포함하는, 스케치를 이용한 멀티미디어 검색 시스템
|
| 13 |
13
멀티터치 입력이 가능한 사용자 단말기로 네트워크를 통해 멀티미디어 검색 서비스를 제공하는, 스케치를 이용한 멀티미디어 검색 방법에 있어서,사용자가 멀티터치로 스케치를 입력하는 단계;상기 스케치로부터 특징벡터를 추출하는 단계; 및상기 특징벡터를 기초로 상기 사용자가 입력한 상기 스케치와 대응하는 매칭 멀티미디어 정보를 검색하는 단계를 포함하는, 스케치를 이용한 멀티미디어 검색 방법
|
| 14 |
14
제 13항에 있어서,상기 멀티미디어 정보를 데이터베이스에 저장하는 단계를 더 포함하는, 스케치를 이용한 멀티미디어 검색 방법
|
| 15 |
15
제 14항에 있어서,상기 데이터베이스에 저장하는 단계는, 상기 멀티미디어 정보를 그룹화하여 이미지 정보 데이터베이스, 3D 모델 정보 데이터베이스, 비디오 정보 데이터베이스, 오디오 정보 데이터베이스, 악보 정보 데이터베이스, 텍스트 정보 데이터베이스에 각각 저장하는 단계를 더 포함하는, 스케치를 이용한 멀티미디어 검색 방법
|
| 16 |
16
제 13항에 있어서,상기 스케치를 입력하는 단계는, 상기 사용자의 손가락 또는 스타일러스 펜을 이용하여 입력하는, 스케치를 이용한 멀티미디어 검색 방법
|
| 17 |
17
제 13항에 있어서,상기 특징벡터를 추출하는 단계는, HOG(Histogram of Oriented Gradients) 알고리즘을 적용하여 상기 특징벡터를 추출하는, 스케치를 이용한 멀티미디어 검색 방법
|
| 18 |
18
제 13항에 있어서,상기 멀티미디어 정보를 검색하는 단계는,상기 데이터베이스에 저장된 멀티미디어 정보로부터 멀티미디어 특징벡터를 추출하는 단계;상기 멀티미디어 특징벡터와 상기 스케치 특징벡터의 유사도를 비교하여 상기 매칭 멀티미디어를 검색하는 단계를 더 포함하는, 스케치를 이용한 멀티미디어 검색 방법
|
| 19 |
19
제 13항에 있어서,상기 멀티미디어 정보를 검색하는 단계는,상기 멀티미디어 정보가 3D 모델 정보인 경우에 복수의 방향으로부터 투사되는 복수의 암시윤곽(Suggestive Contour)을 추출하는 단계; HOG 알고리즘을 적용하여 상기 복수의 암시윤곽으로부터 각각의 암시윤곽 특징벡터를 추출하는 단계;상기 스케치 특징벡터와 상기 각각의 암시윤곽 특징벡터 사이의 유사도를 측정하는 단계; 및상기 유사도를 기초로 상기 매칭 멀티미디어를 검색하는 단계를 더 포함하는, 스케치를 이용한 멀티미디어 검색 방법
|
| 20 |
20
제 19항에 있어서,상기 각각의 암시윤곽 특징벡터에 압축 센싱 알고리즘을 적용하여 상기 각각의 암시윤곽 특징벡터를 계층별로 분류하는 단계를 더 포함하는, 스케치를 이용한 멀티미디어 검색 방법
|
| 21 |
21
제 13항에 있어서,상기 매칭 멀티미디어 정보 및 상기 매칭 멀티미디어와 관련된 매칭 연관정보를 상기 네트워크를 통해 상기 사용자 단말기로 전송하여 사용자에게 제공하는 단계를 더 포함하는, 스케치를 이용한 멀티미디어 검색 방법
|
| 22 |
22
제 21항에 있어서,상기 사용자 단말기로 전송된 상기 매칭 멀티미디어 정보 및 상기 매칭 연관정보를 저장하는 단계를 더 포함하는, 스케치를 이용한 멀티미디어 검색 방법
|
