| 1 |
1
멀티미디어 콘텐츠에 기반한 후각 정보를 인식하는 장치에 있어서,프로세서;를 포함하고,상기 프로세서는,상기 멀티미디어 콘텐츠를 수신하고,상기 멀티미디어 콘텐츠가 포함하는 적어도 하나의 제1 객체 및 상기 적어도 하나의 제1 객체에 대한 제1 라벨 정보를 검출하고,상기 적어도 하나의 제1 객체의 상기 멀티미디어 콘텐츠 내에서 상대적인 위치 정보를 포함하는 제2 라벨 정보를 추출하고, 상기 검출된 적어도 하나의 제1 객체가 냄새와 관련된 냄새 객체(odor object)인지 여부를 식별한 결과를 제3 라벨 정보로서 생성하고,상기 적어도 하나의 제1 객체에 대한 상기 제1 라벨 정보를 약한 지도 학습 과정(weakly supervised learning process)에 적용하여 상기 멀티미디어 콘텐츠에 대한 기계 학습을 수행하고,상기 기계 학습의 결과로서 상기 멀티미디어 콘텐츠에 대한 상기 제1 라벨 정보, 상기 제2 라벨 정보, 및 상기 제3 라벨 정보를 포함하는 데이터의 집합체인 모델을 형성하는, 후각 정보 인식 장치
|
| 2 |
2
제1항에 있어서,상기 프로세서는,상기 적어도 하나의 제1 객체 중 상기 멀티미디어 콘텐츠에 대하여 상기 냄새 객체로 식별된 제2 객체가 상기 멀티미디어 콘텐츠의 지배적인 냄새 객체인지 여부를 판정한 결과를 제4 라벨 정보로서 생성하는 후각 정보 인식 장치
|
| 3 |
3
제2항에 있어서,상기 프로세서는,상기 적어도 하나의 제1 객체 중 상기 멀티미디어 콘텐츠에 대하여 상기 냄새 객체로 식별된 상기 제2 객체가 상기 멀티미디어 콘텐츠 내에서 점유하는 비율, 및 상기 멀티미디어 콘텐츠 내에서 점유하는 상대적인 위치에 기반하여 상기 멀티미디어 콘텐츠의 상기 지배적인 냄새 객체인 지 여부를 판정하는 후각 정보 인식 장치
|
| 4 |
4
제1항에 있어서,상기 프로세서는,상기 적어도 하나의 제1 객체에 대한 상기 제1 라벨 정보를 약한 지도 학습 과정(weakly supervised learning process)에 적용하여 상기 멀티미디어 콘텐츠에 대한 기계 학습을 수행하고,상기 제1 라벨 정보를 상기 약한 지도 학습 과정에 적용한 상기 기계 학습의 결과로서 얻어지는 파라미터에 기반하여 상기 적어도 하나의 제1 객체에 대한 상기 제2 라벨 정보를 추출하는 후각 정보 인식 장치
|
| 5 |
5
제4항에 있어서,상기 프로세서는,상기 제1 라벨 정보를 상기 약한 지도 학습 과정에 적용한 상기 기계 학습이 수행되는 동안, 컨볼루션 신경 네트워크(CNN)의 컨볼루션 필터의 특징 가중치(feature weight)의 분포에 기반하여 상기 적어도 하나의 제1 객체에 대한 상기 제2 라벨 정보를 추출하는 후각 정보 인식 장치
|
| 6 |
6
삭제
|
| 7 |
7
프로세서를 포함하는 사물 디바이스에 의하여 실행되는, 멀티미디어 콘텐츠에 기반한 후각 정보를 인식하는 후각 정보 인식 방법에 있어서,상기 프로세서에 의하여, 멀티미디어 콘텐츠를 수신하는 단계;상기 프로세서에 의하여, 상기 멀티미디어 콘텐츠가 포함하는 적어도 하나의 제1 객체 및 상기 적어도 하나의 제1 객체에 대한 제1 라벨 정보를 검출하는 단계;상기 프로세서에 의하여, 상기 적어도 하나의 제1 객체의 상기 멀티미디어 콘텐츠 내에서 상대적인 위치 정보를 포함하는 제2 라벨 정보를 추출하는 단계;상기 프로세서에 의하여, 상기 검출된 상기 적어도 하나의 제1 객체가 냄새와 관련된 냄새 객체(odor object)인지 여부를 식별한 결과를 제3 라벨 정보로서 생성하는 단계; 및상기 프로세서에 의하여, 상기 적어도 하나의 제1 객체에 대한 상기 제1 라벨 정보를 약한 지도 학습 과정(weakly supervised learning process)에 적용하여 상기 멀티미디어 콘텐츠에 대한 기계 학습을 수행한 결과로서 상기 멀티미디어 콘텐츠에 대한 상기 제1 라벨 정보, 상기 제2 라벨 정보, 및 상기 제3 라벨 정보를 포함하는 데이터의 집합체인 모델을 형성하는 단계를 포함하는, 후각 정보 인식 방법
|
| 8 |
8
제7항에 있어서,상기 프로세서에 의하여, 상기 적어도 하나의 제1 객체 중 상기 멀티미디어 콘텐츠에 대하여 상기 냄새 객체로 식별된 제2 객체가 상기 멀티미디어 콘텐츠의 지배적인 냄새 객체인지 여부를 판정한 결과를 제4 라벨 정보로서 생성하는 단계; 를 더 포함하는 후각 정보 인식 방법
|
| 9 |
9
제8항에 있어서,상기 제2 객체가 상기 멀티미디어 콘텐츠의 지배적인 냄새 객체인지 여부를 판정한 결과를 제4 라벨 정보로서 생성하는 단계는,상기 제2 객체가 상기 멀티미디어 콘텐츠 내에서 점유하는 비율, 및 상기 멀티미디어 콘텐츠 내에서 점유하는 상대적인 위치에 기반하여 상기 멀티미디어 콘텐츠의 상기 지배적인 냄새 객체인 지 여부를 판정한 결과를 상기 제4 라벨 정보로서 생성하는 후각 정보 인식 방법
|
| 10 |
10
삭제
|
| 11 |
11
삭제
|
| 12 |
12
삭제
|
| 13 |
13
삭제
|
| 14 |
14
삭제
|
| 15 |
15
삭제
|
| 16 |
16
삭제
|
| 17 |
17
삭제
|
| 18 |
18
삭제
|
