1 |
1
기 설정된 기준에 따라 분류된 복수의 감정 각각에 대응하는 제 1 객체에 대한 제 1 영상을 획득하기 위한 카메라;상기 제 1 영상 중 복수의 제 1 프레임을 사용자로부터 지정 받기 위한 사용자 입력부;상기 제 1 프레임에 포함된 상기 제 1 객체의 얼굴을 인식하고, 상기 인식된 얼굴을 이용하여 상기 제 1 객체의 얼굴요소를 추출하며, 상기 얼굴요소를 이용하여 상기 복수의 감정 각각에 대한 변화 패턴을 추출하는 제어부; 및상기 추출된 복수의 감정 각각에 대한 변화 패턴을 저장하는 메모리를 포함하되,상기 카메라를 통해 상기 제 1 객체에 대한 제 2 영상이 획득되는 경우, 상기 제어부는, 상기 제 2 영상에 포함된 제 1 객체의 얼굴요소의 제 1 변화 패턴을 추출하고, 상기 메모리에 저장된 복수의 변화 패턴 중 상기 제 1 변화 패턴과 동일한 변화 패턴 또는 상기 제 1 변화 패턴과 가장 유사한 변화 패턴에 대응하는 감정이 상기 제 1 객체의 감정으로 판단되도록 제어하고,ASM(Active Shape Model) 알고리즘을 이용하여 상기 제 1 객체의 얼굴요소를 추출하며,상기 제 1 영상 및 제 2 영상에 포함된 제 1 객체의 얼굴을 이용하여 복수의 X 좌표 및 Y 좌표 특징점을 추출하고, 상기 추출된 복수의 X 좌표 및 Y 좌표 특징점을 이용하여 상기 제 1 객체의 얼굴요소를 추출하고,은닉 마르코프 모델(Hidden Markov Model, HMM)을 이용하여, 상기 복수의 감정 각각에 대한 변화 패턴을 추출하는 것을 특징으로 하는, 얼굴표정을 이용한 감정인식장치
|
2 |
2
삭제
|
3 |
3
제 1항에 있어서,상기 기 설정된 기준에 따라 분류된 복수의 감정은 기쁨, 놀람, 슬픔, 분노, 공포 및 혐오 중 적어도 하나를 포함하는, 얼굴표정을 이용한 감정인식장치
|
4 |
4
제 1항에 있어서,상기 제 1 영상 및 제 2 영상은 상기 제 1 객체의 얼굴을 촬영한 동영상 데이터 또는 정지영상 데이터인 것을 특징으로 하는, 얼굴표정을 이용한 감정인식장치
|
5 |
5
제 1항에 있어서,상기 제 1 객체의 얼굴요소는 눈, 눈썹, 미간 및 입 중 적어도 어느 하나를 포함하는, 얼굴표정을 이용한 감정인식장치
|
6 |
6
삭제
|
7 |
7
삭제
|
8 |
8
제 1항에 있어서,상기 제 1 영상은 상기 사용자 입력부를 통해 9개의 구간으로 나누어지고,상기 복수의 제 1 프레임은 상기 9개의 구간 각각의 시작 프레임과 상기 9개의 구간 중 마지막 구간의 종료 프레임을 포함하는 10개의 프레임인 것을 특징으로 하는, 얼굴표정을 이용한 감정인식장치
|
9 |
9
삭제
|
10 |
10
기 설정된 기준에 따라 분류된 복수의 감정 각각에 대응하는 제 1 객체에 대한 제 1 영상을 획득하는 단계;상기 제 1 영상 중 복수의 제 1 프레임을 지정 받는 단계;상기 제 1 프레임에 포함된 상기 제 1 객체의 얼굴을 인식하는 단계;상기 인식된 얼굴을 이용하여 상기 제 1 객체의 얼굴요소를 추출하는 단계;상기 추출된 얼굴요소를 이용하여 상기 복수의 감정 각각에 대한 변화 패턴을 추출하는 단계;상기 추출된 복수의 감정 각각에 대한 변화 패턴을 저장하는 단계;상기 제 1 객체에 대한 제 2 영상이 획득하는 단계;상기 제 2 영상에 포함된 제 1 객체의 얼굴요소의 제 1 변화 패턴을 추출하는 단계; 및상기 저장된 복수의 변화 패턴 중 상기 제 1 변화 패턴과 동일한 변화 패턴 또는 상기 제 1 변화 패턴과 가장 유사한 변화 패턴에 대응하는 감정을 상기 제 1 객체의 감정으로 판단하는 단계를 포함하되,상기 제 1 객체의 얼굴요소는 ASM(Active Shape Model) 알고리즘을 이용하여 추출되고,상기 제 1 객체의 얼굴요소를 추출하는 단계는,상기 제 1 영상 및 제 2 영상에 포함된 제 1 객체의 얼굴을 이용하여 복수의 X 좌표 및 Y 좌표 특징점을 추출하는 단계; 및상기 추출된 복수의 X 좌표 및 Y 좌표 특징점을 이용하여 상기 제 1 객체의 얼굴요소를 추출하는 단계를 포함하며,은닉 마르코프 모델(Hidden Markov Model, HMM)을 이용하여, 상기 복수의 감정 각각에 대한 변화 패턴을 추출하는 것을 특징으로 하는, 얼굴표정을 이용한 감정인식방법
|
11 |
11
삭제
|
12 |
12
제 10항에 있어서,상기 기 설정된 기준에 따라 분류된 복수의 감정은 기쁨, 놀람, 슬픔, 분노, 공포 및 혐오 중 적어도 하나를 포함하는, 얼굴표정을 이용한 감정인식방법
|
13 |
13
제 10항에 있어서,상기 제 1 영상 및 제 2 영상은 상기 제 1 객체의 얼굴을 촬영한 동영상 데이터 또는 정지영상 데이터인 것을 특징으로 하는, 얼굴표정을 이용한 감정인식방법
|
14 |
14
제 10항에 있어서,상기 제 1 객체의 얼굴요소는 눈, 눈썹, 미간 및 입 중 적어도 어느 하나를 포함하는, 얼굴표정을 이용한 감정인식방법
|
15 |
15
삭제
|
16 |
16
삭제
|
17 |
17
제 10항에 있어서,상기 제 1 영상 중 복수의 제 1 프레임을 지정 받는 단계는,상기 제 1 영상이 9개의 구간으로 나누어지는 단계; 및상기 9개의 구간 각각의 시작 프레임과 상기 9개의 구간 중 마지막 구간의 종료 프레임을 포함하는 10개의 프레임이 상기 복수의 제 1 프레임으로 지정되는 단계를 포함하는 것을 특징으로 하는, 얼굴표정을 이용한 감정인식방법
|
18 |
18
삭제
|
19 |
19
얼굴표정을 이용하여 감정을 인식하는 방법을 수행하기 위하여 디지털 처리 장치에 의해 실행될 수 있는 명령어들의 프로그램이 유형적으로 구현되어 있고, 상기 디지털 처리 장치에 의해 판독될 수 있는 기록매체에 있어서,상기 얼굴표정을 이용하여 감정을 인식하는 방법은,기 설정된 기준에 따라 분류된 복수의 감정 각각에 대응하는 제 1 객체에 대한 제 1 영상을 획득하는 단계;상기 제 1 영상 중 복수의 제 1 프레임을 지정 받는 단계;상기 제 1 프레임에 포함된 상기 제 1 객체의 얼굴을 인식하는 단계;상기 인식된 얼굴을 이용하여 상기 제 1 객체의 얼굴요소를 추출하는 단계;상기 추출된 얼굴요소를 이용하여 상기 복수의 감정 각각에 대한 변화 패턴을 추출하는 단계;상기 추출된 복수의 감정 각각에 대한 변화 패턴을 저장하는 단계;상기 제 1 객체에 대한 제 2 영상이 획득하는 단계;상기 제 2 영상에 포함된 제 1 객체의 얼굴요소의 제 1 변화 패턴을 추출하는 단계; 및상기 저장된 복수의 변화 패턴 중 상기 제 1 변화 패턴과 동일한 변화 패턴 또는 상기 제 1 변화 패턴과 가장 유사한 변화 패턴에 대응하는 감정을 상기 제 1 객체의 감정으로 판단하는 단계를 포함하되,상기 제 1 객체의 얼굴요소는 ASM(Active Shape Model) 알고리즘을 이용하여 추출되고,상기 제 1 객체의 얼굴요소를 추출하는 단계는,상기 제 1 영상 및 제 2 영상에 포함된 제 1 객체의 얼굴을 이용하여 복수의 X 좌표 및 Y 좌표 특징점을 추출하는 단계; 및상기 추출된 복수의 X 좌표 및 Y 좌표 특징점을 이용하여 상기 제 1 객체의 얼굴요소를 추출하는 단계를 포함하며,은닉 마르코프 모델(Hidden Markov Model, HMM)을 이용하여, 상기 복수의 감정 각각에 대한 변화 패턴을 추출하는 것을 특징으로 하는, 기록매체
|
20 |
20
삭제
|
21 |
21
제 19항에 있어서,상기 기 설정된 기준에 따라 분류된 복수의 감정은 기쁨, 놀람, 슬픔, 분노, 공포 및 혐오 중 적어도 하나를 포함하는, 기록매체
|
22 |
22
제 19항에 있어서,상기 제 1 영상 및 제 2 영상은 상기 제 1 객체의 얼굴을 촬영한 동영상 데이터 또는 정지영상 데이터인 것을 특징으로 하는, 기록매체
|
23 |
23
제 19항에 있어서,상기 제 1 객체의 얼굴요소는 눈, 눈썹, 미간 및 입 중 적어도 어느 하나를 포함하는, 기록매체
|
24 |
24
삭제
|
25 |
25
삭제
|
26 |
26
제 19항에 있어서,상기 제 1 영상 중 복수의 제 1 프레임을 지정 받는 단계는,상기 제 1 영상이 9개의 구간으로 나누어지는 단계; 및상기 9개의 구간 각각의 시작 프레임과 상기 9개의 구간 중 마지막 구간의 종료 프레임을 포함하는 10개의 프레임이 상기 복수의 제 1 프레임으로 지정되는 단계를 포함하는, 기록매체
|
27 |
27
삭제
|