| 1 |
1
피험자의 안면 영상을 촬영하는 단계;상기 피험자의 심장 정보를 추출하는 단계;상기 안면 영상에서 얼굴 영역에 정의된 하나 이상의 AU(Action Unit)의 미세움직임(Micro-movement) 데이터를 추출하는 단계;상기 심장 정보로부터 얻어지는 심장 박동 특성 신호에 동기 하여 상기 미세 움직임 데이터로부터 HEMM(Heart-Evoked Micro-Movemnt) 데이터를 추출하는 단계;상기 HEMM 으로 부터 AU의 움직임에 대한 특성 파라미터를 하나 또는 그 이상 추출하는 단계; 그리고상기 특성 파라미터를 이용해 상기 피험자의 감성을 평가하는 단계:를 포함하는 심장-안면 움직임 동기화 기반 감성 인식 방법
|
| 2 |
2
제1항에 있어서,상기 심장 박동 특성 신호는 PPG 또는 ECG 정보로부터 획득하는 심장-안면 움직임 동기화 기반 감성 인식 방법
|
| 3 |
3
제1항에 있어서,상기 HEMM 데이터를 심장 박동 신호에서의 피이크 파워 발생 기점으로부터 소정 시간 (t) 동안 추출하는, 심장 안면 움직임 동기화 기반 감성 인식 방법
|
| 4 |
4
제3항에 있어서,상기 소정 시간(t)는 0
|
| 5 |
5
제1항 내지 제4항 중의 어느 한 항에 있어서,상기 HEMM으로부터 Mean, SD(Standard Deviation), PPP(Positive Power Peak), PPT(Positive Peak Time), NPP(Negative Peak Power), NPT(Negative Peak Time) 중의 적어도 어느 하나를 상기 특성 파라미터로 계산하는, 심장-안면 움직임 동기화 기반 감성 인식 방법
|
| 6 |
6
제5항에 있어서,상기 AU는 AU1(Inner Brow Raise), AU2(Outer Brow Raise), AU5(Upper Lid Raise), AU6(Cheek Raise), AU7(Lids Tight), AU9(Nose Wrinkle), AU12(Lip Corner Puller), AU15(Lip Coner Depressor), AU16(Lower Lip Depress), AU20(Lip Stretch), AU23(Lip Funneler), AU26(Jaw Drop) 중의 적어도 어느 하나를 포함하는, 심장-안면 움직임 동기화 기반 감성 인식 방법
|
| 7 |
7
제1항 내지 제4항 중의 어느 한 항에 있어서,상기 AU는 AU1(Inner Brow Raise), AU2(Outer Brow Raise), AU5(Upper Lid Raise), AU6(Cheek Raise), AU7(Lids Tight), AU9(Nose Wrinkle), AU12(Lip Corner Puller), AU15(Lip Coner Depressor), AU16(Lower Lip Depress), AU20(Lip Stretch), AU23(Lip Funneler), AU26(Jaw Drop) 중의 적어도 어느 하나를 포함하는, 심장-안면 움직임 동기화 기반 감성 인식 방법
|
| 8 |
8
제1항 내지 제4항 중의 어느 한 항에 있어서,상기 특성 파라미터를 이용하여 AU는 6가지 기본 감성인 행복(Happiness, HA), 슬픔(Sadness, SA), 놀람(Surprise, SU), 분노(Anger, AN), 증오(Disgust, DI), 그리고 두려움(Fear, FE) 중의 적어도 어느 하나를 평가하는, 심장-안면 움직임 동기화 기반 감성 인식 방법
|
| 9 |
9
제5항에 있어서,상기 특성 파라미터를 이용하여 AU는 6가지 기본 감성인 행복(Happiness, HA), 슬픔(Sadness, SA), 놀람(Surprise, SU), 분노(Anger, AN), 증오(Disgust, DI), 그리고 두려움(Fear, FE) 중의 적어도 어느 하나를 평가하는, 심장-안면 움직임 동기화 기반 감성 인식 방법
|
| 10 |
10
제6항에 있어서,상기 특성 파라미터를 이용하여 AU는 6가지 기본 감성인 행복(Happiness, HA), 슬픔(Sadness, SA), 놀람(Surprise, SU), 분노(Anger, AN), 증오(Disgust, DI), 그리고 두려움(Fear, FE) 중의 적어도 어느 하나를 평가하는, 심장-안면 움직임 동기화 기반 감성 인식 방법
|
| 11 |
11
피험자의 안면을 촬영하는 안면 영상 카메라;상기 피험자의 심장 정보로 추출하는 심장 정보 추출 장치;상기 안면 영상 카메라로부터의 영상을 처리하여 피험자의 안면에 정의된 AU의 미세 움직임 데이터를 추출하되, 상기 피험자의 심장 정보의 기초하여 상기 AU의 미세 움직임(HEMM) 데이터를 추출하고, 그리고, 상기 미세 움직임 데이터로부터 AU의 움직임에 대한 특성 파라미터를 추출하는 프로세서; 그리고상기 특성 파라미터를 이용해 상기 피험자의 얼굴에 나타난 감정을 평사하는 판단부;를 포함하는 심장-안면 움직임 동기화 기반 감성 인식 시스템
|
| 12 |
12
제11항에 있어서,상기 프로세서는 상기 HEMM 데이터를 심장 박동 신호에서의 피이크 파워 발생 기점으로부터 소정 시간 (t) 동안 추출하는, 심장 안면 움직임 동기화 기반 감성 인식 시스템
|
| 13 |
13
제11항 또는 제12항에 있어서,상기 프로세서는, 상기 HEMM으로부터 Mean, SD(Standard Deviation), PPP(Positive Power Peak), PPT(Positive Peak Time), NPP(Negative Peak Power), NPT(Negative Peak Time) 중의 적어도 어느 하나를 상기 특성 파라미터로 계산하는, 심장-안면 움직임 동기화 기반 감성 인식 시스템
|
| 14 |
14
제13항에 있어서,상기 AU는 AU1(Inner Brow Raise), AU2(Outer Brow Raise), AU5(Upper Lid Raise), AU6(Cheek Raise), AU7(Lids Tight), AU9(Nose Wrinkle), AU12(Lip Corner Puller), AU15(Lip Coner Depressor), AU16(Lower Lip Depress), AU20(Lip Stretch), AU23(Lip Funneler), AU26(Jaw Drop) 중의 적어도 어느 하나를 포함하는, 심장-안면 움직임 동기화 기반 감성 인식 시스템
|
| 15 |
15
제14항에 있어서,상기 특성 파라미터를 이용하여 AU는 6가지 기본 감성인 행복(Happiness, HA), 슬픔(Sadness, SA), 놀람(Surprise, SU), 분노(Anger, AN), 증오(Disgust, DI), 그리고 두려움(Fear, FE) 중의 적어도 어느 하나를 평가하는, 심장-안면 움직임 동기화 기반 감성 인식 시스템
|
