| 1 |
1
연동되는 안구추적장치로부터 임의의 정서가 표현된 얼굴 사진을 바라보는 사용자의 시선 고정점들을 수신하는 시선 고정점 수신부, 상기 시선 고정점 수신부에서 수신한 상기 시선 고정점들을 기계 학습하여 상기 시선 패턴과 시선 패턴 정보를 추출하는 시선 패턴 추출부, 상기 시선 패턴 추출부에서 추출한 상기 시선 패턴과 상기 시선 패턴 정보를 이용하여 히트맵(heatmap)을 도출하는 히트맵 도출부,상기 히트맵 도출부에서 도출된 상기 히트맵과 미리 저장된 동일한 정서가 표현된 얼굴 사진에 기초한 기준 집단의 히트맵과의 차이값을 도출하고, 상기 차이값이 반영된 디퍼런스 히트맵을 도출하는 디퍼런스 히트맵 도출부, 그리고상기 시선 패턴과 상기 디퍼런스 히트맵을 분석하여 상기 사용자의 시선 처리의 순서, 시간, 경로를 포함하는 훈련 템플릿을 생성하는 제어부를 포함하고, 상기 디퍼런스 히트맵 도출부는, 도출된 상기 차이값을 분석하여, 기준 집단의 시선 패턴보다 상기 사용자의 시선 패턴에서 시선이 집중되는 영역을 제1 색상으로 표시하고, 상기 사용자의 시선 패턴보다 상기 기준 집단의 시선 패턴에서 시선이 집중되는 영역을 상기 제1 색상과 보색을 이루는 제2 색상으로 표시하는 얼굴 표정 인식을 위한 훈련 템플릿 구축 장치
|
| 2 |
2
제1항에서, 상기 시선 패턴 추출부는, 상기 시선 고정점들로부터 상기 시선 패턴과 상기 얼굴 사진에서 표정 영역에 머무른 평균 시선 고정 시간, 시선 이동 경로를 포함하는 시선 패턴 정보를 추출하는 얼굴 표정 인식을 위한 훈련 템플릿 구축 장치
|
| 3 |
3
제1항에서,상기 히트맵 도출부는, 상기 시선 패턴과 시선 패턴 정보에 가중치를 적용하고, 가중치가 적용된 상기 시선 패턴을 통해 시선의 비중의 정도에 따라 상이한 색상의 분포를 상기 얼굴 사진에 표시하는 히트맵을 도출하는 얼굴 표정 인식을 위한 훈련 템플릿 구축 장치
|
| 4 |
4
삭제
|
| 5 |
5
제1항에서, 상기 제어부는, 상기 제2 색상으로 표시되는 영역에 상기 사용자의 시선이 일정 시간 이상으로 집중되도록 시선 고정 시간, 시선 이동 경로를 포함하는 훈련 템플릿을 생성하는 얼굴 표정 인식을 위한 훈련 템플릿 구축 장치
|
| 6 |
6
제1항에서, 상기 제어부는, 특정 정서를 나타내는 얼굴 사진의 입 주변 영역에 사용자의 시선 패턴이 지엽적으로 나타나면,상기 입 주변 영역을 시선 경로의 후반부에 배치하거나 상기 입 주변 영역을 빠르게 통과 또는 회피할 수 있도록 하는 시선 고정 시간, 시선 이동 경로를 설정하는 얼굴 표정 인식을 위한 훈련 템플릿 구축 장치
|
| 7 |
7
연동되는 안구추적장치로부터 임의의 정서가 표현된 얼굴 사진을 바라보는 사용자의 시선 고정점들을 수신하는 단계, 상기 시선 고정점들을 기계 학습하여 상기 시선 패턴과 시선 패턴 정보를 추출하는 단계, 상기 시선 패턴과 상기 시선 패턴 정보를 이용하여 히트맵(heatmap)을 도출하는 단계,상기 히트맵과 미리 저장된 동일한 정서가 표현된 얼굴 사진에 기초한 기준 집단의 히트맵과의 차이값을 도출하고, 상기 차이값이 반영된 디퍼런스 히트맵을 도출하는 단계, 그리고상기 시선 패턴과 상기 디퍼런스 히트맵을 분석하여 상기 사용자의 시선 처리의 순서, 시간, 경로를 포함하는 훈련 템플릿을 생성하는 단계를 포함하고,상기 디퍼런스 히트맵을 도출하는 단계는, 도출된 상기 차이값을 분석하여, 기준 집단의 시선 패턴보다 상기 사용자의 시선 패턴에서 시선이 집중되는 영역을 제1 색상으로 표시하고, 상기 사용자의 시선 패턴보다 상기 기준 집단의 시선 패턴에서 시선이 집중되는 영역을 상기 제1 색상과 보색을 이루는 제2 색상으로 표시하는 얼굴 표정 인식을 위한 훈련 템플릿 구축 장치의 방법
|
| 8 |
8
제7항에서, 상기 시선 패턴과 시선 패턴 정보를 추출하는 단계는, 상기 시선 고정점들로부터 상기 시선 패턴과 상기 얼굴 사진에서 표정 영역에 머무른 평균 시선 고정 시간, 시선 이동 경로를 포함하는 시선 패턴 정보를 추출하는 얼굴 표정 인식을 위한 훈련 템플릿 구축 장치의 방법
|
| 9 |
9
제7항에서,상기 히트맵을 도출하는 단계는, 상기 시선 패턴과 시선 패턴 정보에 가중치를 적용하고, 가중치가 적용된 상기 시선 패턴을 통해 시선의 비중의 정도에 따라 상이한 색상의 분포를 상기 얼굴 사진에 표시하는 히트맵을 도출하는 얼굴 표정 인식을 위한 훈련 템플릿 구축 장치의 방법
|
| 10 |
10
삭제
|
| 11 |
11
제7항에서, 상기 훈련 템플릿을 생성하는 단계는, 상기 제2 색상으로 표시되는 영역에 상기 사용자의 시선이 일정 시간 이상으로 집중되도록 시선 고정 시간, 시선 이동 경로를 포함하는 훈련 템플릿을 생성하는 얼굴 표정 인식을 위한 훈련 템플릿 구축 장치의 방법
|
| 12 |
12
제7항에서, 상기 훈련 템플릿을 생성하는 단계는, 특정 정서를 나타내는 얼굴 사진의 입 주변 영역에 사용자의 시선 패턴이 집중적으로 나타나면,상기 입 주변 영역을 시선 이동 경로의 후반부에 배치하거나 상기 입 주변 영역을 빠르게 통과 또는 회피할 수 있도록 하는 시선 고정 시간, 시선 이동 경로를 설정하는 얼굴 표정 인식을 위한 훈련 템플릿 구축 장치의 방법
|
| 13 |
13
훈련 템플릿 구축 장치를 통해 생성된 훈련 템플릿을 제공하는 방법이 구현된 프로그램이 저장된 판독 가능한 기록매체에 있어서,상기 프로그램은, 임의의 정서가 표현된 얼굴 사진을 제공하는 기능, 사용자로부터 상기 얼굴 사진의 정서를 나타내는 단어를 입력받는 기능, 입력받은 상기 단어와 상기 얼굴 사진의 정서가 일치하는지 판단하는 기능, 그리고판단 결과, 일치하지 않으면 상기 얼굴 사진의 특정 영역을 표시하여 n초간 응시하도록 지시하거나, 상기 얼굴 사진의 특정 영역에 기초하여 시선 이동 경로 지점들을 제공하고, 상기 시선 이동 경로 지점마다 m초간 응시하도록 지시하는 훈련 템플릿을 제공하는 기능 을 실현시키기 위한 것이며, 상기 훈련 템플릿은, 조현병 환자 집단의 시선 패턴과 상기 조현병 환자 집단의 히트맵과 기준 집단의 히트맵과의 차이값이 반영된 디퍼런스 히트맵에 기초하여 생성되며, 상기 특정 영역은 상기 조현병 환자 집단의 시선 패턴보다 상기 기준 집단의 시선 패턴에서 시선이 집중되는 영역을 나타내는 것이 특징인 컴퓨터로 판독 가능한 기록매체
|
| 14 |
14
삭제
|
| 15 |
15
제13항에 있어서, 상기 훈련 템플릿은, 상기 얼굴 사진이 화남, 공포, 혐오, 무표정의 정서를 나타내는 사진이면, 상기 얼굴 사진의 입 주변에 한정된 영역을 빠르게 통과하거나 시선 이동 경로 지점의 후반부에 배치되는 것이 특징인 컴퓨터로 판독 가능한 기록매체
|
