맞춤기술찾기

이전대상기술

얼굴 표정을 이용한 감정인식 장치, 감정인식 방법 및 그 기록매체

  • 기술번호 : KST2014057225
  • 담당센터 :
  • 전화번호 :
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 얼굴표정을 이용한 감정인식 장치 및 감정인식 방법에 관한 것으로서, 대상체의 얼굴표정 변화를 감지함으로써 대상체가 느끼는 9가지 감정을 구별할 수 있는 얼굴표정을 이용한 감정인식 장치 및 감정인식 방법에관한 것이다. 이를 위해 제시된 자극에 대응하여 반응하는 객체의 객체정보를 입력받아 객체의 얼굴을 인식하는 얼굴인식수단(100); 인식된 객체의 얼굴을 이용하여 객체의 얼굴요소를 추출하는 얼굴요소추출수단(200); 및 추출된 객체의 얼굴요소를 바탕으로 자극에 상응하여 변하는 객체의 얼굴표정 변화를 인식함으로써 객체가 표현하는 감정을 인식하는 감정인식수단(300);을 포함하는 것을 특징으로 하는 얼굴표정을 이용한 감정인식 장치가 개시된다.
Int. CL G06T 7/00 (2006.01)
CPC G06K 9/00275(2013.01) G06K 9/00275(2013.01)
출원번호/일자 1020110078319 (2011.08.05)
출원인 충남대학교산학협력단
등록번호/일자 10-1265466-0000 (2013.05.10)
공개번호/일자 10-2013-0015958 (2013.02.14) 문서열기
공고번호/일자 (20130516) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2011.08.05)
심사청구항수 8

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 충남대학교산학협력단 대한민국 대전광역시 유성구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 손진훈 대한민국 대전광역시 유성구
2 박혜준 대한민국 대전광역시 서구
3 오형석 대한민국 대전광역시 동구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 김문종 대한민국 서울특별시 강남구 삼성로**길*, *층(대치동 삼성빌딩)(특허법인 아이퍼스)
2 손은진 대한민국 서울특별시 강남구 삼성로**길*, *층(대치동 삼성빌딩)(특허법인 아이퍼스)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 주식회사 플랙스 경기도 수원시 장안구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2011.08.05 수리 (Accepted) 1-1-2011-0607730-09
2 의견제출통지서
Notification of reason for refusal
2012.07.27 발송처리완료 (Completion of Transmission) 9-5-2012-0437498-93
3 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2012.09.26 수리 (Accepted) 1-1-2012-0783815-09
4 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2012.09.26 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2012-0783816-44
5 거절결정서
Decision to Refuse a Patent
2013.02.25 발송처리완료 (Completion of Transmission) 9-5-2013-0130659-15
6 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2013.03.19 수리 (Accepted) 1-1-2013-0236810-20
7 [명세서등 보정]보정서(재심사)
Amendment to Description, etc(Reexamination)
2013.03.19 보정승인 (Acceptance of amendment) 1-1-2013-0236812-11
8 등록결정서
Decision to Grant Registration
2013.04.24 발송처리완료 (Completion of Transmission) 9-5-2013-0277652-54
9 출원인정보변경(경정)신고서
Notification of change of applicant's information
2013.12.26 수리 (Accepted) 4-1-2013-5174286-48
10 [출원서등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2014.06.12 수리 (Accepted) 1-1-2014-0550905-81
11 출원인정보변경(경정)신고서
Notification of change of applicant's information
2015.09.01 수리 (Accepted) 4-1-2015-5116889-90
12 출원인정보변경(경정)신고서
Notification of change of applicant's information
2015.09.01 수리 (Accepted) 4-1-2015-5116888-44
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
객체의 복수의 얼굴표정 변화 각각에 대응하여 소정 기준에 따라 분류된 복수의 감정을 미리 저장하는 저장수단;상기 객체가 제시된 자극에 대응하여 반응하는 객체정보를 입력 받아 상기 객체의 얼굴을 인식하는 얼굴인식수단(100);인식된 상기 객체의 얼굴을 이용하여 상기 객체의 얼굴요소를 추출하는 얼굴요소추출수단(200); 및상기 추출된 객체의 얼굴요소를 바탕으로 상기 자극에 상응하여 변하는 상기 객체의 제 1 얼굴표정 변화를 인식하고, 상기 복수의 얼굴표정 변화 중 상기 제 1 얼굴표정 변화와 가장 유사한 제 2 얼굴표정 변화를 결정하며, 상기 저장수단에 저장된 복수의 감정 중 상기 제 2 얼굴표정 변화에 대응하는 감정을 상기 객체가 표현하는 감정으로 인식하는 감정인식수단(300);을 포함하되,상기 복수의 감정은 기쁨, 놀람, 슬픔, 분노, 흥미, 지루함, 공포, 아픔 및 중립을 포함하고,상기 얼굴인식수단(100)은, 상기 객체정보를 입력받아 하르-라이크 특징을 이용한 아다부스트 학습 알고리즘을 통해 상기 객체의 얼굴을 인식하며,상기 아다부스트 학습 알고리즘은, 검정과 흰색 패턴으로 이루어진 상기 하르-라이크 특징을 토대로 추출된 특징점을 분류하고,상기 객체의 얼굴요소 추출은 이미지 기울기 또는 RGB 변환 필터를 이용하여 추출하며,추출되는 상기 객체의 얼굴요소는 눈, 눈썹, 미간, 및 입 중 적어도 어느 하나이고,상기 얼굴표정 변화는, 상기 눈, 눈썹, 미간, 및 입 중 적어도 어느 하나의 형상 변화, 상기 눈의 크기변화, 상기 눈과 상기 눈썹간의 간격변화, 상기 미간의 형상변화, 상기 입의 크기변화, 및 상기 입의 형상변화 중 적어도 어느 하나인 것을 특징으로 하는 얼굴표정을 이용한 감정인식 장치
2 2
제 1 항에 있어서,상기 객체정보는 상기 객체의 얼굴을 촬영한 동영상 데이터 또는 정지영상 데이터인 것을 특징으로 하는 얼굴표정을 이용한 감정인식 장치
3 3
삭제
4 4
삭제
5 5
삭제
6 6
삭제
7 7
삭제
8 8
제 1 항에 있어서,상기 눈의 크기변화는,상기 눈의 가로 및 세로 크기 변화인 것을 특징으로 하는 얼굴표정을 이용한 감정인식 장치
9 9
제 1 항에 있어서,상기 입의 크기변화는,상기 입의 가로 및 세로 크기 변화인 것을 특징으로 하는 얼굴표정을 이용한 감정인식 장치
10 10
삭제
11 11
삭제
12 12
제 1 항에 있어서,상기 객체가 표현하는 감정의 인식은 베이시언 분류기 또는 KNN 분류기를 이용하여 인식하는 것을 특징으로 하는 얼굴표정을 이용한 감정인식 장치
13 13
제 1 항에 있어서,상기 객체정보는,상기 감정을 인식하고자 하는 대상체의 동영상 데이터 또는 정지영상 데이터인 것을 특징으로 하는 얼굴표정을 이용한 감정인식 장치
14 14
저장수단이 객체의 복수의 얼굴표정 변화 각각에 대응하여 소정 기준에 따라 분류된 복수의 감정을 미리 저장하는 단계(S600);얼굴인식수단(100)이 상기 객체가 제시된 자극에 대응하여 반응하는 객체정보를 입력 받아 상기 객체의 얼굴을 인식하는 단계(S610);얼굴추출수단(200)이 인식된 상기 객체의 얼굴을 이용하여 상기 객체의 얼굴요소를 추출하는 단계(S620); 상기 추출된 객체의 얼굴요소를 바탕으로 상기 자극에 상응하여 변하는 상기 객체의 제 1 얼굴표정 변화를 인식하는 단계(S630);상기 복수의 얼굴표정 변화 중 상기 제 1 얼굴표정 변화와 가장 유사한 제 2 얼굴표정 변화를 결정하는 단계(S640); 및상기 저장수단에 저장된 복수의 감정 중 상기 제 2 얼굴표정 변화에 대응하는 감정을 상기 객체가 표현하는 감정으로 인식하는 단계(S650)를 포함하되,상기 복수의 감정은 기쁨, 놀람, 슬픔, 분노, 흥미, 지루함, 공포, 아픔 및 중립을 포함하고,상기 S610 단계는,상기 객체의 객체정보를 입력받는 단계;하르-라이크 특징점을 이용하여 입력된 상기 객체정보의 특징점을 추출하는 단계; 및아다부스트 학습 알고리즘에 의해 상기 객체정보의 특징점을 분류함으로써 상기 객체의 얼굴을 인식하는 단계;를 포함하며,상기 하르-라이크 특징점은, 검정과 흰색 패턴으로 이루어지고,상기 S620 단계는, 이미지 기울기 또는 RGB 변환 필터를 이용하여 상기 객체의 얼굴요소를 추출하며,상기 이미지 기울기는, 상기 객체의 눈 또는 눈썹을 추출하기 위해 이용되고,상기 RGB 변환 필터는, 상기 객체의 입을 추출하기 위해 이용되고,상기 얼굴표정 변화는, 상기 눈, 상기 눈썹, 미간 및 상기 입 중 적어도 어느 하나의 형상 변화, 상기 눈의 크기변화, 상기 눈과 상기 눈썹간의 간격변화, 상기 미간의 형상변화, 상기 입의 크기변화, 및 상기 입의 형상변화 중 적어도 어느 하나인 것을 특징으로 하는 얼굴표정을 이용한 감정인식 방법
15 15
삭제
16 16
삭제
17 17
삭제
18 18
삭제
19 19
삭제
20 20
삭제
21 21
삭제
22 22
얼굴표정을 이용한 감정인식 방법을 수행하기 위하여 디지털 처리 장치에 의해 실행될 수 있는 명령어들의 프로그램이 유형적으로 구현되어 있고, 상기 디지털 처리 장치에 의해 판독될 수 있는 기록매체에 있어서,상기 얼굴표정을 이용한 감정인식 방법은,저장수단이 객체의 복수의 얼굴표정 변화 각각에 대응하여 소정 기준에 따라 분류된 복수의 감정을 미리 저장하는 단계(S600);얼굴인식수단(100)이 상기 객체가 제시된 자극에 대응하여 반응하는 객체정보를 입력 받아 상기 객체의 얼굴을 인식하는 단계(S610);얼굴추출수단(200)이 인식된 상기 객체의 얼굴을 이용하여 상기 객체의 얼굴요소를 추출하는 단계(S620); 상기 추출된 객체의 얼굴요소를 바탕으로 상기 자극에 상응하여 변하는 상기 객체의 제 1 얼굴표정 변화를 인식하는 단계(S630);상기 복수의 얼굴표정 변화 중 상기 제 1 얼굴표정 변화와 가장 유사한 제 2 얼굴표정 변화를 결정하는 단계(S640); 및상기 저장수단에 저장된 복수의 감정 중 상기 제 2 얼굴표정 변화에 대응하는 감정을 상기 객체가 표현하는 감정으로 인식하는 단계(S650)를 포함하되,상기 복수의 감정은 기쁨, 놀람, 슬픔, 분노, 흥미, 지루함, 공포, 아픔 및 중립을 포함하고,상기 S610 단계는,상기 객체의 객체정보를 입력받는 단계;하르-라이크 특징점을 이용하여 입력된 상기 객체정보의 특징점을 추출하는 단계; 및아다부스트 학습 알고리즘에 의해 상기 객체정보의 특징점을 분류함으로써 상기 객체의 얼굴을 인식하는 단계;를 포함하며,상기 하르-라이크 특징점은, 검정과 흰색 패턴으로 이루어지고,상기 S620 단계는, 이미지 기울기 또는 RGB 변환 필터를 이용하여 상기 객체의 얼굴요소를 추출하며,상기 이미지 기울기는, 상기 객체의 눈 또는 눈썹을 추출하기 위해 이용되고,상기 RGB 변환 필터는, 상기 객체의 입을 추출하기 위해 이용되고,상기 얼굴표정 변화는, 상기 눈, 상기 눈썹, 미간 및 상기 입 중 적어도 어느 하나의 형상 변화, 상기 눈의 크기변화, 상기 눈과 상기 눈썹간의 간격변화, 상기 미간의 형상변화, 상기 입의 크기변화, 및 상기 입의 형상변화 중 적어도 어느 하나인 것을 특징으로 하는 기록매체
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 미래창조과학부(The Minstry of Education, Science and Technology) 정부 신기술융합형 성장동력 사업 인간-기계 인터페이스를 위한 인지-감정 통합모델 개발(integrated cognitive-affective model for human computer interface)