요약 | 본 발명은 기본 감성 표정 인식을 위해, 얼굴 미동의 내적 동기화 차이를 검출한다. 본 발명에서는 두 AU(Action Unit) 중심점 미동의 동기화, 즉 AU 페어의 내적 동기화는 기본 감성 별로 차이를 나타낸다. 예를 들어 오른쪽 이마근-왼쪽 큰 광대근 페어에서 행복한 표정을 짓는 경우 부정 감성 표정을 지을 때 보다 내적 동기화 발생 확률이 더 높았다. 본 발명은 AU 페어의 내적 동기화를 이용해, 기본 감성을 인식 또는 판별할 수 있는 새로운 방법을 제시한다. |
---|---|
Int. CL | G06K 9/00 (2006.01.01) |
CPC | G06K 9/00315(2013.01) G06K 9/00315(2013.01) |
출원번호/일자 | 1020160104985 (2016.08.18) |
출원인 | 상명대학교산학협력단 |
등록번호/일자 | 10-1736403-0000 (2017.05.10) |
공개번호/일자 | |
공고번호/일자 | (20170516) 문서열기 |
국제출원번호/일자 | |
국제공개번호/일자 | |
우선권정보 | |
법적상태 | 등록 |
심사진행상태 | 보정승인간주 |
심판사항 | |
구분 | 신규 |
원출원번호/일자 | |
관련 출원번호 | 1020170017639;1020170017640;1020170017641; |
심사청구여부/일자 | Y (2016.08.18) |
심사청구항수 | 6 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 상명대학교산학협력단 | 대한민국 | 서울특별시 종로구 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 박민지 | 대한민국 | 서울특별시 종로구 |
2 | 이정년 | 대한민국 | 인천광역시 남구 |
3 | 이현우 | 대한민국 | 경기도 시흥시 배곧*로 **-*, |
4 | 황민철 | 대한민국 | 경기도 고양시 일산동구 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 리앤목특허법인 | 대한민국 | 서울 강남구 언주로 **길 **, *층, **층, **층, **층(도곡동, 대림아크로텔) |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 상명대학교산학협력단 | 서울특별시 종로구 |
번호 | 서류명 | 접수/발송일자 | 처리상태 | 접수/발송번호 |
---|---|---|---|---|
1 | [특허출원]특허출원서 [Patent Application] Patent Application |
2016.08.18 | 수리 (Accepted) | 1-1-2016-0803108-45 |
2 | 의견제출통지서 Notification of reason for refusal |
2016.12.12 | 발송처리완료 (Completion of Transmission) | 9-5-2016-0895534-18 |
3 | [분할출원]특허출원서 [Divisional Application] Patent Application |
2017.02.08 | 수리 (Accepted) | 1-1-2017-0132811-19 |
4 | [분할출원]특허출원서 [Divisional Application] Patent Application |
2017.02.08 | 수리 (Accepted) | 1-1-2017-0132808-71 |
5 | [명세서등 보정]보정서 [Amendment to Description, etc.] Amendment |
2017.02.08 | 보정승인간주 (Regarded as an acceptance of amendment) | 1-1-2017-0133060-05 |
6 | [거절이유 등 통지에 따른 의견]의견(답변, 소명)서 [Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation) |
2017.02.08 | 수리 (Accepted) | 1-1-2017-0133058-13 |
7 | [분할출원]특허출원서 [Divisional Application] Patent Application |
2017.02.08 | 수리 (Accepted) | 1-1-2017-0132809-16 |
8 | 출원인정보변경(경정)신고서 Notification of change of applicant's information |
2017.04.03 | 수리 (Accepted) | 4-1-2017-5051189-60 |
9 | 등록결정서 Decision to grant |
2017.04.21 | 발송처리완료 (Completion of Transmission) | 9-5-2017-0287043-97 |
번호 | 청구항 |
---|---|
1 |
1 안면 부위 별로 다수 맵핑되어 있는 AU(Action Unit) 중에서, 각각의 특정 지점의 미동에서 상호 동기(내적 동기화)가 나타나는 적어도 2개의 AU에 의한 기준 AU 페어를 기본 감성에 대응하게 정의하는 단계;피험자로부터의 안면 동영상을 획득하는 단계;상기 안면 동영상에서, 상기 기준 AU 페어에 대응하는 적어도 2개의 AU(Action Unit)를 비교 AU 페어로 선택하는 단계;상기 비교 AU 페어의 두 AU의 미동 데이터를 구하고, 각 미동 데이터의 표준 편차를 기준 편차에 비교하여 비교 AU 페어의 두 AU 상호 간의 내적 동기화 발생 여부를 판단하는 단계; 그리고상기 AU 페어에 대해 정의되어 있는 상기 기본 감성을 피험자의 얼굴에 나타난 감성으로 판단하는 단계;를 포함하는 얼굴 미동의 내적 동기화를 이용한 기본 감성 표정 인식 방법 |
2 |
2 제1항에 있어서,상기 두 AU의 미동에 대한 시계열 평균 데이터 Z의 표준 편차를 기준 편차로 하고, 상기 기준 편차가 공기 상기 AU 미동이 표준편차 보다 작을 때 상기 두 AU간에 내적 동기화가 존재하는 것을 판단하는 것을 특징으로 하는 얼굴 미동의 내적 동기화를 이용한 기본 감성 표정 인식 방법 |
3 |
3 제1항에 있어서,상기 AU의 미동 데이터는 영상 프레임 단위로 해당AU 좌표의 움직임 값으로부터 추출하는 것을 특징으로 하는 얼굴 미동의 내적 동기화를 이용한 기본 감성 표정 인식 방법 |
4 |
4 제1항 내지 제3항 중의 어느 한 항에 있어서,상기 내적 동기화 판단은 내적 동기화 확률에 의해 판단하고,내적 동기화 확률은 아래의 식에 의해 계산하는 것을 특징으로 하는 얼굴 미동의 내적 동기화를 이용한 기본 감성 표정 인식 방법 |
5 |
5 제4항에 있어서,상기 AU 페어는 오른쪽 이마근-왼쪽 큰 광대근 페어인 AU 2(R)-AU 12(L) 페어와 오른쪽 윗눈꺼풀근-윗입술 코방울 올림근 페어인 AU 5(R)-AU 9(L) 페어 중의 어느 하나인 것을 특징으로 하는 얼굴 미동의 내적 동기화를 이용한 기본 감성 표정 인식 방법 |
6 |
6 제1항 내지 제3항 중의 어느 한 항에 있어서,상기 AU 페어는 오른쪽 이마근-왼쪽 큰 광대근 페어인 AU 2(R)-AU 12(L) 페어와 오른쪽 윗눈꺼플근-윗입술코방울올림근 페어인 AU 5(R)-AU 9(L) 페어 중의 어느 하나인 것을 특징으로 하는 얼굴 미동의 내적 동기화를 이용한 기본 감성 표정 인식 방법 |
지정국 정보가 없습니다 |
---|
순번 | 패밀리번호 | 국가코드 | 국가명 | 종류 |
---|---|---|---|---|
1 | KR101788851 | KR | 대한민국 | FAMILY |
2 | KR101795723 | KR | 대한민국 | FAMILY |
3 | KR101795724 | KR | 대한민국 | FAMILY |
순번 | 패밀리번호 | 국가코드 | 국가명 | 종류 |
---|---|---|---|---|
DOCDB 패밀리 정보가 없습니다 |
순번 | 연구부처 | 주관기관 | 연구사업 | 연구과제 |
---|---|---|---|---|
1 | 미래창조과학부 | 광운대학교 산학협력단 | 기초연구사업-선도연구센터지원사업-이공학분야 | 홀로-디지로그 휴먼미디어 연구센터 |
2 | 미래창조과학부 | 상명대학교 서울산학협력단 | 융·복합 콘텐츠 Social 감성인지와 Social Intelligence 모델 활용 Life Logging 기반 기술 개발 | 융·복합 콘텐츠 Social 감성인지와 Social Intelligence 모델 활용 Life Logging 기반 기술 개발 |
공개전문 정보가 없습니다 |
---|
특허 등록번호 | 10-1736403-0000 |
---|
표시번호 | 사항 |
---|---|
1 |
출원 연월일 : 20160818 출원 번호 : 1020160104985 공고 연월일 : 20170516 공고 번호 : 특허결정(심결)연월일 : 20170421 청구범위의 항수 : 6 유별 : G06K 9/00 발명의 명칭 : 얼굴 미동의 내적 동기화를 이용한 기본 감성 표정 인식 방법 존속기간(예정)만료일 : |
순위번호 | 사항 |
---|---|
1 |
(권리자) 상명대학교산학협력단 서울특별시 종로구... |
제 1 - 3 년분 | 금 액 | 139,500 원 | 2017년 05월 11일 | 납입 |
제 4 년분 | 금 액 | 86,000 원 | 2020년 05월 07일 | 납입 |
번호 | 서류명 | 접수/발송일자 | 처리상태 | 접수/발송번호 |
---|---|---|---|---|
1 | [특허출원]특허출원서 | 2016.08.18 | 수리 (Accepted) | 1-1-2016-0803108-45 |
2 | 의견제출통지서 | 2016.12.12 | 발송처리완료 (Completion of Transmission) | 9-5-2016-0895534-18 |
3 | [분할출원]특허출원서 | 2017.02.08 | 수리 (Accepted) | 1-1-2017-0132811-19 |
4 | [분할출원]특허출원서 | 2017.02.08 | 수리 (Accepted) | 1-1-2017-0132808-71 |
5 | [명세서등 보정]보정서 | 2017.02.08 | 보정승인간주 (Regarded as an acceptance of amendment) | 1-1-2017-0133060-05 |
6 | [거절이유 등 통지에 따른 의견]의견(답변, 소명)서 | 2017.02.08 | 수리 (Accepted) | 1-1-2017-0133058-13 |
7 | [분할출원]특허출원서 | 2017.02.08 | 수리 (Accepted) | 1-1-2017-0132809-16 |
8 | 출원인정보변경(경정)신고서 | 2017.04.03 | 수리 (Accepted) | 4-1-2017-5051189-60 |
9 | 등록결정서 | 2017.04.21 | 발송처리완료 (Completion of Transmission) | 9-5-2017-0287043-97 |
기술정보가 없습니다 |
---|
과제고유번호 | 1711028477 |
---|---|
세부과제번호 | 2011-0030079 |
연구과제명 | 홀로-디지로그 휴먼미디어 연구센터 |
성과구분 | 출원 |
부처명 | 미래창조과학부 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2015 |
연구기간 | 201109~201808 |
기여율 | 0.33333334 |
연구개발단계명 | 기초연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1711035345 |
---|---|
세부과제번호 | R0126-16-1045 |
연구과제명 | 융·복합 콘텐츠 Social 감성인지와 Social Intelligence 모델 활용 Life Logging 기반 기술 개발 |
성과구분 | 출원 |
부처명 | 미래창조과학부 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2016 |
연구기간 | 201603~201702 |
기여율 | 0.33333334 |
연구개발단계명 | 개발연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1711042652 |
---|---|
세부과제번호 | 2011-0030079 |
연구과제명 | 홀로-디지로그 휴먼미디어 연구센터 |
성과구분 | 출원 |
부처명 | 미래창조과학부 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2016 |
연구기간 | 201609~201708 |
기여율 | 0.33333334 |
연구개발단계명 | 기초연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1711028477 |
---|---|
세부과제번호 | 2011-0030079 |
연구과제명 | 홀로-디지로그 휴먼미디어 연구센터 |
성과구분 | 등록 |
부처명 | 미래창조과학부 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2015 |
연구기간 | 201109~201808 |
기여율 | 0.33333334 |
연구개발단계명 | 기초연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1711035345 |
---|---|
세부과제번호 | R0126-16-1045 |
연구과제명 | 융·복합 콘텐츠 Social 감성인지와 Social Intelligence 모델 활용 Life Logging 기반 기술 개발 |
성과구분 | 등록 |
부처명 | 미래창조과학부 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2016 |
연구기간 | 201603~201702 |
기여율 | 0.33333334 |
연구개발단계명 | 개발연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1711042652 |
---|---|
세부과제번호 | 2011-0030079 |
연구과제명 | 홀로-디지로그 휴먼미디어 연구센터 |
성과구분 | 등록 |
부처명 | 미래창조과학부 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2016 |
연구기간 | 201609~201708 |
기여율 | 0.33333334 |
연구개발단계명 | 기초연구 |
6T분류명 | IT(정보기술) |
[1020170014357] | 웹 콘텐츠를 이용한 사용자 감성 예측 시스템 및 그 방법 | 새창보기 |
---|---|---|
[1020160180950] | 라이프로깅 데이터의 익명성을 보장하기 위한 아이디 발급 시스템 및 그 방법 | 새창보기 |
[1020160170394] | GaN 상에 자발 형성된 금 나노입자의 성장제어방법 | 새창보기 |
[1020160149704] | 오프 공명 플라즈모닉에서 광전자 방출 특성의 향상을 위한 금속 나노 드롭렛을 가진 반도체 소자(semiconductor device having metallic nanodroplet for enhancement of photoemission in off-resonant plasmon) | 새창보기 |
[1020160149691] | 방울 에피택시를 이용하여 성장된 InGaAs 양자점-고리 구조체 및 그의 제조방법 | 새창보기 |
[1020160133472] | 영상의 공간 주파수 정규화 장치 및 방법 | 새창보기 |
[1020160125795] | 광학 지문 인식 장치 | 새창보기 |
[1020160124952] | 반사광을 이용한 홀로그램 영상 획득 장치 및 이를 구비하는 물체의 입체 형상 복원 장치(Device for obtaining hologram image using reflected light and apparatus for restructuring shape of object with the device) | 새창보기 |
[1020160117861] | 렌즈 조립체를 이용한 홀로그램 영상 획득 장치 및 이를 구비하는 물체의 입체 형상 복원 장치(Device for obtaining hologram image using lens assembly and apparatus for restructuring shape of object with the device) | 새창보기 |
[1020160111924] | 스테레오 정합 장치(Stereo Matching Device) | 새창보기 |
[1020160104985] | 얼굴 미동의 내적 동기화를 이용한 기본 감성 표정 인식 방법 | 새창보기 |
[1020160058055] | 테이블탑 3D 디스플레이 시스템에서 사용자 추적 기반의 시역 확대 방법 | 새창보기 |
[1020160058051] | 다방향 영상 제공이 가능한 테이블탑 3D 디스플레이 방법 | 새창보기 |
[1020160044511] | 테이블탑 3D 디스플레이를 위한 사투영 시점영상 획득 및 보정 방법 | 새창보기 |
[1020160044508] | 테이블탑 3D 디스플레이 방법 | 새창보기 |
[1020160024515] | 사용자 경험 측정에 기반한 적응형 사용자 인터페이스를 제공하는 시스템 및 그 방법 | 새창보기 |
[1020150173558] | 가림막이 설치된 다방향 공간 영상 투영 장치(a multi-directional space image projection apparatus with blind membrane) | 새창보기 |
[1020150173555] | 시역분리소자가 설치된 다방향 공간 영상 투영 장치(a multi-directional space image projection device with Viewing area separation device) | 새창보기 |
[1020150173553] | 평행구조를 이용한 다방향 공간 영상 투영 장치(a multi-directional space image projection device with parreal structure) | 새창보기 |
[1020150148875] | GaN 상에 자발 형성된 금 나노입자의 성장제어방법(Method for controlling of growth of self-assembled Au nanoparticles on GaN) | 새창보기 |
[1020150095332] | 디지털 홀로그래피 실험 교육 키트(Digital holography kit for experimental education apparatus with the said element) | 새창보기 |
[1020150095319] | 집적영상 실험 교육 키트(Integral Imaging kit for experimental education apparatus with the said element) | 새창보기 |
[1020150095063] | 반사형 홀로그램 기록용 실험 교육 키트(Reflective Hologram kit for experimental education apparatus with the said element) | 새창보기 |
[KST2016010750][상명대학교] | 신체 미세 움직임을 이용한 사회 관계성 측정 방법 및 시스템(Method and System for social relationship based on Micro movement of body) | 새창보기 |
---|---|---|
[KST2022018781][상명대학교] | 영상 인식 기반 지폐 일련번호 인식 장치 및 방법 | 새창보기 |
[KST2022018784][상명대학교] | 영상 콘텐츠의 광고 효과 평가 방법 및 이를 적용하는 시스템 | 새창보기 |
[KST2022016495][상명대학교] | 심장-표정 동기화 기반 감성 인식 방법 및 시스템 | 새창보기 |
[KST2018008508][상명대학교] | 영상 분석 기반 위조 지문 판별 장치 및 방법 | 새창보기 |
[KST2016010753][상명대학교] | 인체 미세 움직임 추출 방법(Extraction method of micro movement) | 새창보기 |
[KST2019009739][상명대학교] | 착용형 디스플레이 장비에서의 눈 영상 기반 생체 인증 장치 및 방법 | 새창보기 |
[KST2018002913][상명대학교] | 위조 바이오 정보 검출 장치 및 방법(APPARATUS AND METHOD FOR DETECTING FAKE BIOMETRICS) | 새창보기 |
[KST2022012752][상명대학교] | 영상 인식 기반 앵무새 종 인식 장치 및 방법 | 새창보기 |
[KST2022012767][상명대학교] | 비접촉 산소포화도 측정 방법 및 장치 | 새창보기 |
[KST2019037825][상명대학교] | 3D 메쉬모델 분할 방법 | 새창보기 |
[KST2016010746][상명대학교] | 인체 미동에 의한 HRP 기반 사회 관계성 측정 방법 및 시스템(Method and system for determining social relationship using Heart Rhythm Pattern by micro movement of body) | 새창보기 |
[KST2020004513][상명대학교] | 생체 인식 장치 및 방법 | 새창보기 |
[KST2022012759][상명대학교] | 색상 속성을 이용한 광고 영상의 공감도 평가 시스템 및 그 방법 | 새창보기 |
[KST2022016493][상명대학교] | 마스크 착용에 강인한 얼굴 인식 방법 및 시스템 | 새창보기 |
[KST2019037838][상명대학교] | 얼굴 미동의 내적 동기화를 이용한 감성 인식 방법 | 새창보기 |
[KST2019037840][상명대학교] | 얼굴 미동의 내적 동기화를 이용한 감성 인식 방법 | 새창보기 |
[KST2019006723][상명대학교] | 제스처 인식 장치 및 그 방법 | 새창보기 |
[KST2016010749][상명대학교] | 인체 미동에 의한 HRC 기반 사회 관계성 측정 방법 및 시스템(Method and System for social relationship based on HRC by Micro movement of body) | 새창보기 |
[KST2022016496][상명대학교] | 실재감 있는 디지털 휴먼 튜터 생성 방법 및 시스템 | 새창보기 |
[KST2019037823][상명대학교] | 동적 워핑 기반 홍채 인식 방법 및 시스템 | 새창보기 |
[KST2019001398][상명대학교] | 필적 인식 장치 및 방법 | 새창보기 |
[KST2022018783][상명대학교] | 몰입도-추론 기반 교감-유도형 DHT 생성 방법 및 이를 적용하는 시스템 | 새창보기 |
[KST2022012754][상명대학교] | 인공 지능을 이용한 얼굴 랜드마크 검출 장치 및 방법 | 새창보기 |
[KST2021009427][상명대학교] | 격자 기반 퍼지 추출 장치 및 방법 | 새창보기 |
[KST2022016492][상명대학교] | 눈-추적을 이용한 광고 영상의 공감도 평가 시스템 및 그 방법 | 새창보기 |
[KST2019037830][상명대학교] | 시선 추적 장치 및 방법 | 새창보기 |
[KST2022018782][상명대학교] | 교감형 디지털 휴먼 튜터 생성 방법 및 시스템 | 새창보기 |
[KST2019037522][상명대학교] | 인체 미동 기반 상호작용에 따른 경쟁과 협력 평가 방법 | 새창보기 |
[KST2022012762][상명대학교] | 블록체인 기반의 반려동물 보호 이력 관리 시스템 | 새창보기 |
심판사항 정보가 없습니다 |
---|