맞춤기술찾기

이전대상기술

로봇의 인간 얼굴 표정 학습 및 표정 구현 방법

  • 기술번호 : KST2019021371
  • 담당센터 : 경기기술혁신센터
  • 전화번호 : 031-8006-1570
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 인간의 감정지표와 로봇의 서보모터 파라미터 값의 차원을 일치시켜 자동으로 인간의 표정을 기계 학습하여 모사할 수 있도록 한 로봇의 인간 얼굴 표정 학습 및 표정 구현 방법에 관한 것이다. 본 발명은 a) 미리 설정된 인간 감정 지표에 따라 인간 얼굴 근육의 EES(Epidermal Electric Sensor) 신호를 측정하여, 상기 인간 감정 지표에 대응되는 복수개의 사람얼굴모터유닛을 도출하는 단계; b) 사람의 얼굴 근육에 대응되도록 설치된 서보모터를 바탕으로, 상기 사람얼굴모터유닛과 대응되도록 복수개의 로봇얼굴모터유닛을 도출하는 단계; c) 상기 인간 감정 지표를 표현하도록 상기 복수개의 로봇얼굴모터유닛과 기본계수를 조합하여 로봇 얼굴 제어신호로 도출하는 단계; d) 상기 로봇 얼굴 제어신호에 따라 로봇의 얼굴 표정을 표현하고 로봇 감정 지표를 도출하는 단계; e) 상기 인간 감정 지표와 상기 로봇 감정 지표의 차이인 차이 감정 지표를 도출하는 단계; f) 상기 차이 감정 지표로부터 상기 로봇얼굴모터유닛의 보정계수를 연산하는 단계; g) 상기 기본계수와 상기 보정계수를 합산하여 새로운 기본계수를 도출하는 단계; h) 상기 복수개의 로봇얼굴모터유닛과 상기 새로운 기본계수를 조합하여 새로운 로봇 얼굴 제어신호를 도출하는 단계를 포함하며, 상기 (e) 단계에서, 상기 차이 감정 지표가 미리 설정된 공차를 만족할 때까지 상기 (d) 내지 (h) 단계를 반복 수행하도록 이루어지는 것을 특징으로 하는 로봇의 인간 얼굴 표정 학습 및 표정 구현 방법을 제공한다.
Int. CL B25J 11/00 (2006.01.01) B25J 9/16 (2006.01.01)
CPC B25J 11/0015(2013.01)B25J 11/0015(2013.01)B25J 11/0015(2013.01)B25J 11/0015(2013.01)
출원번호/일자 1020180044995 (2018.04.18)
출원인 한국생산기술연구원
등록번호/일자
공개번호/일자 10-2019-0130190 (2019.11.22) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2018.04.18)
심사청구항수 5

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국생산기술연구원 대한민국 충청남도 천안시 서북구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 윤한얼 경기도 수원시 권선구
2 이동욱 인천광역시 남동구
3 형현준 경기도 안산시 상록구
4 이덕연 경기도 안산시 단원구
5 최동운 서울특별시 영등포구
6 허만홍 경기도 안산시 단원구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 한상수 대한민국 서울시 서초구 효령로**길 ** *층 (브릿지웰빌딩)(에이치앤피국제특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 한국생산기술연구원 충청남도 천안시 서북구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2018.04.18 수리 (Accepted) 1-1-2018-0384647-49
2 출원인정보변경(경정)신고서
Notification of change of applicant's information
2018.07.02 수리 (Accepted) 4-1-2018-5123030-77
3 선행기술조사의뢰서
Request for Prior Art Search
2018.12.10 수리 (Accepted) 9-1-9999-9999999-89
4 선행기술조사보고서
Report of Prior Art Search
2019.02.14 발송처리완료 (Completion of Transmission) 9-6-2019-0020025-84
5 의견제출통지서
Notification of reason for refusal
2019.09.19 발송처리완료 (Completion of Transmission) 9-5-2019-0673250-10
6 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2019.10.23 수리 (Accepted) 1-1-2019-1081344-16
7 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2019.10.23 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2019-1081341-79
8 등록결정서
Decision to grant
2020.03.19 발송처리완료 (Completion of Transmission) 9-5-2020-0205172-61
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
a) 미리 설정된 인간 감정 지표에 따라 인간 얼굴 근육의 EES(Epidermal Electric Sensor) 신호를 측정하여, 상기 인간 감정 지표에 대응되는 복수개의 사람얼굴모터유닛을 도출하는 단계;b) 사람의 얼굴 근육에 대응되도록 설치된 서보모터를 바탕으로, 상기 사람얼굴모터유닛과 대응되도록 복수개의 로봇얼굴모터유닛을 도출하는 단계;c) 상기 인간 감정 지표를 표현하도록 상기 복수개의 로봇얼굴모터유닛과 기본계수를 조합하여, 복수개의 상기 로봇얼굴모터유닛과 일대일 대응되어 곱해지는 복수개의 기본계수들의 합으로 이루어진 로봇 얼굴 제어신호를 도출하는 단계;d) 상기 로봇 얼굴 제어신호에 따라 로봇의 얼굴 표정을 표현하고 로봇 감정 지표를 도출하는 단계;e) 상기 인간 감정 지표와 상기 로봇 감정 지표의 차이인 차이 감정 지표를 도출하는 단계;f) 상기 차이 감정 지표로부터 상기 로봇얼굴모터유닛의 보정계수를 연산하는 단계;g) 상기 기본계수와 상기 보정계수를 합산하여 새로운 기본계수를 도출하는 단계;h) 상기 복수개의 로봇얼굴모터유닛과 상기 새로운 기본계수를 조합하여 새로운 로봇 얼굴 제어신호를 도출하는 단계를 포함하며,상기 (e) 단계에서, 상기 차이 감정 지표가 미리 설정된 공차를 만족할 때까지 상기 (d) 내지 (h) 단계를 반복 수행하도록 이루어지며,상기 a) 단계에서, 상기 사람얼굴모터유닛은 인간 얼굴 근육의 복수의 지점에서의 EES신호의 벡터값의 시계열 데이터에 음수 미포함 행렬 분해(Non-negative matrix factorization, NMF) 알고리즘을 적용하여 각 지점에서의 EES 신호를 그룹핑한 형태로 도출되고,복수의 사람얼굴모터유닛(M1)에 각각 계수를 곱하여 합한 값은 각각의 얼굴 근육 지점에서 측정된 EES 신호 값과 일치하도록 마련되고,상기 c) 단계에서, 상기 서보모터를 그룹핑하여 형성된 상기 로봇얼굴모터유닛과 인간 감정 지표의 개수를 동일하게 하여 차원을 일치시킨 것을 특징으로 하는 로봇의 인간 얼굴 표정 학습 및 표정 구현 방법
2 2
삭제
3 3
제 1 항에 있어서,상기 a) 단계에서,상기 인간 감정 지표는 감정이 표현된 인간 얼굴 표정으로부터 측정되는 EES 신호의 벡터값의 합인 것을 특징으로 하는 로봇의 인간 얼굴 표정 학습 및 표정 구현 방법
4 4
제 1 항에 있어서,상기 b) 단계에서,상기 로봇얼굴모터유닛은 복수개의 상기 서보모터들의 조합으로 이루어진 것을 특징으로 하는 로봇의 인간 얼굴 표정 학습 및 표정 구현 방법
5 5
삭제
6 6
제 1 항에 있어서,상기 d) 단계에서,상기 로봇 감정 지표는 감정이 표현된 로봇 얼굴 표정으로부터 측정되는 서보모터의 벡터값의 합인 것을 특징으로 하는 로봇의 인간 얼굴 표정 학습 및 표정 구현 방법
7 7
제 1 항에 따른 로봇의 인간 얼굴 표정 학습 및 표정 구현 방법을 적용한 로봇
지정국 정보가 없습니다
순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - 패밀리정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 JP06684887 JP 일본 FAMILY
2 JP31192199 JP 일본 FAMILY
3 US20190321985 US 미국 FAMILY

DOCDB 패밀리 정보

순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - DOCDB 패밀리 정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 JP2019192199 JP 일본 DOCDBFAMILY
2 JP6684887 JP 일본 DOCDBFAMILY
3 US2019321985 US 미국 DOCDBFAMILY
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 문화관광부 한국생산기술연구원 문화콘텐츠산업기술지원사업 텔레오퍼레이션 기반 전시체?험용 실감 로봇 및 콘텐츠 기술 개발