맞춤기술찾기

이전대상기술

뇌졸중 정도의 진단을 위한 얼굴이미지 분석방법 및 시스템

  • 기술번호 : KST2021011566
  • 담당센터 : 인천기술혁신센터
  • 전화번호 : 032-420-3580
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 뇌졸중 정도의 진단을 위한 얼굴이미지 분석방법 및 시스템에 관한 것으로서, 더욱 상세하게는 얼굴을 촬영하여 웃는 얼굴의 이미지를 획득하여, 얼굴의 뺨주름선을 도출하고, 기계학습된 모델을 이용하여 얼굴의 뺨주름선 및 얼굴의 특정부위의 대칭 정도에 따른 얼굴이미지 대상자의 뇌졸중 정도를 판단할 수 있는, 뇌졸중 정도의 진단을 위한 얼굴이미지 분석방법 및 시스템에 관한 것이다.
Int. CL G06T 7/00 (2017.01.01) G06T 7/68 (2017.01.01) G06T 7/11 (2017.01.01) G06K 9/00 (2006.01.01) G06T 5/00 (2019.01.01) G06T 11/20 (2006.01.01) G16H 50/50 (2018.01.01)
CPC G06T 7/0012(2013.01) G06T 7/68(2013.01) G06T 7/11(2013.01) G06K 9/00268(2013.01) G06T 5/002(2013.01) G06T 11/20(2013.01) G16H 50/50(2013.01) G06T 2207/30201(2013.01) G06T 2207/20081(2013.01)
출원번호/일자 1020200120436 (2020.09.18)
출원인 가천대학교 산학협력단
등록번호/일자 10-2274330-0000 (2021.07.01)
공개번호/일자
공고번호/일자 (20210707) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 취하
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2020.09.18)
심사청구항수 8

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 가천대학교 산학협력단 대한민국 경기도 성남시 수정구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 황보택근 경기도 성남시 분당구
2 박동균 인천광역시 미추홀구
3 신동진 경기도 부천시 부흥로
4 김재승 인천시 부평구
5 UMIRZAKOVA SABINA 경기도 성남시 수정구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 심찬 대한민국 서울특별시 서초구 양재천로**길 *(양재동) *층(아이픽스특허법률사무소)
2 송두현 대한민국 서울특별시 서초구 양재천로**길 *, *층(양재동, 화암빌딩)(아이픽스특허법률사무소)
3 강정빈 대한민국 서울특별시 서초구 양재천로 **길 *, *층 (양재동, 화암빌딩)(아이픽스특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 가천대학교 산학협력단 경기도 성남시 수정구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2020.09.18 수리 (Accepted) 1-1-2020-0993507-32
2 [우선심사신청]심사청구서·우선심사신청서
2020.09.18 취하 (Withdrawal) 1-1-2020-0995020-56
3 [우선심사신청 취하]취하서·포기서
2020.09.21 수리 (Accepted) 1-1-2020-0999301-74
4 수수료 반환 안내서
Notification of Return of Official Fee
2020.09.23 발송처리완료 (Completion of Transmission) 1-5-2020-0142245-31
5 [우선심사신청]심사청구서·우선심사신청서
2020.11.27 수리 (Accepted) 1-1-2020-1281769-55
6 [출원서 등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2020.11.27 무효 (Invalidation) 1-1-2020-1281816-14
7 보정요구서
Request for Amendment
2020.12.02 발송처리완료 (Completion of Transmission) 1-5-2020-0181500-38
8 [출원서 등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2020.12.24 수리 (Accepted) 1-1-2020-1407125-95
9 [지정기간단축]기간 연장신청서·기간 단축신청서·기간 경과 구제신청서·절차 계속신청서
2020.12.24 수리 (Accepted) 1-1-2020-1407118-75
10 무효처분통지서
Notice for Disposition of Invalidation
2020.12.28 발송처리완료 (Completion of Transmission) 1-5-2020-0197238-99
11 선행기술조사의뢰서
Request for Prior Art Search
2021.01.04 수리 (Accepted) 9-1-9999-9999999-89
12 선행기술조사보고서
Report of Prior Art Search
2021.01.22 발송처리완료 (Completion of Transmission) 9-6-2021-0031146-16
13 의견제출통지서
Notification of reason for refusal
2021.02.18 발송처리완료 (Completion of Transmission) 9-5-2021-0142971-58
14 [거절이유 등 통지에 따른 의견]의견서·답변서·소명서
2021.03.11 수리 (Accepted) 1-1-2021-0290489-98
15 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2021.03.11 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2021-0290525-44
16 등록결정서
Decision to grant
2021.06.28 발송처리완료 (Completion of Transmission) 9-5-2021-0509816-42
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
1 이상의 프로세서 및 상기 프로세서에서 수행 가능한 명령들을 저장하는 1 이상의 메모리를 포함하는 컴퓨팅장치에서 수행되는 뇌졸중 정도의 진단을 위한 얼굴이미지 분석방법으로서,시간에 따른 연속적인 검출 대상자의 얼굴이미지 그룹을 획득하는 이미지획득단계;얼굴이미지 그룹의 얼굴이미지에서 얼굴특징점을 도출하는 얼굴특징점도출단계;얼굴이미지의 도출된 얼굴특징점 중 입에 대한 얼굴특징점들의 종횡비가 기설정된 기준에 부합하는 경우 웃는얼굴이미지로 선택하는 웃는얼굴선택단계;선택된 상기 웃는얼굴이미지에 대한 처리를 수행하여 뺨주름선을 도출하는 뺨주름선도출단계;얼굴의 입술부위의 2 이상의 특정 얼굴특징점에 기초하여 왼쪽입술대칭선 및 오른쪽입술대칭선을 도출하는 입술대칭선도출단계;얼굴의 눈썹부위의 2 이상의 특정 얼굴특징점에 기초하여 왼쪽눈썹대칭선 및 오른쪽눈썹대칭선을 도출하는 눈썹대칭선도출단계;상기 뺨주름선에 대한 정보, 양쪽 입술대칭선에 대한 정보, 및 양쪽 눈썹대칭선에 대한 정보를 포함하는 판단기초데이터를 생성하는 판단기초데이터생성단계; 및상기 판단기초데이터 및 기계학습된 뇌졸중정도판단모듈에 기초하여 뇌졸중판단정보를 도출하는 뇌졸중판단정보도출단계;를 포함하고,상기 뺨주름선에 대한 정보는, 좌 우 뺨주름선의 기울기 벡터의 그래디언트 차이를 포함하고,상기 이미지획득단계에서는, 실시간으로 대상자의 얼굴이미지 그룹을 획득하고,상기 웃는얼굴선택단계는, 입에 대한 얼굴특징점들의 종횡비가 기설정된 기준에 부합하지 않는 경우에, 대상자들이 웃는 얼굴표정을 짓도록 유도하는 안내를 표시하는 안내표시단계;를 더 포함하고,상기 뇌졸중판단정보도출단계는,기계학습된 제1뇌졸중정도판단모듈에 의하여, 상기 뺨주름선에 대한 정보에 기초하여 뇌졸중 정도에 대한 제1판단정보를 도출하는 제1뇌졸중정도판단단계;기계학습된 제2뇌졸중정도판단모듈에 의하여, 상기 입술대칭선에 대한 정보에 기초하여 뇌졸중 정도에 대한 제2판단정보를 도출하는 제2뇌졸중정도판단단계;기계학습된 제3뇌졸중정도판단모듈에 의하여, 상기 눈썹대칭선에 대한 정보에 기초하여 뇌졸중 정도에 대한 제3판단정보를 도출하는 제3뇌졸중정도판단단계; 및종합판단모듈에 의하여, 상기 제1판단정보, 상기 제2판단정보, 및 상기 제3판단정보에 기초하여 상기 뇌졸중판단정보를 도출하는 종합판단단계;를 포함하는, 뇌졸중 정도의 진단을 위한 얼굴이미지 분석방법
2 2
청구항 1에 있어서,상기 뺨주름선도출단계는,상기 웃는얼굴이미지의 얼굴특징점에 기초하여 코, 뺨 및 입을 포함하는 얼굴 영역에 대한 크롭이미지를 생성하는 크롭이미지생성단계;상기 크롭이미지에 대한 전처리를 수행하여 그레이스케일크롭이미지를 생성하는 크롭이미지전처리단계;상기 그레이스케일크롭이미지에 대해 주름 감지 방법을 사용하여 주름이미지를 생성하는 경계감지단계; 및상기 얼굴특징점의 위치에 기초하여 상기 주름이미지의 뺨 주름을 제외한 영역의 주름을 제거하는 영역마스킹단계;를 포함하는, 뇌졸중 정도의 진단을 위한 얼굴이미지 분석방법
3 3
청구항 2에 있어서,상기 영역마스킹단계는,상기 얼굴특징점에 기초하여 코 및 입을 포함하는 얼굴영역을 마스킹영역으로 설정하고, 상기 주름이미지의 마스킹영역 내의 주름을 제거하고, 남은 주름 중 기설정된 길이 이상의 주름선을 선택하여 뺨주름선으로 설정하는, 뇌졸중 정도의 진단을 위한 얼굴이미지 분석방법
4 4
청구항 1에 있어서,상기 판단기초데이터생성단계는,도출된 뺨주름선에 기초하여 복수의 얼굴특징점을 포함하는 개인얼굴특징점세트를 생성하는 특징점세트생성단계;상기 얼굴이미지 그룹의 얼굴이미지 각각에 상기 개인얼굴특징점세트를 매칭하는 특징점세트매칭단계; 및상기 개인얼굴특징점세트의 뺨주름선에 해당하는 얼굴특징점에 기초하여 상기 얼굴이미지 각각의 뺨주름선을 도출하는 뺨주름이미지생성단계;를 포함하는, 뇌졸중 정도의 진단을 위한 얼굴이미지 분석방법
5 5
청구항 4에 있어서,상기 얼굴특징점세트는,50개 이상의 얼굴특징점들을 포함하고,상기 얼굴특징점들 중 10개 이상의 얼굴특징점은 뺨주름선에 해당하는 얼굴특징점인, 뇌졸중 정도의 진단을 위한 얼굴이미지 분석방법
6 6
청구항 1에 있어서,상기 판단기초데이터생성단계는,상기 왼쪽입술대칭선 및 상기 오른쪽입술대칭선에 대한 기울기의 차이에 기초하여 입술대칭정도를 도출하는 입술데이터생성단계;를 포함하고,상기 판단기초데이터는 상기 입술대칭정도를 포함하는, 뇌졸중 정도의 진단을 위한 얼굴이미지 분석방법
7 7
삭제
8 8
청구항 1에 있어서,상기 판단기초데이터생성단계는,상기 왼쪽눈썹대칭선 및 상기 오른쪽눈썹대칭선에 대한 기울기의 차이에 기초하여 눈썹대칭정도를 도출하는 눈썹데이터생성단계;를 포함하고,상기 판단기초데이터는 상기 눈썹대칭정도를 포함하는, 뇌졸중 정도의 진단을 위한 얼굴이미지 분석방법
9 9
삭제
10 10
1 이상의 프로세서 및 상기 프로세서에서 수행 가능한 명령들을 저장하는 1 이상의 메모리를 포함하는 컴퓨팅장치에서 수행되는 뇌졸중 정도의 진단을 위한 얼굴이미지 분석 시스템으로서,시간에 따른 연속적인 검출 대상자의 얼굴이미지 그룹을 획득하는 이미지획득부;얼굴이미지 그룹의 얼굴이미지에서 얼굴특징점을 도출하는 얼굴특징점도출부;얼굴이미지의 도출된 얼굴특징점 중 입에 대한 얼굴특징점들의 종횡비가 기설정된 기준에 부합하는 경우 웃는얼굴이미지로 선택하는 웃는얼굴선택부;선택된 상기 웃는얼굴이미지에 대한 처리를 수행하여 뺨주름선을 도출하는 뺨주름선도출부;얼굴의 입술부위의 2 이상의 특정 얼굴특징점에 기초하여 왼쪽입술대칭선 및 오른쪽입술대칭선을 도출하는 입술대칭선도출부;얼굴의 눈썹부위의 2 이상의 특정 얼굴특징점에 기초하여 왼쪽눈썹대칭선 및 오른쪽눈썹대칭선을 도출하는 눈썹대칭선도출부;상기 뺨주름선에 대한 정보, 양쪽 입술대칭선에 대한 정보, 및 양쪽 눈썹대칭선에 대한 정보를 포함하는 판단기초데이터를 생성하는 판단기초데이터생성부; 및상기 판단기초데이터 및 기계학습된 뇌졸중정도판단모듈에 기초하여 뇌졸중판단정보를 도출하는 뇌졸중판단정보도출부;를 포함하고,상기 뺨주름선에 대한 정보는, 좌 우 뺨주름선의 기울기 벡터의 그래디언트 차이를 포함하고,상기 이미지획득부는, 실시간으로 대상자의 얼굴이미지 그룹을 획득하고,상기 웃는얼굴선택부는, 입에 대한 얼굴특징점들의 종횡비가 기설정된 기준에 부합하지 않는 경우에, 대상자들이 웃는 얼굴표정을 짓도록 유도하는 안내를 표시하는 안내표시단계;를 더 수행하고,상기 뇌졸중판단정보도출부는,상기 뺨주름선에 대한 정보에 기초하여 뇌졸중 정도에 대한 제1판단정보를 도출하는 제1뇌졸중정도판단모듈;상기 입술대칭선에 대한 정보에 기초하여 뇌졸중 정도에 대한 제2판단정보를 도출하는 제2뇌졸중정도판단모듈;상기 눈썹대칭선에 대한 정보에 기초하여 뇌졸중 정도에 대한 제3판단정보를 도출하는 제3뇌졸중정도판단모듈; 및상기 제1판단정보, 상기 제2판단정보, 및 상기 제3판단정보에 기초하여 상기 뇌졸중판단정보를 도출하는 종합판단모듈;를 포함하는, 뇌졸중 정도의 진단을 위한 얼굴이미지 시스템
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 과학기술정보통신부 가천대학교 산학협력단 차세대의료기기플랫폼기술 AI기술을 활용한 통합진단솔루션 개발
2 과학기술정보통신부 가천대학교 산학협력단 대학ICT연구센터육성지원사업 의료 빅데이터를 활용한 뇌질환 예측o예방 기술개발 및 전문인력 양성