맞춤기술찾기

이전대상기술

CNN 기반의 와일드 환경에 강인한 얼굴 검출 방법 및 시스템

  • 기술번호 : KST2018009749
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 합성곱 신경망(Convolutional Neural Network; CNN)을 기반으로 하는 개선된 얼굴 검출 방법 및 시스템을 제공한다. 얼굴의 포즈 변화와 가림이 발생하는 와일드(wild) 환경에서도 일부 신경망을 공유하고 있는 멀티 스케일의 완전한 합성곱 신경망(Fully Convolutional Network; FCN)을 이용하여 정확하고 빠르게 얼굴을 검출한다.
Int. CL G06K 9/00 (2006.01.01) G06N 3/02 (2019.01.01)
CPC
출원번호/일자 1020170075826 (2017.06.15)
출원인 한국과학기술원
등록번호/일자
공개번호/일자 10-2018-0080081 (2018.07.11) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보 대한민국  |   1020170000720   |   2017.01.03
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2017.06.15)
심사청구항수 12

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국과학기술원 대한민국 대전광역시 유성구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 노용만 대한민국 대전광역시 유성구
2 김형일 대한민국 대전광역시 유성구
3 송주남 대한민국 대전광역시 유성구
4 김학구 대한민국 대전광역시 유성구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 양성보 대한민국 서울특별시 강남구 선릉로***길 ** (논현동) 삼성빌딩 *층(피앤티특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 한국과학기술원 대한민국 대전광역시 유성구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2017.06.15 수리 (Accepted) 1-1-2017-0572702-38
2 선행기술조사의뢰서
Request for Prior Art Search
2017.08.11 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2017.11.10 발송처리완료 (Completion of Transmission) 9-6-2017-0170282-50
4 의견제출통지서
Notification of reason for refusal
2018.12.24 발송처리완료 (Completion of Transmission) 9-5-2018-0884082-94
5 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2019.02.25 수리 (Accepted) 1-1-2019-0196915-16
6 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2019.02.25 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2019-0196916-51
7 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.04.24 수리 (Accepted) 4-1-2019-5081392-49
8 등록결정서
Decision to grant
2019.07.22 발송처리완료 (Completion of Transmission) 9-5-2019-0523551-18
9 [명세서등 보정]보정서(심사관 직권보정)
2019.11.21 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2019-5037263-44
10 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.05.15 수리 (Accepted) 4-1-2020-5108396-12
11 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.06.12 수리 (Accepted) 4-1-2020-5131486-63
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
이미지에 포함된 얼굴 구성요소를 나타내는 복수의 히트맵들-상기 복수의 히트맵들은 상기 이미지에 대해 서로 다른 합성곱 및 풀링 방식들을 적용함으로써 생성된 것들임-각각으로부터 서로 다른 복수의 얼굴 후보 영역들을 추출하는 단계; 및상기 서로 다른 복수의 얼굴 후보 영역들에 기초하여 상기 이미지에 포함된 얼굴 영역을 검출(Detection)하는 단계를 포함하고, 상기 서로 다른 복수의 얼굴 후보 영역들을 추출하는 단계는,합성곱을 수행하는 적어도 하나의 제1 합성곱 계층 및 풀링을 수행하는 적어도 하나의 제1 풀링 계층을 포함하는 제1 계층을 통하여 상기 이미지를 피처맵들로 변환하는 단계; 및상기 서로 다른 복수의 얼굴 후보 영역들을 추출하기 위하여 적어도 하나의 제2 합성곱 계층과 적어도 하나의 제2 풀링 계층을 포함하는 복수의 제2 계층들 각각을 통하여 상기 피처맵들을 히트맵들로 변환하는 단계를 포함하고, 상기 복수의 제2 계층들은 상기 피처맵들을 상기 히트맵들로 변환하기 위하여 공통적으로 상기 피처맵들을 사용하며,상기 피처맵들을 히트맵들로 변환하는 단계는,피처맵들을 히트맵들로 변환하기 위하여 상기 복수의 제2 계층들 각각이 합성곱과 풀링 연산을 연속적으로 수행하는 단계를 포함하고,상기 복수의 제2 계층들 중 어느 하나가 포함하고 있는 계층과, 다른 하나의 제2 계층에 포함되며 상기 계층의 연산 순서에 대응되는 계층은 서로 다른 크기의 스트라이드(stride)를 갖도록 함으로써 상기 복수의 제2 계층들이 서로 다른 크기의 얼굴에 대하여 최적화된 히트맵을 생성하도록 하는 것을 특징으로 하는 얼굴 검출 방법
2 2
삭제
3 3
삭제
4 4
제1항에 있어서,상기 얼굴 영역을 검출(Detection)하는 단계는,상기 얼굴 후보 영역에 얼굴 영역이 있는지 여부를 판단함으로써 얼굴 유무에 대하여 분류(Classification)하는 단계; 및상기 분류와 상기 얼굴 후보 영역들을 기반으로 하여 정밀한 얼굴 후보 영역으로 회귀(Regression)하는 단계를 포함하는 것을 특징으로 하는 얼굴 검출 방법
5 5
제4항에 있어서,상기 분류(Classification)하는 단계는,얼굴 영역이 포함되어 있으면 확률 1을 제시하고, 얼굴 영역이 포함되어 있지 않으면 확률 0을 제시하는 단계를 포함하는 것을 특징으로 하는 얼굴 검출 방법
6 6
제4항에 있어서,상기 정밀한 얼굴 후보 영역으로 회귀(Regression)하는 단계는,상기 분류(Classification)하는 단계에서 얼굴 영역이 있다고 분류하면 얼굴 영역의 위치 정보를 제시하고, 얼굴 영역이 없다고 분류하면 얼굴 영역의 위치 정보를 무시하라는 라벨(label)을 부여하는 단계를 포함하는 것을 특징으로 하는 얼굴 검출 방법
7 7
제1항에 있어서,상기 얼굴 영역을 검출(Detection)하는 단계는,상기 얼굴 후보 영역들이 적어도 하나의 합성곱 계층, 적어도 하나의 풀링 계층 및 적어도 하나의 완전 연결 계층(Fully-Connected layer; FCL)을 거쳐서 얼굴 영역을 검출하는 것을 특징으로 하는 얼굴 검출 방법
8 8
제1항에 있어서,상기 얼굴 후보 영역들을 추출하는 단계는,물체 영역과 물체가 아닌 영역을 구분하는 신경망 모델을 기반으로 하여 얼굴 영역과 얼굴이 아닌 영역을 구분하기 위한 학습을 하는 단계; 및하나 이상의 얼굴 특징점(facial landmark)을 포함하는 이미지 데이터 베이스를 사용하여 얼굴 후보 영역 추출을 학습하는 단계를 통해 학습되는 것을 특징으로 하는 얼굴 검출 방법
9 9
제1항에 있어서,상기 얼굴 영역을 검출(Detection)하는 단계는,네거티브 예제 마이닝(Hard Sample Mining) 기술을 통해 상기 얼굴 후보 영역들을 데이터 베이스로 사용하여 학습되는 것을 특징으로 하는 얼굴 검출 방법
10 10
이미지에 포함된 얼굴 구성요소를 나타내는 복수의 히트맵들-상기 복수의 히트맵들은 상기 이미지에 대해 서로 다른 합성곱 및 풀링 방식들을 적용함으로써 생성된 것들임-각각으로부터 서로 다른 복수의 얼굴 후보 영역들을 추출하여 검출부로 프로포즈(propose)하는 제안부; 및상기 서로 다른 복수의 얼굴 후보 영역들에 기초하여 상기 이미지에 포함된 얼굴 영역을 검출(Detection)하는 검출부를 포함하고,상기 제안부는,합성곱을 수행하는 적어도 하나의 제1 합성곱 계층 및 풀링을 수행하는 적어도 하나의 제1 풀링 계층을 통하여 상기 이미지를 피처맵들로 변환하는 제1 계층부; 및상기 서로 다른 복수의 얼굴 후보 영역들을 추출하기 위하여 적어도 하나의 제2 합성곱 계층과 적어도 하나의 제2 풀링 계층을 통하여 상기 피처맵들을 히트맵들로 변환하는 복수의 제2 계층부를 포함하고, 상기 복수의 제2 계층부들은 상기 피처맵들을 상기 히트맵들로 변환하기 위하여 공통적으로 상기 피처맵들을 사용하며, 상기 제안부는,피처맵들을 히트맵들로 변환하기 위하여 상기 복수의 제2 계층부들 각각이 합성곱과 풀링 연산을 연속적으로 수행하고,상기 복수의 제2 계층부들 중 어느 하나가 포함하고 있는 계층과, 다른 하나의 제2 계층부에 포함되며 상기 계층의 연산 순서에 대응되는 계층은 서로 다른 크기의 스트라이드(stride)를 갖는 것을 특징으로 하는 기계 학습 기반 얼굴 검출 시스템
11 11
삭제
12 12
삭제
13 13
제10항에 있어서,상기 검출부는,상기 얼굴 후보 영역에 얼굴이 있는지 여부를 판단함으로써 얼굴 유무에 대하여 분류(Classification)를 수행하는 분류부; 및 상기 분류와 상기 얼굴 후보 영역들을 기반으로 하여 정밀한 얼굴 후보 영역으로 회귀(Regression)하는 회귀부를 포함하는 것을 특징으로 하는 기계 학습 기반 얼굴 검출 시스템
14 14
제13항에 있어서,상기 분류부는,얼굴 영역이 포함되어 있으면 확률 1을 제시하고, 얼굴 영역이 포함되어 있지 않으면 확률 0을 제시하는 것을 특징으로 하는 기계 학습 기반 얼굴 검출 시스템
15 15
제13항에 있어서,상기 회귀부는,상기 분류부가 얼굴 영역이 있다고 분류하면 얼굴 영역의 위치 정보를 제시하고, 얼굴 영역이 없다고 분류하면 얼굴 영역의 위치 정보를 무시하라는 라벨(label)을 부여하는 것을 특징으로 하는 기계 학습 기반 얼굴 검출 시스템
16 16
제10항에 있어서,상기 검출부는,얼굴 영역을 검출하기 위하여 상기 얼굴 후보 영역들이 적어도 하나의 합성곱 계층, 적어도 하나의 풀링 계층 및 적어도 하나의 완전 연결 계층(Fully-Connected layer; FCL)을 포함하는 것을 특징으로 하는 기계 학습 기반 얼굴 검출 시스템
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 미래창조과학부 광주과학기술원 정보통신.방송 연구개발사업 감시성/프라이버시 강화를 위한 얼굴 마스킹과 특정인 식별/인식 기술 연구