맞춤기술찾기

이전대상기술

포즈 추정 기반 포즈변화에 강인한 얼굴 인식 방법(A ROBUST FACE RECOGNITION METHOD FOR POSE VARIATIONS BASED ON POSE ESTIMATION)

  • 기술번호 : KST2017009132
  • 담당센터 : 경기기술혁신센터
  • 전화번호 : 031-8006-1570
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 포즈 추정 기반 포즈변화에 강인한 얼굴 인식 방법에 관한 것으로서, 보다 구체적으로는 포즈 추정 기반 포즈변화에 강인한 얼굴 인식 방법으로서, (1) 미리 설정된 학습 동영상으로부터 검출된 복수 포즈의 얼굴 이미지를 저장하여 데이터베이스화 하는 단계; (2) 상기 데이터베이스화로 저장된 복수 포즈의 얼굴 이미지 각각에 대해, 주성분 분석법(PCA) 알고리즘을 이용한 차원 축소의 전처리를 수행하는 단계; (3) 상기 단계 (2)에서 전처리된 데이터를 다항식 기반 RBFNNSs(Radial Basis Function Neural Networks) 패턴 분류기에 입력하여 각 포즈 데이터를 학습시키는 단계; (4) 입자군집 최적화 알고리즘(PSO: Particle Swarm Optimization)을 이용하여 상기 각 포즈별 데이터에 대해 최적화된 파라미터를 획득하는 단계; (5) 상기 단계 (1) 내지 단계 (4)를 통해 학습과정이 종료된 후, 미리 설정된 테스트 동영상으로부터 검출된 테스트 얼굴 이미지에 대해, 2방향 2차원 주성분분석법(2-Directional 2-Dimensional Principal Component Analysis) 알고리즘을 이용한 차원 축소의 전처리가 수행되는 단계; (6) 상기 단계 (5)를 통해 차원 축소의 전처리가 수행된 테스트 얼굴 이미지에 대해 유사 포즈를 추정하여 검출하는 단계; 및 (7) 상기 검출된 유사 포즈를 상기 단계 (1) 내지 (4)의 학습과정을 통해 획득된 최적화된 파라미터에 적용하여 테스트 얼굴 이미지를 인식 대상으로 판정하는 단계를 포함하는 것을 그 구성상의 특징으로 한다.본 발명에서 제안하고 있는 포즈 추정 기반 포즈변화에 강인한 얼굴 인식 방법에 따르면, 복수 포즈의 얼굴이미지를 데이터베이스화하여 저장하고, 주성분 분석법 알고리즘을 이용한 차원 축소의 전처리 과정을 수행한 후 다항식 기반 RBFNNs 패턴 분류기로 각 포즈 데이터를 학습하고, 입자군집 최적화 알고리즘(PSO)을 이용하여 최적화된 파라미터를 획득하며, 테스트 데이터에 대해 2방향 2차원 주성분분석법 알고리즘을 이용하여 차원 축소하고, 차원 축소된 테스트 얼굴 이미지에 대한 유사 포즈를 분류 및 추정하는 처리과정을 통해 포즈를 획득하고, 획득한 유사 포즈를 획득된 최적화된 파라미터에 적용하여 테스트 얼굴 이미지를 인식할 수 있도록 구성함으로써, 정면이 아닌 포즈를 사용하더라도 대상의 얼굴 인식이 가능함은 물론, 다양한 크기의 변화와 포즈의 변화에 대해서도 얼굴의 인식이 가능하도록 할 수 있다.또한, 본 발명에 따르면, 테스트 데이터에 대해 2방향 2차원 주성분분석법 알고리즘을 이용하여 데이터 차원을 축소함으로써, 인식 속도 및 인식률이 개선되고, 최적화된 파라미터에서의 빠른 학습 수렴으로 인식 성능이 향상될 수 있도록 할 수 있다.
Int. CL G06K 9/00 (2015.12.20) G06K 9/66 (2015.12.20) G06F 17/30 (2015.12.20) G06K 9/62 (2015.12.20)
CPC G06K 9/00308(2013.01) G06K 9/00308(2013.01) G06K 9/00308(2013.01) G06K 9/00308(2013.01) G06K 9/00308(2013.01) G06K 9/00308(2013.01)
출원번호/일자 1020150155364 (2015.11.05)
출원인 수원대학교산학협력단, 위아코퍼레이션 주식회사
등록번호/일자
공개번호/일자 10-2017-0053069 (2017.05.15) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2015.11.05)
심사청구항수 4

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 수원대학교산학협력단 대한민국 경기도 화성시
2 위아코퍼레이션 주식회사 대한민국 경기 화성시

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 오성권 대한민국 경기도 용인시 기흥구
2 김진율 대한민국 경기도 군포시 광정로

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 김건우 대한민국 서울특별시 금천구 가산디지털*로 ***, 에이동 ***호 특허그룹덕원 (가산동, 우림 라이온스밸리)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 수원대학교산학협력단 대한민국 경기도 화성시
2 위아코퍼레이션 주식회사 대한민국 경기 화성시
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2015.11.05 수리 (Accepted) 1-1-2015-1079724-11
2 보정요구서
Request for Amendment
2015.11.15 발송처리완료 (Completion of Transmission) 1-5-2015-0173120-97
3 [출원서등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2015.11.17 수리 (Accepted) 1-1-2015-1117677-33
4 선행기술조사의뢰서
Request for Prior Art Search
2016.09.09 수리 (Accepted) 9-1-9999-9999999-89
5 선행기술조사보고서
Report of Prior Art Search
2016.11.03 수리 (Accepted) 9-1-2016-0045279-17
6 의견제출통지서
Notification of reason for refusal
2016.11.17 발송처리완료 (Completion of Transmission) 9-5-2016-0828406-12
7 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2017.01.13 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2017-0042255-99
8 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2017.01.13 수리 (Accepted) 1-1-2017-0042260-17
9 등록결정서
Decision to grant
2017.05.29 발송처리완료 (Completion of Transmission) 9-5-2017-0374880-04
10 [출원서등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2017.06.08 수리 (Accepted) 1-1-2017-0543931-18
11 출원인정보변경(경정)신고서
Notification of change of applicant's information
2017.07.31 수리 (Accepted) 4-1-2017-5121238-85
12 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.10.31 수리 (Accepted) 4-1-2019-5227894-37
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
포즈 추정 기반 포즈변화에 강인한 얼굴 인식 방법으로서,(1) 미리 설정된 학습 동영상으로부터 검출된 복수 포즈의 얼굴 이미지를 저장하여 데이터베이스화 하는 단계;(2) 상기 데이터베이스화로 저장된 복수 포즈의 얼굴 이미지 각각에 대해, 주성분 분석법(PCA) 알고리즘을 이용한 차원 축소의 전처리를 수행하는 단계;(3) 상기 단계 (2)에서 전처리된 데이터를 다항식 기반 RBFNNSs(Radial Basis Function Neural Networks) 패턴 분류기에 입력하여 각 포즈 데이터를 학습시키는 단계;(4) 입자군집 최적화 알고리즘(PSO: Particle Swarm Optimization)을 이용하여 상기 각 포즈별 데이터에 대해 최적화된 파라미터를 획득하는 단계;(5) 상기 단계 (1) 내지 단계 (4)를 통해 학습과정이 종료된 후, 미리 설정된 테스트 동영상으로부터 검출된 테스트 얼굴 이미지에 대해, 2방향 2차원 주성분분석법(2-Directional 2-Dimensional Principal Component Analysis) 알고리즘을 이용한 차원 축소의 전처리가 수행되는 단계;(6) 상기 단계 (5)를 통해 차원 축소의 전처리가 수행된 테스트 얼굴 이미지에 대해 유사 포즈를 추정하여 검출하는 단계; 및(7) 상기 검출된 유사 포즈를 상기 단계 (1) 내지 (4)의 학습과정을 통해 획득된 최적화된 파라미터에 적용하여 테스트 얼굴 이미지를 인식 대상으로 판정하는 단계를 포함하되,상기 단계 (1)에서는,얼굴 인식에 사용될 복수의 인원에 대한 영상 이미지에서, 각 1인당 5개의 포즈로 구성되고, 각 포즈의 이미지 내에 포즈 당 5개의 이미지를 영상 내에서 임의로 추출하여 구성된 복수 포즈의 얼굴 이미지를 저장하여 데이터베이스화 하되, 얼굴 이미지의 형상은 각 포즈 각도 변화(좌 90°, 좌 45°, 정면, 우 45°, 우 90°)에 따라 5가지 얼굴 형상으로 획득되고, 영상에서 추출된 이미지의 크기는 90×90의 크기로 구성되며,상기 단계 (5)에서는,2방향 2차원 주성분분석법 알고리즘을 이용하여 행 방향으로 차원을 줄인 (2D)PCA와 열 방향으로 차원을 줄인 (2D)PCA의 특징 행렬의 벡터 중에서 가장 큰 주성분만을 추출하여 차원을 줄이고,상기 단계 (6)에서는,Multi-Space PCA를 이용하여 얼굴 포즈를 분류하기 전에, 편주(yaw) 각도(± 90°, ± 45°, 0°)에 따라 분류된 이미지로 DB를 구성하고, 각 포즈별로 PCA를 수행하여 포즈별 고유 얼굴 벡터를 갖는 Multi-Space PCA 공간을 구성하며, 테스트하려는 얼굴 이미지를 각 PCA 공간으로 투영하여 그 거리를 계산하고 최소 거리를 갖는 포즈를 분류하여 유사 포즈를 검출하는 것을 특징으로 하는, 포즈 추정 기반 포즈변화에 강인한 얼굴 인식 방법
2 2
제1항에 있어서, 상기 단계 (2)에서는,(2-1) 상기 복수 포즈의 얼굴 이미지에 대한 인식후보의 얼굴 벡터 집합을 구성하는 단계;(2-2) 상기 얼굴 이미지의 벡터 집합의 평균과 분산을 기준으로 얼굴 이미지를 정규화로 수행하는 단계;(2-3) 상기 얼굴 이미지의 벡터 집합으로부터 평균 얼굴 벡터를 계산하여 산출하는 단계;(2-4) 상기 얼굴 이미지의 인식후보 얼굴 벡터와 평균 얼굴 벡터와의 차이 벡터를 계산하여 산출하는 단계;(2-5) 상기 산출된 차이 벡터를 이용하여 얼굴 이미지의 인식후보 얼굴에서 공분산 행렬을 계산하여 산출하는 단계; 및(2-6) 상기 공분산 행렬의 M개의 고유벡터에서 가장 큰 고유값을 갖는 M'개만을 선택하고, 각 인식후보 얼굴과 고유벡터와의 사영을 통해 가중치를 획득하는 단계를 포함하는 것을 특징으로 하는, 포즈 추정 기반 포즈변화에 강인한 얼굴 인식 방법
3 3
제1항에 있어서, 상기 단계 (3)에서는,상기 전처리된 포즈별 데이터를 FCM(Fuzzy C-Means) 클러스터링 알고리즘을 이용하여 데이터와 각 클러스터와의 거리를 기준으로 소속정도를 측정하여 데이터를 분류하되,상기 단계 (3)에서의 데이터 분류는,(3-1) 클러스터의 개수 및 퍼지화 계수를 선택하고, 소속 함수를 초기화하는 단계;(3-2) 각 클러스터에 대한 중심 벡터를 산출하여 구하는 단계;(3-3) 상기 중심 벡터와 각각의 테이터와의 거리를 계산하여 새로운 소속 함수를 계산하여 산출하는 단계; 및(3-4) 상기 소속 함수 및 새로운 소속 함수의 오차가 허용범위 안에 도달하면 알고리즘을 종료하고, 오차가 허용범위 안에 도달하지 않으면 상기 단계 (3-2)로 진행하여 반복하는 단계를 포함하는 것을 특징으로 하는, 포즈 추정 기반 포즈변화에 강인한 얼굴 인식 방법
4 4
제1항에 있어서, 상기 단계 (4)에서의 최적화된 파라미터는,퍼지화 계수, 연결가중치의 다항식 타입, 노드의 수, 및 축소되는 차원의 수를 포함하고,상기 연결가중치의 다항식 타입은,1차 선형 추론 타입과, 2차 선형 추론 타입, 및 변형된 2차 선형 추론 타입을 포함하며,상기 단계 (4)에서는,지역학습 방법의 가중최소자승법(Weighted Least Square Estimator)을 사용하여 각 규칙에 대한 파라미터를 독립적으로 산술하여 구하는 것을 특징으로 하는, 포즈 추정 기반 포즈변화에 강인한 얼굴 인식 방법
5 5
삭제
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 경기도 수원대학교 경기도 지역협력연구센터 육성 지원 사원 고급 Neuro-Fuzzy 기술 기반 산업 보안 객체 인식 시스템 및 사회 안전망 구축을 위한 지능 제어 시스템 연구
2 미래창조과학부 수원대학교 중견 연구자 지원 사업 Type-n 고급 컴퓨터 지능 기술의 합성과 설계 방법론의 개발 및 실적용