맞춤기술찾기

이전대상기술

얼굴 인식 및 온도 감지를 이용한 모니터링 시스템 및 그 동작방법

  • 기술번호 : KST2023005801
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템 및 그 동작방법에 관한 것으로, 열화상 카메라의 영상을 기반으로 경량화된 딥러닝 알고리즘을 이용하여 얼굴을 인식하고, 인식된 얼굴에 대하여 거리를 예측하여 온도를 감지함으로써 그 상태를 감시함으로써, 경량화된 딥러닝 기술을 통해 적은 자원으로 열화상 카메라의 영상에 대한 복잡한 작업을 수행할 수 있고, 얼굴이 인식된 대상에 대하여 측정된 온도와, 거리에 따른 온도를 빠르게 추론하여 실시간으로 인식된 대상에 대한 정보를 획득할 수 있고, 대상에 대한 정보를 효율적으로 관리할 수 있다.
Int. CL G06N 3/08 (2023.01.01) G06N 3/04 (2023.01.01) H04N 7/18 (2023.01.01) G06V 40/16 (2022.01.01) G01J 5/00 (2022.01.01) G01J 5/48 (2006.01.01)
CPC G06N 3/082(2013.01) G06N 3/04(2013.01) H04N 7/18(2013.01) G06V 40/172(2013.01) G01J 5/0025(2013.01) G01J 5/48(2013.01)
출원번호/일자 1020210190797 (2021.12.29)
출원인 금오공과대학교 산학협력단, 고려대학교 세종산학협력단, 서울과학기술대학교 산학협력단
등록번호/일자
공개번호/일자 10-2023-0101042 (2023.07.06) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 공개
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2021.12.29)
심사청구항수 20

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 금오공과대학교 산학협력단 대한민국 경상북도 구미시
2 고려대학교 세종산학협력단 대한민국 세종특별자치시
3 서울과학기술대학교 산학협력단 대한민국 서울특별시 노원구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 에릭 경북 구미시
2 제임스 경북 구미시
3 안젤라 경북 구미시
4 임완수 경북 구미시
5 김상호 경북 구미시
6 황한정 세종특별자치시
7 정진우 서울시 노원구
8 정유철 경북 구미시

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인아주 대한민국 서울특별시 강남구 강남대로 ***, **,**층(역삼동, 동희빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2021.12.29 수리 (Accepted) 1-1-2021-1520846-03
2 보정요구서
Request for Amendment
2022.01.03 발송처리완료 (Completion of Transmission) 1-5-2022-0001407-93
3 [출원서 등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2022.01.04 수리 (Accepted) 1-1-2022-0008455-99
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
촬영 대상의 열을 복수의 색상으로 시각화하는 열화상 카메라;상기 열화상 카메라의 영상데이터에 대한 최적화된 학습 모델을 생성하는 학습부;상기 학습 모델을 기반으로 상기 열화상 카메라로부터 입력되는 상기 영상데이터로부터 상기 촬영 대상의 얼굴을 인식하는 얼굴인식부;얼굴 인식된 상기 촬영 대상에 대한 온도를 산출하는 온도산출부; 및얼굴 인식된 상기 촬영 대상에 대한 얼굴정보와 온도정보를 매칭하여 상기 촬영 대상의 상태를 감시하는 제어부; 를 포함하고, 상기 학습부는 상기 영상데이터에 대한 초기 모델을 생성한 후, 상기 초기 모델에 대한 데이터를 구축하고 파라미터를 설정한 후, 가중치 정리 및 양자화를 통해 상기 초기 모델에 대한 훈련 및 최적화를 반복하여 최적화된 상기 학습 모델을 생성하는 것을 특징으로 하는 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템
2 2
제 1 항에 있어서, 상기 학습부는, 통합 계단식 합성곱 신경망(CNN) 기반 프레임워크인, 경량화된 MTCNN(Multi Task cascaded CNN)을 기반으로 상기 영상데이터를 처리하는 것을 특징으로 하는 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템
3 3
제 1 항에 있어서, 상기 학습부는 제안 네트워크(P-Net, Proposal Network), 개선 네트워크(R-Net, Refine Network), 출력 네트워크(O-Net, Output Network)를 이용하여 얼굴 인식을 위한 상기 초기 모델을 생성하는 것을 특징으로 하는 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템
4 4
제 1 항에 있어서, 상기 학습부는 복수의 영상에 라벨이 지정된 경계 상자를 구성한 와이더 페이스(WIDER FACE)를 생성하여 저장하고, 얼굴 랜드마크를 주석으로 설정한 복수의 영상으로 합성곱 신경망 페이스 포인트(CNN Face Point)를 설정하여, 이미지 매트릭스로 변환하여 얼굴인식을 위한 상기 데이터를 구축하는 것을 특징으로 하는 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템
5 5
제 4 항에 있어서, 상기 학습부는 상기 이미지 매트릭스의 축을 CHW(Channel Width Height)에서 HWC(Height Width Channel)로 전환하고, 이미지 크기를 조정하는 것을 특징으로 하는 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템
6 6
제 1 항에 있어서, 상기 학습부는 훈련 과정을 위한 파라미터를 설정하고, 제안 네트워크(P-Net, Proposal Network), 개선 네트워크(R-Net, Refine Network), 출력 네트워크(O-Net, Output Network)에 대해 프로세스를 반복하여 상기 훈련 및 상기 최적화를 반복하는 것을 특징으로 하는 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템
7 7
제 1 항에 있어서, 상기 학습부는 상기 영상데이터의 형상을 추출하고, 추출된 형상을 모델에 적용하여 가중치 정리(Pruning) 및 양자화를 반복하여 상기 훈련 및 상기 최적화를 반복하여 최적화된 상기 학습 모델을 생성하는 것을 특징으로 하는 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템
8 8
제 7 항에 있어서, 상기 학습부는 냅색 알고리즘(Knapsack algorithm)을 기반으로 상기 가중치 정리 및 상기 양자화를 수행하는 것을 특징으로 하는 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템
9 9
제 1 항에 있어서, 상기 얼굴인식부는 상기 영상데이터로부터 인식되는 형상 및 상기 형상의 크기를 기반으로 사람과 사람외의 대상을 구분하는 것을 특징으로 하는 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템
10 10
제 1 항에 있어서, 상기 온도산출부는 상기 얼굴인식부를 통해 인식된 상기 촬영 대상의 형상의 크기 또는 복수의 영상데이터에서의 크기 변화를 기반으로 상기 촬영 대상과의 거리를 산출하고, 상기 영상데이터의 온도값과 상기 거리를 기반으로, 특정 거리에 대한 값으로 변환하여 상기 촬영 대상의 온도를 산출하는 것을 특징으로 하는 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템의 동작방법
11 11
열화상 카메라를 통해 촬영 대상을 촬영하여, 열을 복수의 색상으로 시각화한 영상데이터를 수신하는 단계; 상기 영상데이터를 포함하는 복수의 영상데이터를 기반으로 열화상데이터에 대한 초기 모델을 생성하는 단계;상기 초기 모델에 대한 데이터를 구축하고 파라미터를 설정한 후, 가중치 정리 및 양자화를 통해 상기 초기 모델에 대한 훈련 및 최적화를 반복하여 최적화된 학습 모델을 생성하는 단계; 상기 학습 모델을 기반으로 상기 영상데이터로부터 상기 촬영 대상의 얼굴을 인식하는 단계;얼굴 인식된 상기 촬영 대상에 대한 온도를 산출하는 단계; 및얼굴 인식된 상기 촬영 대상에 대한 얼굴정보와 온도정보를 매칭하여 상기 촬영 대상의 상태를 감시하는 단계; 를 포함하는 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템의 동작방법
12 12
제 11 항에 있어서, 상기 학습 모델을 생성하는 단계는, 통합 계단식 합성곱 신경망(CNN) 기반 프레임워크인, 경량화된 MTCNN(Multi Task cascaded CNN)을 기반으로 상기 영상데이터를 처리하는 것을 특징으로 하는 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템의 동작방법
13 13
제 11 항에 있어서, 상기 학습 모델을 생성하는 단계는, 복수의 영상에 라벨이 지정된 경계 상자를 구성한 와이더 페이스(WIDER FACE)를 생성하여 저장하고, 얼굴 랜드마크를 주석으로 설정한 복수의 영상으로 합성곱 신경망 페이스 포인트(CNN Face Point)를 설정하여, 이미지 매트릭스로 변환하여 얼굴인식을 위한 상기 데이터를 구축하는 것을 특징으로 하는 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템의 동작방법
14 14
제 11 항에 있어서, 상기 학습 모델을 생성하는 단계는, 훈련 과정을 위한 파라미터를 설정하고, 제안 네트워크(P-Net, Proposal Network), 개선 네트워크(R-Net, Refine Network), 출력 네트워크(O-Net, Output Network)에 대해 프로세스를 반복하여 상기 훈련 및 상기 최적화를 반복하는 것을 특징으로 하는 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템의 동작방법
15 15
제 11 항에 있어서, 상기 학습 모델을 생성하는 단계는, 상기 영상데이터의 형상을 추출하고, 추출된 형상을 모델에 적용하여 가중치 정리(Pruning) 및 양자화를 반복하여 상기 훈련 및 상기 최적화를 반복하여 최적화된 상기 학습 모델을 생성하는 것을 특징으로 하는 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템의 동작방법
16 16
제 15 항에 있어서, 상기 학습 모델을 생성하는 단계는, 냅색 알고리즘(Knapsack algorithm)을 기반으로 상기 가중치 정리 및 상기 양자화를 수행하는 것을 특징으로 하는 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템의 동작방법
17 17
제 11 항에 있어서, 상기 초기 모델을 생성하는 단계는, 제안 네트워크(P-Net, Proposal Network), 개선 네트워크(R-Net, Refine Network), 출력 네트워크(O-Net, Output Network)를 이용하여 얼굴 인식을 위한 상기 초기 모델을 생성하는 것을 특징으로 하는 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템의 동작방법
18 18
제 11 항에 있어서, 상기 촬영 대상의 얼굴을 인식하는 단계는, 상기 학습 모델을 기반으로 상기 영상데이터로부터 복수의 경계 박스를 설정하는 단계;상기 복수의 경계 박스 중 얼굴 영역이 아닌 경계 박스를 제외하는 단계;상기 복수의 경계 박스에 포함되는 얼굴 영역에 대하여 얼굴 랜드마크를 설정하는 단계; 및상기 얼굴 랜드마크를 기반으로 상기 촬영 대상의 얼굴을 인식하는 단계; 를 포함하는 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템의 동작방법
19 19
제 11 항에 있어서, 상기 온도를 산출하는 단계는, 상기 촬영 대상의 형상의 크기 또는 복수의 영상데이터에서의 크기 변화를 기반으로 상기 촬영 대상과의 거리를 산출하는 단계; 및상기 영상데이터의 온도값과 상기 거리를 기반으로, 특정 거리에 대한 값으로 변환하여 상기 촬영 대상의 온도를 산출하는 단계; 를 포함하는 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템의 동작방법
20 20
제 11 항에 있어서, 상기 감시하는 단계는, 상기 촬영 대상에 대한 상기 얼굴정보와 상기 온도정보를 포함하는 데이터를 저장하는 단계;상기 온도정보가 기 설정된 범위를 벗어나는 경우, 상기 촬영 대상의 건상에 이상이 있는 것으로 판단하여 경고를 출력하는 단계; 및 상기 얼굴정보와 상기 온도정보를 포함하는 신고데이터를 생성하여 기 등록된 서버로 전송하는 단계; 를 더 포함하는 얼굴 인식 및 온도 감지를 이용한 모니터링 시스템의 동작방법
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 중소벤처기업부 금오공과대학교 2020년도 산학협력 거점형 플랫폼(R&D) 시행계획 공고 슈퍼커패시터 에너지팩에 최적화된 IoT기반 지능형 태양광 가로등 제어시스템 개발
2 과학기술정보통신부 금오공과대학교 기초연구실지원사업 인공지능 기반 사용자 감응형 인터랙션 연구실