맞춤기술찾기

이전대상기술

운전자 눈동자 검출을 이용한 졸음 운전 방지 방법 및 장치

  • 기술번호 : KST2015219596
  • 담당센터 : 경기기술혁신센터
  • 전화번호 : 031-8006-1570
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 카메라로부터 촬영된 운전자의 얼굴이미지로부터 할라이크 특징(Haar-like feature)을 이용하여 운전자 눈동자 영역을 검출하고, 아다부스트(AdaBoost) 학습알고리즘을 이용하여 검출된 눈동자 영역의 판단율을 높이고, 검출된 눈동자의 이진화 및 대칭성 판단을 통하여 눈동자 크기 및 원형도에 근거하여 졸음 운전을 판단하여 경보신호를 출력함으로써, 운전자 눈동자 검출을 이용한 졸음 운전 방지 방법 및 장치에 관한 것으로서, 운전자의 얼굴을 촬영하는 카메라부; 상기 카메라부에 의해 촬영된 얼굴로부터 눈동자 영역 데이터를 검출하는 이미지 검출부; 상기 이미지 검출부에 의해 검출된 눈동자가 정상상태인 경우 저장하는 저장부; 및 상기 카메라부, 상기 이미지 검출부, 상기 저장부를 제어하여, 상기 이미지 검출부로부터 보내오는 졸음상태의 눈동자 영역 데이터를 상기 저장부의 정상상태의 눈동자 영역 데이터와 비교하여 졸음여부판단결과를 출력하는 제어부를 포함하여, 카메라를 부착한 내비게이터 등에 적용되어 차량 내 운전자의 졸음운전을 방지하여 안전운전을 도모할 수 있다.
Int. CL G06K 9/00 (2006.01) B60K 28/02 (2006.01)
CPC G06K 9/00845(2013.01) G06K 9/00845(2013.01) G06K 9/00845(2013.01) G06K 9/00845(2013.01)
출원번호/일자 1020100047664 (2010.05.20)
출원인 수원대학교산학협력단
등록번호/일자 10-1139963-0000 (2012.04.18)
공개번호/일자 10-2011-0128059 (2011.11.28) 문서열기
공고번호/일자 (20120711) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 소멸
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2010.05.20)
심사청구항수 8

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 수원대학교산학협력단 대한민국 경기도 화성시

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 홍기천 대한민국 경기도 성남시 분당구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 리앤목특허법인 대한민국 서울 강남구 언주로 **길 **, *층, **층, **층, **층(도곡동, 대림아크로텔)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 수원대학교산학협력단 경기도 화성시
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2010.05.20 수리 (Accepted) 1-1-2010-0326260-48
2 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2010.06.07 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2010-0364147-77
3 [출원서등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2010.06.07 수리 (Accepted) 1-1-2010-0364143-95
4 선행기술조사의뢰서
Request for Prior Art Search
2011.02.11 수리 (Accepted) 9-1-9999-9999999-89
5 선행기술조사보고서
Report of Prior Art Search
2011.03.21 수리 (Accepted) 9-1-2011-0027445-06
6 의견제출통지서
Notification of reason for refusal
2011.08.25 발송처리완료 (Completion of Transmission) 9-5-2011-0478394-14
7 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2011.10.13 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2011-0800706-30
8 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2011.10.13 수리 (Accepted) 1-1-2011-0800705-95
9 등록결정서
Decision to grant
2012.02.24 발송처리완료 (Completion of Transmission) 9-5-2012-0109658-42
10 출원인정보변경(경정)신고서
Notification of change of applicant's information
2013.04.26 수리 (Accepted) 4-1-2013-0015927-38
11 출원인정보변경(경정)신고서
Notification of change of applicant's information
2013.04.29 수리 (Accepted) 4-1-2013-5064186-89
12 출원인정보변경(경정)신고서
Notification of change of applicant's information
2013.04.30 수리 (Accepted) 4-1-2013-5064729-71
13 출원인정보변경(경정)신고서
Notification of change of applicant's information
2014.06.19 수리 (Accepted) 4-1-2014-5074151-16
14 출원인정보변경(경정)신고서
Notification of change of applicant's information
2017.07.31 수리 (Accepted) 4-1-2017-5121238-85
15 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.10.31 수리 (Accepted) 4-1-2019-5227894-37
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
삭제
2 2
차량 운전 중 운전자의 졸음 운전 방지 장치에 있어서, 운전자의 얼굴을 촬영하는 카메라부; 상기 카메라부에 의해 촬영된 얼굴로부터 눈동자 영역 데이터를 검출하는 이미지 검출부; 상기 이미지 검출부에 의해 검출된 눈동자가 정상상태인 경우 저장하는 저장부; 및 상기 카메라부, 상기 이미지 검출부, 상기 저장부를 제어하여, 상기 이미지 검출부로부터 보내오는 졸음상태의 눈동자 영역 데이터를 상기 저장부의 정상상태의 눈동자 영역 데이터와 비교하여 졸음여부판단결과를 출력하는 제어부를 포함하며, 상기 제어부는 촬영된 운전자의 얼굴로부터 할라이크 특징(Haar-like feature)을 이용하여 운전자 눈동자 영역을 검출하고, 아다부스트(AdaBoost) 학습알고리즘을 이용하여 검출된 눈동자 영역의 판단율을 높이고, 검출된 눈동자의 이진화 및 대칭성 판단을 통하여 눈동자 크기 및 원형도에 근거하여 졸음 운전을 판단하는 것을 특징으로 하는 운전자 눈동자 검출을 이용한 졸음 운전 방지 장치
3 3
차량 운전 중 운전자의 졸음 운전 방지 장치에 있어서, 운전자의 얼굴을 촬영하는 카메라부; 상기 카메라부에 의해 촬영된 얼굴로부터 눈동자 영역 데이터를 검출하는 이미지 검출부; 상기 이미지 검출부에 의해 검출된 눈동자가 정상상태인 경우 저장하는 저장부; 및 상기 카메라부, 상기 이미지 검출부, 상기 저장부를 제어하여, 상기 이미지 검출부로부터 보내오는 졸음상태의 눈동자 영역 데이터를 상기 저장부의 정상상태의 눈동자 영역 데이터와 비교하여 졸음여부판단결과를 출력하는 제어부를 포함하며, 상기 제어부는 상기 촬영된 운전자의 얼굴로부터 눈동자 영역 데이터를 검출하기 전에, 할라이크 특징(Haar-like feature)을 이용하여 얼굴 영역 데이터를 검출하고, 아다부스트(AdaBoost) 학습알고리즘을 이용하여 검출된 얼굴 영역의 판단율을 높이고, 그 검출된 얼굴 영역 데이터로부터 상기 눈동자 영역 데이터를 검출하는 것을 특징으로 하는 운전자 눈동자 검출을 이용한 졸음 운전 방지 장치
4 4
제2항 또는 제3항에 있어서, 상기 제어부는 RGB 컬러공간 영상을 이용하는 대신 명도값을 따로 검출하기에 용이한 Lab 컬러공간영상으로 변환하고, 명도값은 실제 조명의 상태와는 차이가 있기 때문에, 실제 조명의 상태에 맞게 변환하고자 메디안 필터링(Median Filtering)을 적용하여, 이런 일련의 과정을 통해 검출된 조명에 역상을 취하여 원 이미지와 합성함으로써 조명의 편차값을 줄이는 조명 보정을 수행하는 것을 특징으로 운전자 눈동자 검출을 이용한 졸음 운전 방지 장치
5 5
제2항 또는 제3항에 있어서, 상기 제어부는 임계치로 이진화된 영상에서 사용되는 방식으로써 순차적으로 인접 픽셀들을 검색, 인접한 같은 픽셀들로 구성된 영역에 같은 라벨을 붙이는 라벨링 기법을 사용하여 붙여진 라벨값에 따라 영역이 나눠지고, 나눠진 영역의 특징에 따라 특정 라벨(Label)을 선택하고, 다른 라벨들을 제거함으로써 검출하고자 하는 눈동자 영역 외의 다른 노이즈 영역을 제거하는 라벨링을 수행하는 것을 특징으로 운전자 눈동자 검출을 이용한 졸음 운전 방지 장치
6 6
삭제
7 7
삭제
8 8
차량 운전 중 운전자의 졸음 운전 방지 방법에 있어서, 운전자의 얼굴을 촬영하는 얼굴촬영단계(S200); 상기 얼굴촬영단계에서 촬영된 얼굴 데이터로부터 얼굴영역을 검출하는 얼굴영역 검출단계(S210); 상기 검출된 얼굴 영역으로부터 눈동자 영역 데이터를 검출하는 눈동자 영역 데이터 검출하여, 상기 검출된 눈동자가 정상상태인 경우 저장하는 눈동자 영역 데이터 검출 및 저장단계(S220); 상기 눈동자 영역 데이터 검출 및 저장단계(S220)에서 상기 정상상태 눈동자 영역 데이터를 저장하면, 상기 얼굴영역 검출단계(S210)로부터 졸음상태의 눈동자 영역 데이터를 검출하는 단계(S230), 상기 졸음상태 눈동자 영역 데이터와 상기 저장된 정상상태의 눈동자 영역 데이터와 비교하여 졸음여부판단결과를 출력하는 졸음판단단계(S240)를 포함하며, 상기 졸음판단단계(S240)는 상기 촬영된 운전자의 얼굴로부터 할라이크 특징(Haar-like feature)을 이용하여 운전자 눈동자 영역을 검출하고, 아다부스트(AdaBoost) 학습알고리즘을 이용하여 검출된 눈동자 영역의 판단율을 높이고, 검출된 눈동자의 이진화 및 대칭성 판단을 통하여 눈동자 크기 및 원형도에 근거하여 졸음 운전을 판단하는 것을 특징으로 하는 운전자 눈동자 검출을 이용한 졸음 운전 방지 방법
9 9
차량 운전 중 운전자의 졸음 운전 방지 방법에 있어서, 운전자의 얼굴을 촬영하는 얼굴촬영단계(S200); 상기 얼굴촬영단계에서 촬영된 얼굴 데이터로부터 얼굴영역을 검출하는 얼굴영역 검출단계(S210); 상기 검출된 얼굴 영역으로부터 눈동자 영역 데이터를 검출하는 눈동자 영역 데이터 검출하여, 상기 검출된 눈동자가 정상상태인 경우 저장하는 눈동자 영역 데이터 검출 및 저장단계(S220); 상기 눈동자 영역 데이터 검출 및 저장단계(S220)에서 상기 정상상태 눈동자 영역 데이터를 저장하면, 상기 얼굴영역 검출단계(S210)로부터 졸음상태의 눈동자 영역 데이터를 검출하는 단계(S230), 상기 졸음상태 눈동자 영역 데이터와 상기 저장된 정상상태의 눈동자 영역 데이터와 비교하여 졸음여부판단결과를 출력하는 졸음판단단계(S240)를 포함하며, 상기 졸음판단단계(S240)는 상기 촬영된 운전자의 얼굴로부터 눈동자 영역 데이터를 검출하기 전에, 할라이크 특징(Haar-like feature)을 이용하여 얼굴 영역 데이터를 검출하고, 아다부스트(AdaBoost) 학습알고리즘을 이용하여 검출된 얼굴 영역의 판단율을 높이고, 그 검출된 얼굴 영역 데이터로부터 상기 눈동자 영역 데이터를 검출하는 것을 특징으로 운전자 눈동자 검출을 이용한 졸음 운전 방지 방법
10 10
제8항 또는 제9항에 있어서, RGB 컬러공간 영상을 이용하는 대신 명도값을 따로 검출하기에 용이한 Lab 컬러공간영상으로 변환하고, 명도값은 실제 조명의 상태와는 차이가 있기 때문에, 실제 조명의 상태에 맞게 변환하고자 메디안 필터링(Median Filtering)을 적용하여, 이런 일련의 과정을 통해 검출된 조명에 역상을 취하여 원 이미지와 합성함으로써 조명의 편차값을 줄이는 조명 보정을 수행하는 단계를 더 포함하는 것을 특징으로 하는 운전자 눈동자 검출을 이용한 졸음 운전 방지 방법
11 11
제8항 또는 제9항에 있어서, 임계치로 이진화된 영상에서 사용되는 방식으로써 순차적으로 인접 픽셀들을 검색, 인접한 같은 픽셀들로 구성된 영역에 같은 라벨을 붙이는 라벨링 기법을 사용하여 붙여진 라벨값에 따라 영역이 나눠지고, 나눠진 영역의 특징에 따라 특정 라벨(Label)을 선택하고, 다른 라벨들을 제거함으로써 검출하고자 하는 눈동자 영역 외의 다른 노이즈 영역을 제거하는 라벨링을 수행하는 단계를 더 포함하는 것을 특징으로 하는 운전자 눈동자 검출을 이용한 졸음 운전 방지 방법
12 12
삭제
13 13
삭제
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 경기도 수원대학교 경기도 지역협력연구센터 육성 지원 사업 지능형 감시를 위한 이벤트 추출시스템 개발