맞춤기술찾기

이전대상기술

영상 기반의 운전자 졸음 인식 시스템 및 그 인식 방법(System and the method for recognizing drowsiness)

  • 기술번호 : KST2016017425
  • 담당센터 : 광주기술혁신센터
  • 전화번호 : 062-360-4654
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 운전자를 촬영한 영상에서 눈 영역을 검출하고, 검출된 눈 영역의 두께에 따라 개폐 상태를 인식하고 졸음 여부를 판단할 수 있는 운전자 졸음 인식 시스템 및 그 인식 방법에 관한 것으로, 본 발명에 따른 영상 기반의 운전자 졸음 인식 방법은 (a) 영역 검출부를 이용하여, 입력된 운전자의 얼굴 영상에서 얼굴 영역과 눈 영역을 검출하는 단계, (b) 상태 판단부를 이용하여, 검출된 상기 눈 영역의 두께로 눈 개폐 상태를 판단하는 단계 및 (c) 시간의 흐름에 따른 눈 개폐 상태의 패턴을 분석하여, 운전자의 졸음 여부를 판단하는 단계를 포함하는 것을 특징으로 한다.
Int. CL G06K 9/00 (2006.01)
CPC G06K 9/00845(2013.01) G06K 9/00845(2013.01) G06K 9/00845(2013.01)
출원번호/일자 1020150042181 (2015.03.26)
출원인 조선대학교산학협력단
등록번호/일자 10-1669447-0000 (2016.10.20)
공개번호/일자 10-2016-0115119 (2016.10.06) 문서열기
공고번호/일자 (20161109) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2015.03.26)
심사청구항수 3

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 조선대학교산학협력단 대한민국 광주광역시 동구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 반성범 대한민국 대전광역시 유성구
2 신주현 대한민국 광주광역시 북구
3 최원웅 대한민국 광주광역시 광산구
4 채승훈 대한민국 전라남도 담양군

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인충정 대한민국 서울특별시 강남구 역삼로***,*층(역삼동,성보역삼빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 조선대학교산학협력단 광주광역시 동구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2015.03.26 수리 (Accepted) 1-1-2015-0295690-23
2 출원인정보변경(경정)신고서
Notification of change of applicant's information
2015.08.10 수리 (Accepted) 4-1-2015-5106192-07
3 선행기술조사의뢰서
Request for Prior Art Search
2016.03.11 수리 (Accepted) 9-1-9999-9999999-89
4 선행기술조사보고서
Report of Prior Art Search
2016.04.20 발송처리완료 (Completion of Transmission) 9-6-2016-0046050-10
5 의견제출통지서
Notification of reason for refusal
2016.04.21 발송처리완료 (Completion of Transmission) 9-5-2016-0292912-31
6 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2016.06.17 수리 (Accepted) 1-1-2016-0584040-13
7 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2016.06.17 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2016-0584090-85
8 등록결정서
Decision to grant
2016.10.18 발송처리완료 (Completion of Transmission) 9-5-2016-0746364-92
9 출원인정보변경(경정)신고서
Notification of change of applicant's information
2017.12.06 수리 (Accepted) 4-1-2017-5199091-10
10 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.03.26 수리 (Accepted) 4-1-2020-5071333-01
11 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.04.17 수리 (Accepted) 4-1-2020-5088703-88
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
운전자의 얼굴 영상을 촬영하여 출력하는 이미지 출력부;출력된 상기 영상에서 운전자의 얼굴 영역과 눈 영역을 검출하는 영역 검출부 및 검출된 상기 눈 영역의 두께로 눈 개폐 상태 및 졸음 여부를 판단하는 상태 판단부를 포함하고,상기 이미지 출력부는,촬영된 운전자의 얼굴 영상을 실시간으로 입력하는 실시간 영상 입력부 및입력된 운전자의 얼굴 영상에 관하여 명도에 따라 영상 보정 처리(Histogram equalization)하는 제1영상 보정부를 포함하며,상기 영역 검출부는,하르-라이크(Haar-like), 아다부스트(Adaboost), 케스케이드(Cascade) 알고리즘 중 적어도 어느 하나 이상의 알고리즘을 적용하여, 운전자의 얼굴 영상에서 얼굴 영역과 눈 영역을 추출하는 얼굴과 눈 영역 추출부;추출된 상기 눈 영역과 후보 영역을 CIE L*a*b 색상 공간 영역으로 변환하여, 눈 윤곽선을 검출하는 윤곽선 검출부 및 눈 영역을 이진화한 후, 라벨링 기법으로 눈 영역 이외에 후보 영역을 제거하는 후보 영역 제거부를 포함하고,상기 상태 판단부는,검출된 눈 영역의 두께 분포 값을 분석하여 눈의 개폐 상태를 판단하는 개폐상태 판단부 및눈의 개폐 상태에 따른 시간 패턴으로 졸음여부를 판단하는 졸음 판단부를 포함하며,상기 개폐 상태 판단부는,검출된 눈 영역을 X축(가로 방향)으로 1픽셀 씩 이동한 후, Y축(세로 방향)으로 투영하여 눈 영역의 두께 분포를 측정하여 프로젝션(projection) 결과를 산출하고, 상기 프로젝션(projection) 결과와 눈 영역의 전체 픽셀 개수를 2차원 K-means 알고리즘으로 학습하여 눈 개폐 상태를 판단하는 것을 특징으로 하는 영상 기반의 운전자 졸음 인식 시스템
2 2
삭제
3 3
삭제
4 4
제1항에 있어서,상기 영역 검출부는,상기 얼굴과 눈 영역 추출부와 연결되어, 검출된 눈 영역을 보정 처리하는 제2영상 보정부를 더 포함하는 것을 특징으로 하는 영상 기반의 운전자 졸음 인식 시스템
5 5
삭제
6 6
삭제
7 7
(a) 영역 검출부를 이용하여, 입력된 운전자의 얼굴 영상에서 얼굴 영역과 눈 영역을 검출하는 단계; (b) 상태 판단부를 이용하여, 검출된 상기 눈 영역의 두께로 눈 개폐 상태를 판단하는 단계 및 (c) 시간의 흐름에 따른 눈 개폐 상태의 패턴을 분석하여, 운전자의 졸음 여부를 판단하는 단계를 포함하고,상기 (a) 단계는,얼굴과 눈 영역 추출부를 이용하여, 하르-라이크(Haar-like), 아다부스트(Adaboost), 케스케이드(Cascade) 알고리즘 중 적어도 어느 하나 이상의 알고리즘을 적용하여, 운전자의 얼굴 영상에서 얼굴 영역과 눈 영역을 추출하는 단계;윤곽선 검출부를 이용하여, 추출된 상기 눈 영역과 후보 영역을 CIE L*a*b 색상 공간 영역으로 변환하여, 눈 윤곽선을 검출하는 단계;후보 영역 제거부를 이용하여, 눈 영역을 이진화하는 단계 및라벨링 기법으로 눈 영역 이외에 후보 영역을 제거하는 단계를 포함하며,상기 (b) 단계는,검출된 눈 영역을 X축(가로 방향)으로 1픽셀 씩 이동한 후, Y축(세로 방향)으로 투영하여 눈 영역의 두께 분포를 측정하여 프로젝션(projection) 결과를 산출하고, 상기 프로젝션(projection) 결과와 눈 영역의 전체 픽셀 개수를 2차원 K-means 알고리즘으로 학습하여 눈 개폐 상태를 판단하는 단계를 포함하며,상기 (a) 단계 이전에,(d) 이미지 출력부를 이용하여, 촬영된 운전자의 얼굴 영상을 입력하는 단계를 더 포함하고,상기 (d) 단계는,실시간 영상 입력부를 이용하여, 촬영된 운전자의 얼굴 영상을 실시간으로 입력하는 단계 및입력된 운전자의 얼굴 영상에 관하여 명도에 따라 영상 보정 처리하는 단계를 포함하는 것을 특징으로 하는 영상 기반의 운전자 졸음 인식 방법
8 8
삭제
9 9
삭제
10 10
삭제
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 LINC사업단 조선대학교 산학협력단 LINC 산학공동기술개발과제 지능형 블랙박스에 적용 가능한 프라이버시 보호 및 상황인지 기술개발