맞춤기술찾기

이전대상기술

카메라 센서 기반의 자동차 상향등 자동 조절 시스템 및 그 방법

  • 기술번호 : KST2019030321
  • 담당센터 : 대구기술혁신센터
  • 전화번호 : 053-550-1450
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 카메라 센서 기반의 자동차 상향등 자동 조절 시스템에 관한 것으로서, 보다 구체적으로는 자동차 상향등 자동 조절 시스템으로서, 감지 센서부를 이용하여 상기 자동차의 주변 영상의 변화를 감지하는 카메라 센서모듈, 상기 카메라 센서모듈에서 감지된 상기 자동차의 주변 영상으로부터 전조등 및 후미등 분류 알고리즘을 적용하여 다른 자동차의 전조등 및 후미등을 검출하는 전조등 및 후미등 검출부, 및 상기 전조등 및 후미등 검출부에서 검출된 전조등 및 후미등을 이용하여 상기 자동차 상향등의 조절 여부를 판단하는 판단부로 구성되는 판단모듈, 및 상기 판단모듈에서 판단된 결과에 따라 상기 자동차 상향등이 조절되도록 제어하는 제어모듈을 포함하는 것을 그 구성상의 특징으로 한다.또한, 본 발명은 카메라 센서 기반의 자동차 상향등 자동 조절 시스템을 이용한 자동차 상향등 자동 조절 방법에 관한 것으로서, 보다 구체적으로는 자동차 상향등 자동 조절 시스템을 이용한 자동차 상향등 자동 조절 방법에 있어서, (1) 카메라 센서모듈의 감지 센서부가 자동차의 주변 영상의 변화를 감지하는 단계, (2) 판단모듈의 전조등 및 후미등 검출부가 상기 카메라 센서모듈에서 감지된 상기 자동차의 주변 영상으로부터 전조등 및 후미등 분류 알고리즘을 적용하여 다른 자동차의 전조등 및 후미등을 검출하는 단계, (3) 판단모듈의 판단부가 상기 전조등 및 후미등 검출부에서 검출된 전조등 및 후미등을 이용하여 상기 자동차 상향등의 조절 여부를 판단하는 단계, 및 (4) 제어모듈이, 상기 판단모듈의 판단부에서 판단된 결과에 따라 상기 자동차의 상향등이 조절되도록 제어하는 단계를 포함하는 것을 그 구성상의 특징으로 한다.본 발명에서 제안하고 있는 카메라 센서 기반의 자동차 상향등 자동 조절 시스템 및 그 방법에 따르면, 주변 영상의 변화를 감지하기 위한 감지 센서부, 및 감지된 주변 영상에 전조등 및 후미등 분류 알고리즘을 적용하는 전조등 및 후미등 검출부를 포함하는 판단모듈로 구성함으로써, 도로 표지판, 신호등, 가로등 등의 다양한 조명으로부터 다른 자동차의 전조등 및 후미등만을 정확히 검출할 수 있게 하여, 기존의 상향등 조절 관련 기술에서와 같이 가로등 등의 조명을 다른 자동차의 전조등 및 후미등으로 잘못 판단하여 자동차 상향등의 조도를 낮추거나 off시키는 문제가 발생되지 않도록 할 수 있다.또한, 본 발명에 따르면, 자동차의 이동 속도를 추출하는 OBD 센서모듈을 포함하여 구성함으로써, 자동차 이동 속도가 일정 속도 이상인 경우 고속 주행으로 분류하여 상향등의 작동이 되도록 하고, 일정 속도 이하인 경우 저속 주행으로 분류하여 하향등의 작동이 되도록 하여, 자동차의 실시간 이동 속도에 따라 상향등 또는 하향등이 작동될 수 있다.뿐만 아니라, 본 발명에 따르면, 상향등 불필요 지역 여부 판단부를 포함하여 구성함으로써, 상향등 불필요 지역 여부 판단부에서 상향등 불필요 지역으로 판단되는 경우 상향등을 off되도록 하고, 상향등 필요 지역으로 판단되는 경우 상향등을 on되도록 하여, 자동차의 상향등이 off되어도 네온사인 등에 의하여 전방 도로의 확인이 충분히 가능한 도심 지역의 경우에는 자동으로 상향등이 off되도록 할 수 있다.
Int. CL B60Q 1/06 (2006.01.01) B60Q 1/00 (2006.01.01) B60W 40/02 (2006.01.01)
CPC B60Q 1/06(2013.01) B60Q 1/06(2013.01) B60Q 1/06(2013.01) B60Q 1/06(2013.01) B60Q 1/06(2013.01) B60Q 1/06(2013.01)
출원번호/일자 1020170011353 (2017.01.24)
출원인 계명대학교 산학협력단
등록번호/일자 10-1859201-0000 (2018.05.11)
공개번호/일자
공고번호/일자 (20180518) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2017.01.24)
심사청구항수 16

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 계명대학교 산학협력단 대한민국 대구광역시 달서구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 고병철 대한민국 대구광역시 수성구
2 남재열 대한민국 대구광역시 수성구
3 곽충섭 대한민국 대구광역시 남구
4 김상준 대한민국 대구광역시 서구
5 허두영 대한민국 대구광역시 달서구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 김건우 대한민국 서울특별시 금천구 가산디지털*로 ***, 에이동 ***호 특허그룹덕원 (가산동, 우림 라이온스밸리)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 계명대학교 산학협력단 대구광역시 달서구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2017.01.24 수리 (Accepted) 1-1-2017-0086183-19
2 의견제출통지서
Notification of reason for refusal
2018.02.11 발송처리완료 (Completion of Transmission) 9-5-2018-0103058-46
3 출원인정보변경(경정)신고서
Notification of change of applicant's information
2018.03.21 수리 (Accepted) 4-1-2018-5049338-19
4 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2018.04.10 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2018-0356149-12
5 등록결정서
Decision to grant
2018.05.01 발송처리완료 (Completion of Transmission) 9-5-2018-0298447-10
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
자동차 상향등 자동 조절 시스템으로서,감지 센서부를 이용하여 상기 자동차의 주변 영상의 변화를 감지하는 카메라 센서모듈;상기 카메라 센서모듈에서 감지된 상기 자동차의 주변 영상으로부터 전조등 및 후미등 분류 알고리즘을 적용하여 다른 자동차의 전조등 및 후미등을 검출하는 전조등 및 후미등 검출부, 및 상기 전조등 및 후미등 검출부에서 검출된 전조등 및 후미등을 이용하여 상기 자동차 상향등의 조절 여부를 판단하는 판단부로 구성되는 판단모듈; 및상기 판단모듈에서 판단된 결과에 따라 상기 자동차 상향등이 조절되도록 제어하는 제어모듈을 포함하고,상기 판단모듈은,상기 카메라 센서모듈에서 감지된 주변 영상의 밝기 분포를 이용하여, 상향등 불필요 지역 여부를 판단하는 상향등 불필요 지역 여부 판단부를 더 포함하며,상기 제어모듈은,상기 상향등 불필요 지역 여부 판단부에서 상향등 불필요 지역으로 판단되면 상향등을 off시키되,상기 상향등 불필요 지역 여부 판단부는, 상기 카메라 센서모듈에서 감지된 상기 주변 영상의 상단 부분을 n×m 크기의 영역의 서브 블록으로 분할하고, 상기 분할된 각각의 서브 블록에서 밝기 값의 평균을 추정한 후, 미리 설정된 제1 임계값을 이용하여 상기 제1 임계값보다 큰 평균을 가지는 서브 블록만을 선택하고, 상기 선택된 서브 블록의 위치의 확산 분포(spread distribution)를 측정하여, 측정된 상기 확산 분포 값이 미리 설정된 제2 임계값보다 낮으면 상향등 필요 지역으로 판단하고, 상기 제2 임계값보다 높으면 상향등 불필요 지역으로 판단하는 것을 특징으로 하는 카메라 센서 기반의 자동차 상향등 자동 조절 시스템
2 2
제1항에 있어서,상기 자동차의 이동 속도를 추출하는 OBD 센서모듈을 더 포함하며,상기 판단모듈은,상기 OBD 센서모듈에서 추출된 자동차의 이동 속도를 이용하여, 상기 추출된 상기 자동차의 이동 속도가 일정 속도 이상인 경우, 고속 주행으로 분류하여 상향등의 작동이 필요한 것으로 판단하고, 일정 속도 이하인 경우, 저속 주행으로 분류하여 하향등의 작동이 필요한 것으로 판단하며,상기 제어모듈은,상기 판단모듈에서 판단된 결과에 따라 상향등 또는 하향등으로 조절되도록 제어하는 것을 특징으로 하는 카메라 센서 기반의 자동차 상향등 자동 조절 시스템
3 3
삭제
4 4
삭제
5 5
제1항에 있어서,상기 선택된 서브 블록의 위치의 확산 분포(spread distribution)를 측정하는 방법은, 평균 밝기 값이 높은 서브 블록의 개수 및 분포를 이용하여 측정하는 것을 특징으로 하는 카메라 센서 기반의 자동차 상향등 자동 조절 시스템
6 6
제1항에 있어서, 상기 판단모듈은,상기 카메라 센서모듈에서 감지된 주변 영상에 있어서, 소정의 영역을 관심영역(ROI)으로 설정하는 관심영역 설정부를 더 포함하되,상기 관심영역 설정부는, 상기 주변 영상에서 실제 자동차가 존재하게 되는 영역에서만 다른 자동차의 전조등 및 후미등을 검출하기 위하여 상기 주변 영상의 아래쪽 중심 부근 영역을 관심영역(ROI)으로 설정하는 것을 특징으로 하는 카메라 센서 기반의 자동차 상향등 자동 조절 시스템
7 7
제1항에 있어서, 상기 전조등 및 후미등 검출부에서 적용되는 전조등 및 후미등 분류 알고리즘은,(S1) 상기 카메라 센서모듈에서 감지된 영상에 대하여, 일정 기준 이상의 강한 빛을 갖는 전조등과 후미등을 감지하는 Back ROI(BROI), 및 일정 기준 이하의 약한 빛을 갖는 전조등 및 후미등을 감지하는 Front ROI(FROI)로 구분하여 관심영역(ROI)을 설정하는 단계를 포함하되,상기 설정된 관심영역(ROI)을, 이동 알고리즘을 이용하여 상기 자동차의 움직임 방향에 따라 적응적으로 이동시키는 것을 특징으로 하는 카메라 센서 기반의 자동차 상향등 자동 조절 시스템
8 8
제7항에 있어서, 상기 전조등 및 후미등 검출부에서 적용되는 전조등 및 후미등 분류 알고리즘은,(S2) 상기 설정된 관심영역(ROI)에 대하여, Color model을 RGB에서 YCbCr로 변경하여, Y채널과 Cr채널에 대해 최적화된 각기 다른 임계값을 사용하여 2개의 이진화 영상을 생성하고, 상기 생성된 2개의 이진화 영상에 대해 OR 연산을 수행하여 후보 불빛 영상(Candidate Blobs image)을 생성하는 단계를 더 포함하는 것을 특징으로 하는 카메라 센서 기반의 자동차 상향등 자동 조절 시스템
9 9
제8항에 있어서, 상기 전조등 및 후미등 검출부에서 적용되는 전조등 및 후미등 분류 알고리즘은,(S3) 상기 생성된 후보 불빛 영상으로부터 Redness level을 사용하여 후미등을 검출하는 단계를 더 포함하되,상기 후미등을 상기 후보 불빛에 포함된 후미등이 아닌 붉은 빛의 오브젝트와 분류하기 위하여, R, G, B 각 채널로부터 20개의 패턴을 사용하여 하-라이크 특징(haar-like feature)을 추출하고, 추출된 하-라이크 특징(haar-like feature)을 사용한 랜덤 포레스트(random forest; RF)에 의해 후미등을 검출하는 것을 특징으로 하는 카메라 센서 기반의 자동차 상향등 자동 조절 시스템
10 10
제9항에 있어서, 상기 전조등 및 후미등 검출부에서 적용되는 전조등 및 후미등 분류 알고리즘은,(S4) 상기 후미등이 검출된 후보 불빛 영상으로부터 전조등을 더 검출하되, 밝은 중심부분과 주변의 그라데이션(gradation) 두 파트로 구성되어있는 전조등을 기타 배경 광원으로부터 분류하기 위하여, 웨이블릿(Wavelet)을 기반으로 한 oriented center-symmetric local binary feature(OCS-LBP)를 사용하여 전조등을 검출하는 단계를 더 포함하는 것을 특징으로 하는 카메라 센서 기반의 자동차 상향등 자동 조절 시스템
11 11
제10항에 있어서, 상기 전조등 및 후미등 검출부에서 적용되는 전조등 및 후미등 분류 알고리즘은,(S5) 상기 검출된 전조등과 후미등에 대하여, 동일한 자동차의 전조등 또는 후미등으로 판단되는 것들을 하나의 군집으로 맺는 페어링을 수행하는 단계를 더 포함하는 것을 특징으로 하는 카메라 센서 기반의 자동차 상향등 자동 조절 시스템을 이용한 자동차 상향등 자동 조절 시스템
12 12
자동차 상향등 자동 조절 시스템을 이용한 자동차 상향등 자동 조절 방법으로서,(1) 카메라 센서모듈의 감지 센서부가, 자동차의 주변 영상의 변화를 감지하는 단계;(2) 판단모듈의 전조등 및 후미등 검출부가, 상기 카메라 센서모듈에서 감지된 상기 자동차의 주변 영상으로부터 전조등 및 후미등 분류 알고리즘을 적용하여 다른 자동차의 전조등 및 후미등을 검출하는 단계;(3) 판단모듈의 판단부가, 상기 전조등 및 후미등 검출부에서 검출된 전조등 및 후미등을 이용하여 상기 자동차 상향등의 조절 여부를 판단하는 단계; 및(4) 제어모듈이, 상기 판단모듈의 판단부에서 판단된 결과에 따라 상기 자동차의 상향등이 조절되도록 제어하는 단계를 포함하고,상기 판단모듈은,상기 카메라 센서모듈에서 감지된 주변 영상의 밝기 분포를 이용하여, 상향등 불필요 지역 여부를 판단하는 상향등 불필요 지역 여부 판단부를 더 포함하며,상기 제어모듈은,상기 상향등 불필요 지역 여부 판단부에서 상향등 불필요 지역으로 판단되면 상향등을 off시키되,상기 상향등 불필요 지역 여부 판단부는, 상기 카메라 센서모듈에서 감지된 상기 주변 영상의 상단 부분을 n×m 크기의 영역의 서브 블록으로 분할하고, 상기 분할된 각각의 서브 블록에서 밝기 값의 평균을 추정한 후, 미리 설정된 제1 임계값을 이용하여 상기 제1 임계값보다 큰 평균을 가지는 서브 블록만을 선택하고, 상기 선택된 서브 블록의 위치의 확산 분포(spread distribution)를 측정하여, 측정된 상기 확산 분포 값이 미리 설정된 제2 임계값보다 낮으면 상향등 필요 지역으로 판단하고, 상기 제2 임계값보다 높으면 상향등 불필요 지역으로 판단하되,상기 선택된 서브 블록의 위치의 확산 분포(spread distribution)를 측정하는 방법은, 평균 밝기 값이 높은 서브 블록의 개수 및 분포를 이용하여 측정하는 것을 특징으로 하는 카메라 센서 기반의 자동차 상향등 자동 조절 시스템을 이용한 자동차 상향등 자동 조절 방법
13 13
삭제
14 14
삭제
15 15
제12항에 있어서, 상기 판단모듈은,상기 카메라 센서모듈에서 감지된 주변 영상에 있어서, 소정의 영역을 관심영역(ROI)으로 설정하는 관심영역 설정부를 더 포함하되,상기 관심영역 설정부는, 상기 주변 영상에서 실제 자동차가 존재하게 되는 영역에서만 다른 자동차의 전조등 및 후미등을 검출하기 위하여 상기 주변 영상의 아래쪽 중심 부근 영역을 관심영역(ROI)으로 설정하는 것을 특징으로 하는 카메라 센서 기반의 자동차 상향등 자동 조절 시스템을 이용한 자동차 상향등 자동 조절 방법
16 16
제12항에 있어서, 상기 전조등 및 후미등 검출부에서 적용되는 전조등 및 후미등 분류 알고리즘은,(S1) 상기 카메라 센서모듈에서 감지된 영상에 대하여, 일정 기준 이상의 강한 빛을 갖는 전조등과 후미등을 감지하는 Back ROI(BROI), 및 일정 기준 이하의 약한 빛을 갖는 전조등 및 후미등을 감지하는 Front ROI(FROI)로 구분하여 관심영역(ROI)을 설정하는 단계를 포함하되,상기 설정된 관심영역(ROI)을, 이동 알고리즘을 이용하여 상기 자동차의 움직임 방향에 따라 적응적으로 이동시키는 것을 특징으로 하는 카메라 센서 기반의 자동차 상향등 자동 조절 시스템을 이용한 자동차 상향등 자동 조절 방법
17 17
제16항에 있어서, 상기 전조등 및 후미등 검출부에서 적용되는 전조등 및 후미등 분류 알고리즘은,(S2) 상기 설정된 관심영역(ROI)에 대하여, Color model을 RGB에서 YCbCr로 변경하여, Y채널과 Cr채널에 대해 최적화된 각기 다른 임계값을 사용하여 2개의 이진화 영상을 생성하고, 상기 생성된 2개의 이진화 영상에 대해 OR 연산을 수행하여 후보 불빛 영상(Candidate Blobs image)을 생성하는 단계를 더 포함하는 것을 특징으로 하는 카메라 센서 기반의 자동차 상향등 자동 조절 시스템을 이용한 자동차 상향등 자동 조절 방법
18 18
제17항에 있어서, 상기 전조등 및 후미등 검출부에서 적용되는 전조등 및 후미등 분류 알고리즘은,(S3) 상기 생성된 후보 불빛 영상으로부터 Redness level을 사용하여 후미등을 검출하는 단계를 더 포함하되,상기 후미등을 상기 후보 불빛에 포함된 후미등이 아닌 붉은 빛의 오브젝트와 분류하기 위하여, R, G, B 각 채널로부터 20개의 패턴을 사용하여 하-라이크 특징(haar-like feature)을 추출하고, 추출된 하-라이크 특징(haar-like feature)을 사용한 랜덤 포레스트(random forest; RF)에 의해 후미등을 검출하는 것을 특징으로 하는 카메라 센서 기반의 자동차 상향등 자동 조절 시스템을 이용한 자동차 상향등 자동 조절 방법
19 19
제18항에 있어서, 상기 전조등 및 후미등 검출부에서 적용되는 전조등 및 후미등 분류 알고리즘은,(S4) 상기 후미등이 검출된 후보 불빛 영상으로부터 전조등을 더 검출하되, 밝은 중심부분과 주변의 그라데이션(gradation) 두 파트로 구성되어있는 전조등을 기타 배경 광원으로부터 분류하기 위하여, 웨이블릿(Wavelet)을 기반으로 한 oriented center-symmetric local binary feature(OCS-LBP)를 사용하여 전조등을 검출하는 단계를 더 포함하는 것을 특징으로 하는 카메라 센서 기반의 자동차 상향등 자동 조절 시스템을 이용한 자동차 상향등 자동 조절 방법
20 20
제19항에 있어서, 상기 전조등 및 후미등 검출부에서 적용되는 전조등 및 후미등 분류 알고리즘은,(S5) 상기 검출된 전조등과 후미등에 대하여, 동일한 자동차의 전조등 또는 후미등으로 판단되는 것들을 하나의 군집으로 맺는 페어링을 수행하는 단계를 더 포함하는 것을 특징으로 하는 카메라 센서 기반의 자동차 상향등 자동 조절 시스템을 이용한 자동차 상향등 자동 조절 방법
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 교육부 계명대학교 산학협력 산학협력 선도대학(LINC) 육성사업 - 산학공동기술개발과제 카메라 센서기반의 자동차 하이빔 자동 조절 시스템 개발