맞춤기술찾기

이전대상기술

심층신경망 및 돌출 맵을 이용한 야간 보행자 검출 방법 및 장치

  • 기술번호 : KST2019017077
  • 담당센터 : 대구기술혁신센터
  • 전화번호 : 053-550-1450
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 심층신경망 및 돌출 맵을 이용한 야간 보행자 검출 방법 및 장치에 관한 것으로서, 보다 구체적으로는 차량에 설치된 카메라로부터 촬영되는 열 영상을 이용한 보행자 검출 방법 및 장치로서, 열 영상을 심층신경망에 입력하여 보행자를 검출하되, 초기 임계값 및 샘플링 스텝이 계절에 따라 변경되는 돌출 맵을 적용하여 배경으로부터 보행자가 강조된 열 영상을 심층신경망에 입력하는 것을 그 구성상의 특징으로 한다. 본 발명에서 제안하고 있는 심층신경망 및 돌출 맵을 이용한 야간 보행자 검출 방법 및 장치에 따르면, 차량에 설치된 카메라로부터 촬영되는 열 영상을 심층신경망에 입력하여 보행자를 검출하되, 초기 임계값 및 샘플링 스텝이 계절에 따라 변경되는 돌출 맵을 적용하여 배경으로부터 보행자가 강조된 열 영상을 심층신경망에 입력함으로써, 계절에 관계없이 실시간으로 정확하게 보행자를 검출할 수 있다.
Int. CL G06K 9/00 (2006.01.01) G06N 3/08 (2006.01.01)
CPC G06K 9/00362(2013.01) G06K 9/00362(2013.01) G06K 9/00362(2013.01)
출원번호/일자 1020180015345 (2018.02.07)
출원인 계명대학교 산학협력단
등록번호/일자
공개번호/일자 10-2019-0100519 (2019.08.29) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2018.02.07)
심사청구항수 12

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 계명대학교 산학협력단 대한민국 대구광역시 달서구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 고병철 대구광역시 수성구
2 남재열 대구광역시 수성구
3 허두영 대구광역시 달서구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 김건우 대한민국 서울특별시 금천구 가산디지털*로 ***, 에이동 ***호 특허그룹덕원 (가산동, 우림 라이온스밸리)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 계명대학교 산학협력단 대구광역시 달서구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2018.02.07 수리 (Accepted) 1-1-2018-0137492-32
2 [출원서 등 보정(보완)]보정서
2018.02.20 수리 (Accepted) 1-1-2018-0179648-31
3 [공지예외적용 보완 증명서류]서류제출서
2018.02.20 수리 (Accepted) 1-1-2018-0179484-40
4 출원인정보변경(경정)신고서
Notification of change of applicant's information
2018.03.21 수리 (Accepted) 4-1-2018-5049338-19
5 의견제출통지서
Notification of reason for refusal
2019.04.29 발송처리완료 (Completion of Transmission) 9-5-2019-0305587-04
6 [출원서등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2019.05.31 수리 (Accepted) 1-1-2019-0563669-87
7 [출원서 등 보정(보완)]보정서
2019.05.31 수리 (Accepted) 1-1-2019-0563626-24
8 [공지예외적용 보완 증명서류]서류제출서
2019.05.31 수리 (Accepted) 1-1-2019-0563650-10
9 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2019.06.17 수리 (Accepted) 1-1-2019-0616142-60
10 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2019.06.17 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2019-0616101-09
11 등록결정서
Decision to grant
2019.10.15 발송처리완료 (Completion of Transmission) 9-5-2019-0743664-73
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
차량에 설치된 카메라로부터 촬영되는 열 영상을 이용한 보행자 검출 방법으로서,상기 열 영상을 심층신경망에 입력하여 보행자를 검출하되, 초기 임계값 및 샘플링 스텝이 계절에 따라 변경되는 돌출 맵을 적용하여 배경으로부터 보행자가 강조된 열 영상을 상기 심층신경망에 입력하며,(1) 초기 임계값 및 샘플링 스텝이 계절에 따라 변경되는 돌출 맵을 적용하여 배경으로부터 보행자가 강조된 열 영상을 획득하는 단계; 및(2) 상기 단계 (1)에서 획득한 열 영상을 심층신경망에 입력하여 보행자를 검출하는 단계를 포함하고,상기 돌출 맵은,BMS(Boolean-map-based saliency)을 기반으로, 초기 임계값 및 샘플링 스텝이 변경되도록 한 적응형 돌출 맵(Adaptive Boolean-map-based saliency; ABMS)이고,상기 초기 임계값 및 샘플링 스텝은,도로 영역의 방출 에너지에 따라 변경되며,상기 초기 임계값은,보행자의 최소 상수값(minimum constant value, C)과 도로의 평균(μ)과 표준편차(σ)의 합 중 큰 값이고,상기 샘플링 스텝은,상기 초기 임계값 및 관심 맵의 개수에 의해 결정되는 것을 특징으로 하는, 심층신경망 및 돌출 맵을 이용한 야간 보행자 검출 방법
2 2
제1항에 있어서, 상기 열 영상은,움직이는 차량에서 촬영된 열 영상인 것을 특징으로 하는, 심층신경망 및 돌출 맵을 이용한 야간 보행자 검출 방법
3 3
제1항에 있어서, 상기 심층신경망은,컨볼루션 신경망 기반의 보행자 검출 알고리즘인 YOLO(You Only Look Once) 알고리즘인 것을 특징으로 하는, 심층신경망 및 돌출 맵을 이용한 야간 보행자 검출 방법
4 4
제3항에 있어서, 상기 심층신경망은,실시간 보행자 검출을 위한 빠른 버전의 YOLO 알고리즘(tiny YOLO)인 것을 특징으로 하는, 심층신경망 및 돌출 맵을 이용한 야간 보행자 검출 방법
5 5
제1항에 있어서, 상기 심층신경망은,9개의 컨볼루션 레이어(convolutional layers)와 6개의 맥스 풀링 레이어(max pooling layers) 및 2개의 완전 연결 레이어(fully connected layers)를 이용하여 보행자를 검출하는 것을 특징으로 하는, 심층신경망 및 돌출 맵을 이용한 야간 보행자 검출 방법
6 6
삭제
7 7
삭제
8 8
삭제
9 9
삭제
10 10
제1항에 있어서,상기 돌출 맵을 배경으로부터 보행자를 강조하기 위한 사용자 정의 커널(handcrafted kernel)로 적용하는 것을 특징으로 하는, 심층신경망 및 돌출 맵을 이용한 야간 보행자 검출 방법
11 11
차량에 설치된 카메라로부터 촬영되는 열 영상을 이용한 보행자 검출 장치(10)로서,상기 열 영상을 심층신경망에 입력하여 보행자를 검출하되, 초기 임계값 및 샘플링 스텝이 계절에 따라 변경되는 돌출 맵을 적용하여 배경으로부터 보행자가 강조된 열 영상을 상기 심층신경망에 입력하며,초기 임계값 및 샘플링 스텝이 계절에 따라 변경되는 돌출 맵을 적용하여 배경으로부터 보행자가 강조된 열 영상을 획득하는 돌출 맵 적용 모듈(100); 및상기 돌출 맵 적용 모듈(100)에서 획득한 열 영상을 심층신경망에 입력하여 보행자를 검출하는 보행자 검출 모듈(200)을 포함하고,상기 돌출 맵은,BMS(Boolean-map-based saliency)을 기반으로, 초기 임계값 및 샘플링 스텝이 변경되도록 한 적응형 돌출 맵(Adaptive Boolean-map-based saliency; ABMS)이고,상기 초기 임계값 및 샘플링 스텝은,도로 영역의 방출 에너지에 따라 변경되며,상기 초기 임계값은,보행자의 최소 상수값(minimum constant value, C)과 도로의 평균(μ)과 표준편차(σ)의 합 중 큰 값이고,상기 샘플링 스텝은,상기 초기 임계값 및 관심 맵의 개수에 의해 결정되는 것을 특징으로 하는, 심층신경망 및 돌출 맵을 이용한 야간 보행자 검출 장치(10)
12 12
제11항에 있어서, 상기 열 영상은,움직이는 차량에서 촬영된 열 영상인 것을 특징으로 하는, 심층신경망 및 돌출 맵을 이용한 야간 보행자 검출 장치(10)
13 13
제11항에 있어서, 상기 심층신경망은,컨볼루션 신경망 기반의 보행자 검출 알고리즘인 YOLO(You Only Look Once) 알고리즘인 것을 특징으로 하는, 심층신경망 및 돌출 맵을 이용한 야간 보행자 검출 장치(10)
14 14
제13항에 있어서, 상기 심층신경망은,실시간 보행자 검출을 위한 빠른 버전의 YOLO 알고리즘(tiny YOLO)인 것을 특징으로 하는, 심층신경망 및 돌출 맵을 이용한 야간 보행자 검출 장치(10)
15 15
제11항에 있어서, 상기 심층신경망은,9개의 컨볼루션 레이어(convolutional layers)와 6개의 맥스 풀링 레이어(max pooling layers) 및 2개의 완전 연결 레이어(fully connected layers)를 이용하여 보행자를 검출하는 것을 특징으로 하는, 심층신경망 및 돌출 맵을 이용한 야간 보행자 검출 장치(10)
16 16
삭제
17 17
삭제
18 18
삭제
19 19
삭제
20 20
제11항에 있어서,상기 돌출 맵을 배경으로부터 보행자를 강조하기 위한 사용자 정의 커널(handcrafted kernel)로 적용하는 것을 특징으로 하는, 심층신경망 및 돌출 맵을 이용한 야간 보행자 검출 장치(10)
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 대구광역시 평화정공(주) 미래형자동차 선도기술 개발사업 전후방 ADAS 센서를 연계한 보행자 보호 및 오토 트렁크 시스템 개발