요약 | 본 발명은 도로 표지 인식 기술에 관한 것으로서, 구체적으로는 회선 신경망 기술(CNN; Convolutional Neural Network)을 이용한 도로면 훼손된 도로 표지를 인식하는 장치 및 방법에 관한 것이다. 본 발명의 실시 예에 따르면, 딥러닝(Deep Learning) 기반으로 다양한 도로 표지들을 학습한 모델을 이용하여 도로 표지를 정확하게 인식할 수 있다. |
---|---|
Int. CL | G06K 9/00 (2006.01.01) G06N 3/08 (2006.01.01) |
CPC | G06K 9/00798(2013.01) G06K 9/00798(2013.01) |
출원번호/일자 | 1020160164627 (2016.12.05) |
출원인 | 동국대학교 산학협력단 |
등록번호/일자 | 10-1778724-0000 (2017.09.08) |
공개번호/일자 | |
공고번호/일자 | (20170914) 문서열기 |
국제출원번호/일자 | |
국제공개번호/일자 | |
우선권정보 | |
법적상태 | 등록 |
심사진행상태 | 수리 |
심판사항 | |
구분 | 신규 |
원출원번호/일자 | |
관련 출원번호 | |
심사청구여부/일자 | Y (2016.12.05) |
심사청구항수 | 9 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 동국대학교 산학협력단 | 대한민국 | 서울특별시 중구 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 박강령 | 대한민국 | 서울특별시 강남구 |
2 | 보히도브후산 | 우즈베키스탄 | 서울특별시 중구 |
3 | 홍형길 | 대한민국 | 서울특별시 양천구 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 특허법인이지 | 대한민국 | 서울특별시 금천구 가산디지털*로 ***(가산동, KCC웰츠밸리) ***-*** |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 동국대학교 산학협력단 | 서울특별시 중구 |
번호 | 서류명 | 접수/발송일자 | 처리상태 | 접수/발송번호 |
---|---|---|---|---|
1 | [특허출원]특허출원서 [Patent Application] Patent Application |
2016.12.05 | 수리 (Accepted) | 1-1-2016-1192301-19 |
2 | 의견제출통지서 Notification of reason for refusal |
2017.04.03 | 발송처리완료 (Completion of Transmission) | 9-5-2017-0242849-81 |
3 | [거절이유 등 통지에 따른 의견]의견(답변, 소명)서 [Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation) |
2017.05.04 | 수리 (Accepted) | 1-1-2017-0434372-61 |
4 | [명세서등 보정]보정서 [Amendment to Description, etc.] Amendment |
2017.05.04 | 보정승인간주 (Regarded as an acceptance of amendment) | 1-1-2017-0434377-99 |
5 | 등록결정서 Decision to grant |
2017.09.06 | 발송처리완료 (Completion of Transmission) | 9-5-2017-0626280-19 |
6 | 출원인정보변경(경정)신고서 Notification of change of applicant's information |
2019.08.16 | 수리 (Accepted) | 4-1-2019-5163486-33 |
번호 | 청구항 |
---|---|
1 |
1 삭제 |
2 |
2 도로 표지 인식 장치에 있어서,촬영된 도로 영상이 입력되는 도로 표지 영상 입력부;상기 입력된 도로 영상에서 도로 표지 이미지를 추출하고, 추출한 도로 표지 이미지에 딥러닝 기반의 회선 신경망(Convolutional Neural Network) 모델을 적용하여 도로 표지를 인식하는 도로 표지 인식부; 및인식된 도로 표지를 출력하는 도로 표지 안내부를 포함하되,상기 도로 표지 인식부는상기 입력된 도로 영상에서 도로면 정보를 관심 영역으로 지정하고, 지정되지 않은 다른 불필요한 영역들을 제거하는 관심 영역 지정부;상기 지정된 도로면 정보를 역원근 변환하여 변환 도로면 정보를 생성하는 역원근 변환부;상기 변환 도로면 정보에서 도로 표지 이미지를 검출하는 도로 표지 검출부; 및 상기 회선 신경망 모델 기반 인식 방법을 적용하여 검출한 도로 표지 이미지를 인식하는 회선 신경망 기반 인식부를 포함하는 도로 표지 인식 장치 |
3 |
3 제2항에 있어서,상기 회선 신경망 기반 인식부는미리 설정한 스케일의 도로 표지 이미지를 입력하는 이미지 입력 레이어;입력한 도로 표지 이미지에 회선 신경망 모델을 적용하여 특징을 추출하는 특징 추출 레이어; 및상기 추출한 특징에 의해 미리 설정된 수의 도로 표지로 분류하는 분류 레이어를 포함하는 도로 표지 인식 장치 |
4 |
4 제3항에 있어서,상기 특징 추출 레이어는3개의 콘벌루션 레이어 집합 및 4개의 완전 연결 레이어 집합을 포함하는 도로 표지 인식 장치 |
5 |
5 제4항에 있어서,상기 3개의 콘벌루션 레이어 집합은265×137×1 픽셀의 이미지가 입력되며, 크기 5×5×1 크기의 180개의 필터를 이용하여 콘벌루션화하는 제1 콘벌루션 레이어;3×3 크기의 필터를 적용하여 65×33×180 픽셀을 출력하는 제1 맥스 풀링 레이어;상기 65×33×180 픽셀을 크기 5×5×1 크기의 250개의 필터를 이용하여 콘벌루션화하는 제2 콘벌루션 레이어;3×3 크기의 필터를 적용하여 15×7×250 픽셀을 출력하는 제2 맥스 풀링 레이어;상기 15×7×250 픽셀을 크기 3×3×1 크기의 250개의 필터를 이용하여 콘벌루션화하는 제3 콘벌루션 레이어; 및 3×3 크기의 필터를 적용하여 3×1×250 픽셀을 출력하는 제3 맥스 풀링 레이어를 포함하는 도로 표지 인식 장치 |
6 |
6 제4항에 있어서,상기 4개의 완전 연결 레이어 집합은750 및 1920 노드들을 각각 입력 및 출력으로 하는 제1 완전 연결 레이어;1920 및 1024 노드들을 각각 입력 및 출력으로 하는 제2 완전 연결 레이어;1024 및 512 노드들을 각각 입력 및 출력으로 하는 제3 완전 연결 레이어; 및 512 및 6 노드들을 각각 입력 및 출력으로 하는 제4 완전 연결 레이어를 포함하는 도로 표지 인식 장치 |
7 |
7 도로 표지 인식 방법에 있어서,도로 영상을 입력하는 단계;상기 도로 영상에서 관심 영역을 지정하는 단계;상기 지정된 관심 영역 이미지에 대해 역원근 변환을 수행하여 사영 이미지를 생성하는 단계;상기 역원근 변환된 사영 이미지에서 도로 표지 이미지를 추출하는 단계; 및상기 도로 표지 이미지에 대한 회선 신경망 기반 학습을 수행하고 검출된 도로 표지 이미지를 인식하여 출력하는 단계를 포함하는 도로 표지 인식 방법 |
8 |
8 제7항에 있어서,상기 역원근 변환된 사영 이미지에서 도로 표지 이미지를 추출하는 단계는상기 역원근 변환된 사영 이미지에서 라벨링(Labeling), 모폴로지(Morphology), 캐니 에지 감지(Canny Edge Detection) 및 소벨 에지(Sobel Edge) 중 적어도 하나의 알고리즘을 적용하여 도로 표지를 추출하는 도로 표지 인식 방법 |
9 |
9 제7항에 있어서,상기 도로 표지 이미지에 대한 회선 신경망 기반 학습을 수행하고 검출된 도로 표지 이미지를 인식하여 출력하는 단계는데이터 세트에 포함된 도로 이미지를 미리 설정된 수의 도로 표지 범주로 분류하는 단계;상기 데이터 세트에 포함된 도로 이미지를 크기를 정규화하고 보간법에 의해 미리 설정된 크기로 변형하는 단계;변형한 도로 이미지를 이용하여 회선 신경망 모델을 학습시키는 단계; 및상기 학습된 회선 신경망 모델을 검출된 도로 표지 이미지에 적용하여 도로 표지를 인식하는 단계를 포함하는 도로 표지 인식 방법 |
10 |
10 제7항 내지 제9항 중 어느 하나의 도로 표지 인식 방법을 실행하고 컴퓨터가 판독 가능한 기록매체에 기록된 컴퓨터 프로그램 |
지정국 정보가 없습니다 |
---|
패밀리정보가 없습니다 |
---|
순번 | 연구부처 | 주관기관 | 연구사업 | 연구과제 |
---|---|---|---|---|
1 | 교육부 | 동국대학교 산학협력단 | 이공학개인기초연구지원사업(기본) | 시선 위치, 눈 반응, 감정 및 행태 분석 기반 운전자 감성 인지 자동차 기술 개발[2/3] |
2 | 미래창조과학부 | 동국대학교 산학협력단 | 대학ICT연구센터육성지원사업 | 소환현실기반 콘텐츠 제작을 위한 실감형 인터랙션 NUI/NUX 플랫폼 기술 개발[4/4] |
공개전문 정보가 없습니다 |
---|
특허 등록번호 | 10-1778724-0000 |
---|
표시번호 | 사항 |
---|---|
1 |
출원 연월일 : 20161205 출원 번호 : 1020160164627 공고 연월일 : 20170914 공고 번호 : 특허결정(심결)연월일 : 20170906 청구범위의 항수 : 9 유별 : G06K 9/00 발명의 명칭 : 도로 표지 인식 장치 및 방법 존속기간(예정)만료일 : |
순위번호 | 사항 |
---|---|
1 |
(권리자) 동국대학교 산학협력단 서울특별시 중구... |
제 1 - 3 년분 | 금 액 | 198,000 원 | 2017년 09월 11일 | 납입 |
제 4 년분 | 금 액 | 119,000 원 | 2020년 08월 31일 | 납입 |
번호 | 서류명 | 접수/발송일자 | 처리상태 | 접수/발송번호 |
---|---|---|---|---|
1 | [특허출원]특허출원서 | 2016.12.05 | 수리 (Accepted) | 1-1-2016-1192301-19 |
2 | 의견제출통지서 | 2017.04.03 | 발송처리완료 (Completion of Transmission) | 9-5-2017-0242849-81 |
3 | [거절이유 등 통지에 따른 의견]의견(답변, 소명)서 | 2017.05.04 | 수리 (Accepted) | 1-1-2017-0434372-61 |
4 | [명세서등 보정]보정서 | 2017.05.04 | 보정승인간주 (Regarded as an acceptance of amendment) | 1-1-2017-0434377-99 |
5 | 등록결정서 | 2017.09.06 | 발송처리완료 (Completion of Transmission) | 9-5-2017-0626280-19 |
6 | 출원인정보변경(경정)신고서 | 2019.08.16 | 수리 (Accepted) | 4-1-2019-5163486-33 |
기술정보가 없습니다 |
---|
과제고유번호 | 1345254867 |
---|---|
세부과제번호 | 2015R1D1A1A01056761 |
연구과제명 | 시선 위치, 눈 반응, 감정 및 행태 분석 기반 운전자 감성 인지 자동차 기술 개발 |
성과구분 | 출원 |
부처명 | 교육부 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2016 |
연구기간 | 201611~201710 |
기여율 | 0.5 |
연구개발단계명 | 기초연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1711035232 |
---|---|
세부과제번호 | H8501-16-1014 |
연구과제명 | 소환현실기반 콘텐츠 제작을 위한 실감형 인터랙션 NUI/NUX 플랫폼 기술 개발 |
성과구분 | 출원 |
부처명 | 미래창조과학부 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2016 |
연구기간 | 201601~201612 |
기여율 | 0.5 |
연구개발단계명 | 기초연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1345254867 |
---|---|
세부과제번호 | 2015R1D1A1A01056761 |
연구과제명 | 시선 위치, 눈 반응, 감정 및 행태 분석 기반 운전자 감성 인지 자동차 기술 개발 |
성과구분 | 등록 |
부처명 | 교육부 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2016 |
연구기간 | 201611~201710 |
기여율 | 0.5 |
연구개발단계명 | 기초연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1711035232 |
---|---|
세부과제번호 | H8501-16-1014 |
연구과제명 | 소환현실기반 콘텐츠 제작을 위한 실감형 인터랙션 NUI/NUX 플랫폼 기술 개발 |
성과구분 | 등록 |
부처명 | 미래창조과학부 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2016 |
연구기간 | 201601~201612 |
기여율 | 0.5 |
연구개발단계명 | 기초연구 |
6T분류명 | IT(정보기술) |
[1020160182702] | 투명 디스플레이 기반의 지능화 상품 전시 시스템 및 그 방법 | 새창보기 |
---|---|---|
[1020160181518] | 성별 인식 장치 및 방법 | 새창보기 |
[1020160169533] | 문자 입력 방법 및 이를 수행하기 위한 장치 | 새창보기 |
[1020160167635] | 회선 신경망 기반 눈 개폐 분류 장치 및 방법 | 새창보기 |
[1020160166299] | 객체 영역 추출 방법 및 그 장치 | 새창보기 |
[1020160164627] | 도로 표지 인식 장치 및 방법 | 새창보기 |
[1020160161791] | 유아 지능 계발을 위한 교육 시스템 및 그 운영방법 | 새창보기 |
[1020160160108] | 체감형 컨텐츠 제공 장치와 연계된 비콘 기반의 사용자 방향 인식 장치 및 그 방법 | 새창보기 |
[1020160151281] | 군집비행의 포메이션을 유지하기 위한 드론 및 그 방법(DRONE FOR MAINTAINING FORMATION OF SWARM FLIGHT AND METHOD THEREOF) | 새창보기 |
[1020160151279] | 드론을 제어하기 위한 시스템 및 방법(SYSTEM AND METHOD FOR CONTROL OF DRONE) | 새창보기 |
[1020160149842] | 공포심리 평가 장치 및 방법 | 새창보기 |
[1020160145737] | 실내 공간에서 드론을 이용한 위치 추정 장치 및 그 방법(APPARATUS FOR ESTIMATING INDOOR POSITION USING DRONE AND METHOD THEREOF) | 새창보기 |
[1020160141360] | 행위 인식 장치 및 방법 | 새창보기 |
[1020160135248] | 영상 특징맵 생성 장치 및 방법(APPARATUS AND METHOD OF IMAGE SALIENCY MAP) | 새창보기 |
[1020160132680] | 스펙트로그램을 이용한 온라인 오디오 장르 분류 방법(A METHOD FOR ON-LINE AUDIO GENRE CLASSIFICATION USING SPECTROGRAM) | 새창보기 |
[1020160129075] | 멀티 드론 제어 시스템 및 방법(SYSTEM AND METHOD FOR CONTROL OF MULTI DRONE) | 새창보기 |
[1020160104769] | 도로의 차선을 재도색하는 장치 및 방법(LANE REPAINTING APPARATUS AND METHOD) | 새창보기 |
[1020160099169] | 공포 심리 분석 시스템 및 방법(System and method for fear mentality analysis) | 새창보기 |
[1020160097396] | 시선 추적 장치 및 방법 | 새창보기 |
[1020160070503] | NUI/NUX에 기반하여 드로잉 영상을 처리하는 장치 및 방법 | 새창보기 |
[1020160013095] | 시선 추적 장치 및 방법 | 새창보기 |
[KST2017015027][동국대학교] | 다방향 인식을 이용한 태권도 동작 평가 장치 및 방법(Apparatus and method for evaluating Taekwondo motion using multi-directional recognition) | 새창보기 |
---|---|---|
[KST2015188579][동국대학교] | 영상 인식 기반의 주차장의 빈 주차면 인식 장치 및 방법 | 새창보기 |
[KST2018012446][동국대학교] | 환자 참여형 실시간 전자의무기록 방법 및 시스템 | 새창보기 |
[KST2020010651][동국대학교] | 딥러닝 기반 얼굴 인식 출석체크 시스템 | 새창보기 |
[KST2019009935][동국대학교] | 로스팅 완료 시간 예측 장치 및 이의 동작 방법 | 새창보기 |
[KST2018016172][동국대학교] | CNN 기반 지정맥 인식 장치 및 인식 방법 | 새창보기 |
[KST2019016828][동국대학교] | 드론의 제어 신호 생성 방법 및 제어 장치 | 새창보기 |
[KST2020010644][동국대학교] | 태그 클라우드 생성 장치 및 방법 | 새창보기 |
[KST2015188169][동국대학교] | 지문 및 정맥 정보 검출 장치 | 새창보기 |
[KST2015231050][동국대학교] | 얼굴 인식 장치 및 방법(DEVICE AND METHOD FOR FACE RECOGNITION) | 새창보기 |
[KST2019018488][동국대학교] | 디지털 영상 이미지를 이용한 위급상황 분석장치 및 방법 | 새창보기 |
[KST2021005897][동국대학교] | 수정된 사이클 생성적 적대 신경망을 이용하는 나이 추정 장치 및 방법 | 새창보기 |
[KST2020010658][동국대학교] | 얼굴 인식 기반 가상 피팅 시스템 | 새창보기 |
[KST2016017878][동국대학교] | 얼굴 영상 기반 성별 인식 방법 및 장치(METHOD AND COMPUTING DEVICE FOR GENDER RECOGNITION BASED ON FACIAL IMAGE) | 새창보기 |
[KST2018008121][동국대학교] | 회선 신경망 기반 눈 개폐 분류 장치 및 방법 | 새창보기 |
[KST2019017179][동국대학교] | 딥 러닝 기반의 차량 운전자 시선 추적 장치 및 방법 | 새창보기 |
[KST2015188592][동국대학교] | 대화형 로봇 장치 및 그 제어방법 | 새창보기 |
[KST2019019648][동국대학교] | 보행자 검출 장치 및 방법 | 새창보기 |
[KST2019018490][동국대학교] | 얼굴 인식 시스템의 위조 공격 탐지 장치 및 방법 | 새창보기 |
[KST2020010647][동국대학교] | LLVM 중간언어를 이용한 VR/AR 교육 플랫폼의 딥러닝 적용에 대한 방법 및 시스템 | 새창보기 |
[KST2019006309][동국대학교] | 선택적 손실 함수를 이용한 생성적 적대 네트워크의 학습을 위한 방법 및 장치 | 새창보기 |
[KST2016016912][동국대학교] | 나이 추정 장치 및 방법(DEVICE AND METHOD FOR HUMAN AGE ESTIMATION) | 새창보기 |
[KST2016017879][동국대학교] | 원거리 가시광선 영상과 열 영상에 기반한 성별 인식 방법 및 장치(METHOD AND COMPUTING DEVICE FOR GENDER RECOGNITION BASED ON LONG DISTANCE VISIBLE LIGHT IMAGE AND THERMAL IMAGE) | 새창보기 |
[KST2019006475][동국대학교] | 설명력이 있는 딥 러닝 방법 및 시스템 | 새창보기 |
[KST2014029176][동국대학교] | 지정맥 인식을 이용한 바이오 인식 방법 | 새창보기 |
[KST2019013720][동국대학교] | 자율 무인 이동체를 학습하기 위한 학습용 이미지를 생성하는 장치 및 그 방법 | 새창보기 |
[KST2023006717][동국대학교] | 생성적 적대 신경망에 기반한 멀티트랙 음악 생성 장치 및 그것을 이용한 복수 장르의 멀티트랙 음악 생성 방법 | 새창보기 |
[KST2016016609][동국대학교] | 눈 개폐 분류 장치 및 방법(DEVICE AND METHOD FOR CLASSIFYING OPEN AND CLOSE EYES) | 새창보기 |
[KST2023006706][동국대학교] | 이미지 기반의 상품 정보 검색 서비스를 운영하기 위한 상품 정보 검색 서비스 서버 및 그 동작 방법 | 새창보기 |
[KST2022005673][동국대학교] | 영상의 회전 특성 학습 방법 및 디바이스 | 새창보기 |
심판사항 정보가 없습니다 |
---|