맞춤기술찾기

이전대상기술

범용 문자 시퀀스 검출을 통한 다국적 차량번호판 인식 시스템 및 그 방법

  • 기술번호 : KST2020016008
  • 담당센터 : 인천기술혁신센터
  • 전화번호 : 032-420-3580
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 범용 문자 시퀀스 검출을 통한 다국적 차량번호판 인식 시스템 및 그 방법에 관한 것으로, 딥러닝을 포함하는 인공지능 기법을 통해 차량의 이미지로부터 차량번호판을 검출하고, 상기 검출한 차량번호판에 포함된 문자를 인식한 후, 상기 이미지 처리를 통한 차량번호판의 레이아웃 감지를 통해 상기 인식한 문자에 대한 정확한 시퀀스를 추출하여, 단일 라인, 이중 라인을 포함하는 다양한 유형으로 형성되는 차량번호판을 인식할 수 있도록 함으로써, 차량번호판 인식에 있어서, 다양한 나라에 범용적으로 적용 가능하도록 하는 범용 문자 시퀀스 검출을 통한 다국적 차량번호판 인식 시스템 및 그 방법에 관한 것이다.
Int. CL G06K 9/32 (2006.01.01) G06K 9/00 (2006.01.01)
CPC G06K 9/3258(2013.01) G06K 9/3258(2013.01) G06K 9/3258(2013.01) G06K 9/3258(2013.01) G06K 9/3258(2013.01)
출원번호/일자 1020190130353 (2019.10.21)
출원인 가천대학교 산학협력단
등록번호/일자 10-2089298-0000 (2020.03.10)
공개번호/일자
공고번호/일자 (20200316) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2019.10.21)
심사청구항수 8

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 가천대학교 산학협력단 대한민국 경기도 성남시 수정구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 이상웅 서울특별시 강남구
2 크리스 헨리 경기도 성남시 수정구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 김견수 대한민국 서울특별시 강남구 테헤란로*길 ** (역삼동, 한덕빌딩) ***호(다함특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 가천대학교 산학협력단 경기도 성남시 수정구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2019.10.21 수리 (Accepted) 1-1-2019-1068876-22
2 [우선심사신청]심사청구(우선심사신청)서
[Request for Preferential Examination] Request for Examination (Request for Preferential Examination)
2019.10.23 수리 (Accepted) 1-1-2019-1081420-88
3 선행기술조사의뢰서
Request for Prior Art Search
2019.11.15 수리 (Accepted) 9-1-9999-9999999-89
4 선행기술조사보고서
Report of Prior Art Search
2019.12.03 발송처리완료 (Completion of Transmission) 9-6-2019-0133709-11
5 의견제출통지서
Notification of reason for refusal
2019.12.04 발송처리완료 (Completion of Transmission) 9-5-2019-0881128-15
6 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2020.02.03 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2020-0110897-02
7 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2020.02.03 수리 (Accepted) 1-1-2020-0110869-23
8 등록결정서
Decision to grant
2020.03.08 발송처리완료 (Completion of Transmission) 9-5-2020-0176479-02
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
실제 차량이미지를 차량번호판 검출용 학습모델이 적용하여, 상기 실제 차량이미지로부터 차량번호판을 검출하는 차량번호판 검출부;상기 검출한 차량번호판을 문자인식용 학습모델이 적용하여, 상기 검출한 차량번호판을 구성하는 복수의 문자를 인식하고, 상기 인식한 각 문자가 위치하는 영역에 대한 문자영역 바운딩박스를 각각 출력하는 통합문자 인식부; 상기 출력한 복수의 문자영역 바운딩박스를 토대로 상기 검출한 차량번호판의 레이아웃을 검출하는 다국적 차량번호판 레이아웃 검출부; 및 상기 검출한 차량번호판의 레이아웃을 토대로 상기 인식한 복수의 문자에 대한 시퀀스를 출력함으로써, 국가별 차량번호판 규격에 상관없이 국가별 차량번호판을 범용적으로 인식하는 차량번호판 인식부;를 포함하며,상기 차량번호판 검출용 학습모델은, 차량번호판 영역에 대한 바운딩박스를 포함하는 복수의 차량이미지로 구성되는 차량번호판 검출용 학습데이터를 학습하여 생성되며,상기 문자인식용 학습모델은,차량번호판을 구성하는 복수의 문자에 대한 바운딩박스를 포함하는 복수의 차량번호판 이미지로 구성되는 문자인식용 학습데이터를 학습하여 생성되며,상기 다국적 차량번호판 레이아웃 검출부는,상기 출력한 복수의 문자영역 바운딩박스를 각 문자영역 바운딩박스의 좌측 상단의 x좌표를 토대로 오름차순으로 정렬하고,상기 정렬한 복수의 문자영역 바운딩박스의 좌측라인을 검출한 다음, 상기 검출한 좌측라인 중 제일 왼쪽 및 제일 오른쪽에 위치하는 바운딩박스의 제일 왼쪽 및 제일 오른쪽에 위치하는 바운딩박스의 좌측라인을 왼쪽 경계선 및 오른쪽 경계선으로 각각 검출하며,상기 검출한 왼쪽 경계선과 오른쪽 경계선을 연결하는 중앙라인을 생성하여, 상기 생성한 중앙라인과 교차하는 상기 검출한 좌측라인의 수에 따라 상기 검출한 차량번호판이 단일 라인 또는 이중 라인 레이아웃으로 형성되었는지를 판단함으로써, 상기 검출한 차량번호판의 레이아웃을 검출하는 것을 특징으로 하는 범용 문자 시퀀스 검출을 통한 다국적 차량번호판 인식 시스템
2 2
청구항 1에 있어서,상기 차량번호판 검출용 학습모델은,상기 실제 차량이미지가 입력되는 경우, 신뢰점수를 포함하는 적어도 하나 이상의 차량번호판 영역에 해당하는 복수의 바운딩박스를 예측하여 출력하며,상기 차량번호판 검출부는,상기 출력한 복수의 바운딩박스 중 제일 높은 신뢰점수를 가지는 바운딩박스를 선택하여, 해당 바운딩박스를 포함하는 차량번호판을 크로핑함으로써, 상기 차량번호판을 검출하는 것을 특징으로 하는 범용 문자 시퀀스 검출을 통한 다국적 차량번호판 인식 시스템
3 3
청구항 1에 있어서,상기 문자인식용 학습모델은,영어, 한글, 중국어 및 일본어를 포함하여 상기 검출한 차량번호판을 구성하는 복수의 문자를 인식하여, 상기 검출한 차량번호판으로부터 상기 인식한 각 문자의 문자영역에 대한 문자영역 바운딩박스를 출력하도록 학습되는 것을 특징으로 하는 범용 문자 시퀀스 검출을 통한 다국적 차량번호판 인식 시스템
4 4
삭제
5 5
청구항 1에 있어서,상기 차량번호판 인식부는,상기 차량번호판의 레이아웃을 검출한 결과, 상기 검출한 차량번호판이 단일 라인 레이아웃으로 형성된 경우, 상기 오름차순으로 정렬한 문자영역 바운딩박스를 순차적으로 출력함으로서, 상기 인식한 복수의 문자에 대한 시퀀스를 추출하여 단일 라인 레이아웃으로 형성된 해당 차량번호판을 최종적으로 인식하며, 또한, 상기 차량번호판의 레이아웃을 검출한 결과, 상기 검출한 차량번호판이 이중 라인 레이아웃으로 형성된 경우, 상기 중앙라인과 교차하는 상기 좌측라인 및 상기 경계선을 포함하는 문자영역 바운딩박스와, 상기 중앙라인과 교차하지 않는 상기 좌측라인을 포함하는 문자영역 바운딩박스를 각각 분류하고,상기 각 문자영역 바운딩박스의 왼쪽 상단 x좌표에 따라 상기 분류한 문자영역 바운딩박스를 오름차순으로 각각 정렬한 후, 상기 x좌표에 따라 해당 차량번호판의 상단 영역에 위치하는 문자영역 바운딩박스를 순차적으로 출력한 후, 해당 차량번호판의 하단 영역에 위치하는 문자영역 바운딩박스를 순차적으로 출력함으로서, 상기 인식한 복수의 문자에 대한 시퀀스를 추출하여 이중 라인 레이아웃으로 형성된 해당 차량번호판을 최종적으로 인식하는 것을 특징으로 하는 범용 문자 시퀀스 검출을 통한 다국적 차량번호판 인식 시스템
6 6
실제 차량이미지를 차량번호판 검출용 학습모델이 적용하여, 상기 실제 차량이미지로부터 차량번호판을 검출하는 차량번호판 검출 단계;상기 검출한 차량번호판을 문자인식용 학습모델이 적용하여, 상기 검출한 차량번호판을 구성하는 복수의 문자를 인식하고, 상기 인식한 각 문자가 위치하는 영역에 대한 문자영역 바운딩박스를 각각 출력하는 통합문자 인식 단계; 상기 출력한 복수의 문자영역 바운딩박스를 토대로 상기 검출한 차량번호판의 레이아웃을 검출하는 다국적 차량번호판 레이아웃 검출 단계; 및 상기 검출한 차량번호판의 레이아웃을 토대로 상기 인식한 복수의 문자에 대한 시퀀스를 출력함으로써, 국가별 차량번호판 규격에 상관없이 국가별 차량번호판을 범용적으로 인식하는 차량번호판 인식 단계;를 포함하며,상기 차량번호판 검출용 학습모델은, 차량번호판 영역에 대한 바운딩박스를 포함하는 복수의 차량이미지로 구성되는 차량번호판 검출용 학습데이터를 학습하여 생성되며,상기 문자인식용 학습모델은,차량번호판을 구성하는 복수의 문자에 대한 바운딩박스를 포함하는 복수의 차량번호판 이미지로 구성되는 문자인식용 학습데이터를 학습하여 생성되며,상기 다국적 차량번호판 레이아웃 검출 단계는,상기 출력한 복수의 문자영역 바운딩박스를 각 문자영역 바운딩박스의 좌측 상단의 x좌표를 토대로 오름차순으로 정렬하고,상기 정렬한 복수의 문자영역 바운딩박스의 좌측라인을 검출한 다음, 상기 검출한 좌측라인 중 제일 왼쪽 및 제일 오른쪽에 위치하는 바운딩박스의 제일 왼쪽 및 제일 오른쪽에 위치하는 바운딩박스의 좌측라인을 왼쪽 경계선 및 오른쪽 경계선으로 각각 검출하며,상기 검출한 왼쪽 경계선과 오른쪽 경계선을 연결하는 중앙라인을 생성하여, 상기 생성한 중앙라인과 교차하는 상기 검출한 좌측라인의 수에 따라 상기 검출한 차량번호판이 단일 라인 또는 이중 라인 레이아웃으로 형성되었는지를 판단함으로써, 상기 검출한 차량번호판의 레이아웃을 검출하는 것을 특징으로 하는 범용 문자 시퀀스 검출을 통한 다국적 차량번호판 인식 방법
7 7
청구항 6에 있어서,상기 차량번호판 검출용 학습모델은,상기 실제 차량이미지가 입력되는 경우, 신뢰점수를 포함하는 적어도 하나 이상의 차량번호판 영역에 해당하는 복수의 바운딩박스를 예측하여 출력하며,상기 차량번호판 검출 단계는,상기 출력한 복수의 바운딩박스 중 제일 높은 신뢰점수를 가지는 바운딩박스를 선택하여, 해당 바운딩박스를 포함하는 차량번호판을 크로핑함으로써, 상기 차량번호판을 검출하는 것을 특징으로 하는 범용 문자 시퀀스 검출을 통한 다국적 차량번호판 인식 방법
8 8
청구항 6에 있어서,상기 문자인식용 학습모델은,영어, 한글, 중국어 및 일본어를 포함하여 상기 검출한 차량번호판을 구성하는 복수의 문자를 인식하여, 상기 검출한 차량번호판으로부터 상기 인식한 각 문자의 문자영역에 대한 문자영역 바운딩박스를 출력하도록 학습되는 것을 특징으로 하는 범용 문자 시퀀스 검출을 통한 다국적 차량번호판 인식 방법
9 9
삭제
10 10
청구항 6에 있어서,상기 차량번호판 인식 단계는,상기 차량번호판의 레이아웃을 검출한 결과, 상기 검출한 차량번호판이 단일 라인 레이아웃으로 형성된 경우, 상기 오름차순으로 정렬한 문자영역 바운딩박스를 순차적으로 출력함으로서, 상기 인식한 복수의 문자에 대한 시퀀스를 추출하여 단일 라인 레이아웃으로 형성된 해당 차량번호판을 최종적으로 인식하며, 또한, 상기 차량번호판의 레이아웃을 검출한 결과, 상기 검출한 차량번호판이 이중 라인 레이아웃으로 형성된 경우, 상기 중앙라인과 교차하는 상기 좌측라인 및 상기 경계선을 포함하는 문자영역 바운딩박스와, 상기 중앙라인과 교차하지 않는 상기 좌측라인을 포함하는 문자영역 바운딩박스를 각각 분류하고,상기 각 문자영역 바운딩박스의 왼쪽 상단 x좌표에 따라 상기 분류한 문자영역 바운딩박스를 오름차순으로 각각 정렬한 후, 상기 x좌표에 따라 해당 차량번호판의 상단 영역에 위치하는 문자영역 바운딩박스를 순차적으로 출력한 후, 해당 차량번호판의 하단 영역에 위치하는 문자영역 바운딩박스를 순차적으로 출력함으로서, 상기 인식한 복수의 문자에 대한 시퀀스를 추출하여 이중 라인 레이아웃으로 형성된 해당 차량번호판을 최종적으로 인식하는 것을 특징으로 하는 범용 문자 시퀀스 검출을 통한 다국적 차량번호판 인식 방법
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 경기도 가천대학교 산학협력단 경기도 지역 협력 연구센터 인공지능 기반 시니어 헬스케어 기술개발