맞춤기술찾기

이전대상기술

레이더 센서 및 카메라를 이용한 객체 인식 방법 및 그를 위한 장치

  • 기술번호 : KST2020007841
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 실시예는 적어도 하나의 카메라 및 레이더 센서로부터 영상 데이터와 레이더 센서 데이터를 수집하고, 이를 기반으로 생성된 융합 데이터를 활용하여 객체를 인식함으로써 객체에 대한 구별 및 위치 측정이 보다 정확하게 이루어질 수 있도록 하는 레이더 센서 및 카메라를 이용한 객체 인식 방법 및 그를 위한 장치에 관한 것이다.
Int. CL G06K 9/20 (2006.01.01) G01S 13/86 (2006.01.01) G06T 7/277 (2017.01.01) G06T 7/521 (2017.01.01) G06K 9/62 (2006.01.01) G06K 9/46 (2006.01.01)
CPC G06K 9/20(2013.01) G06K 9/20(2013.01) G06K 9/20(2013.01) G06K 9/20(2013.01) G06K 9/20(2013.01) G06K 9/20(2013.01)
출원번호/일자 1020180159602 (2018.12.12)
출원인 충북대학교 산학협력단
등록번호/일자
공개번호/일자 10-2020-0071959 (2020.06.22) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2018.12.12)
심사청구항수 6

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 충북대학교 산학협력단 대한민국 충청북도 청주시 서원구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 박태형 충청북도 청주시 서원구
2 이재설 충청북도 청주시 서원구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 이철희 대한민국 서울특별시 강남구 도곡로**길 **(역삼동) 베리타스빌딩, *-*층(베리타스국제특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 충북대학교 산학협력단 충청북도 청주시 서원구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2018.12.12 수리 (Accepted) 1-1-2018-1244448-44
2 선행기술조사의뢰서
Request for Prior Art Search
2019.12.06 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2020.02.26 발송처리완료 (Completion of Transmission) 9-6-2020-0027726-03
4 의견제출통지서
Notification of reason for refusal
2020.04.08 발송처리완료 (Completion of Transmission) 9-5-2020-0254752-70
5 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2020.06.02 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2020-0564330-18
6 [거절이유 등 통지에 따른 의견]의견서·답변서·소명서
2020.06.02 수리 (Accepted) 1-1-2020-0564329-61
7 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.07.06 수리 (Accepted) 4-1-2020-5149268-82
8 등록결정서
Decision to grant
2020.08.24 발송처리완료 (Completion of Transmission) 9-5-2020-0578390-55
9 [출원서 등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2020.08.26 수리 (Accepted) 1-1-2020-0899250-10
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
적어도 하나의 카메라 및 레이더 센서로부터 영상 데이터와 레이더 센서 데이터를 수집하는 센서부;상기 영상 데이터를 기반으로 이전 영상의 특징점에 대응하는 현재 영상의 특징점을 추적하여 상기 현재 영상 내 객체의 위치를 예측한 추적 데이터를 산출하는 영상 객체 추적부; 및상기 추적 데이터 및 상기 레이더 센서 데이터를 융합하여 융합 데이터를 생성하고, 상기 융합 데이터를 기반으로 상기 객체에 대한 거리정보를 포함한 객체 데이터를 제공하는 영상 처리부를 포함하되,상기 영상 객체 추적부는,상기 이전 영상의 특징점의 위치정보 및 상기 현재 영상을 입력으로 하여, 상기 이전 영상의 특징점의 변위를 기초로 KLT 추적기를 이용하여 상기 이전 영상의 특징점에 대응되는 상기 현재 영상의 특징점을 추적하여 매칭하고, 매칭된 특징점 간 오차값을 계산하고, 계산된 오차값이 일정 임계값 이하인 점들의 수가 전체 특징점 수 대비 일정 비율 미만인 경우 상기 매칭이 실패한 것으로 판별하여 칼만 필터를 이용하여 특징점을 재산출하되,상기 이전 영상 내 객체를 검출하고, 상기 현재 영상 내 상기 객체를 검출하여, 상기 이전 영상 내 검출된 객체 및 상기 현재 영상 내 검출된 객체 간 유사도 강도(cost)를 계산하고, 상기 유사도 강도의 합이 최소가 되도록 하는 상기 이전 영상 내 검출된 객체와 상기 현재 영상 내 검출된 객체 간 관계를 기초로, 예측된 객체와 상기 현재 영상 내 검출된 객체를 결합(associate)하는 것을 특징으로 하는 객체 인식장치
2 2
삭제
3 3
삭제
4 4
삭제
5 5
삭제
6 6
삭제
7 7
제 1항에 있어서,상기 영상 처리부는,호모그래피 행렬 계산을 사용하여 상기 레이더 센서 데이터를 상기 추적 데이터 상에 투영하는 것을 특징으로 하는 객체 인식장치
8 8
제 7항에 있어서,상기 영상 처리부는,상기 현재 영상 내 검출된 상기 객체의 소정 포인트와 가장 가까이 투영된 레이더 센서 데이터를 기반으로 상기 객체에 대한 거리정보를 산출하는 것을 특징으로 하는 객체 인식장치
9 9
제 8항에 있어서,상기 영상 처리부는,상기 객체에 상응하는 바운딩 박스의 중간 바닥 포인트와 가장 가까이 투영된 레이더 센서 데이터를 기반으로 상기 객체에 대한 거리정보를 산출하는 것을 특징으로 하는 객체 인식장치
10 10
제 7항에 있어서,상기 영상 처리부는,상기 객체의 방향 및 움직임 정보를 고려하여 결정된 소정 포인트 상에 투영된 레이더 센서 데이터를 기반으로 상기 객체에 대한 거리정보를 산출하는 것을 특징으로 하는 객체 인식장치
11 11
적어도 하나의 카메라 및 레이더 센서로부터 영상 데이터와 레이더 센서 데이터를 수집하는 과정;상기 영상 데이터를 기반으로 이전 영상의 특징점에 대응하는 현재 영상의 특징점을 추적하여 상기 현재 영상 내 객체의 위치를 예측한 추적 데이터를 산출하는 과정; 및상기 추적 데이터 및 상기 레이더 센서 데이터를 융합하여 융합 데이터를 생성하고, 상기 융합 데이터를 기반으로 상기 객체에 대한 거리정보를 포함한 객체 데이터를 제공하는 과정을 포함하되,상기 추적 데이터를 산출하는 과정은,상기 이전 영상의 특징점의 위치정보 및 상기 현재 영상을 입력으로 하여, 상기 이전 영상의 특징점의 변위를 기초로 KLT 추적기를 이용하여 상기 이전 영상의 특징점에 대응되는 상기 현재 영상의 특징점을 추적하여 매칭하고, 매칭된 특징점 간 오차값을 계산하고, 계산된 오차값이 일정 임계값 이하인 점들의 수가 전체 특징점 수 대비 일정 비율 미만인 경우 상기 매칭이 실패한 것으로 판별하여 칼만 필터를 이용하여 특징점을 재산출하되,상기 이전 영상 내 객체를 검출하고, 상기 현재 영상 내 상기 객체를 검출하여, 상기 이전 영상 내 검출된 객체 및 상기 현재 영상 내 검출된 객체 간 유사도 강도(cost)를 계산하고, 상기 유사도 강도의 합이 최소가 되도록 하는 상기 이전 영상 내 검출된 객체와 상기 현재 영상 내 검출된 객체 간 관계를 기초로, 예측된 객체와 상기 현재 영상 내 검출된 객체를 결합(associate)하는 것을 특징으로 하는 객체 인식방법
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 미래창조과학부 충북대학교 산학협력단 IT·SW융합산업원천기술개발 차량 통신 기반의 광역 주행환경인지 및 협조 주행기술 개발
2 과학기술정보통신부 충북대학교 산학협력단 Grand ICT연구센터지원사업 Grand ICT연구센터(충북대)