맞춤기술찾기

이전대상기술

카메라 및 라이다 센서 융합을 이용한 객체 검출 방법 및 그를 위한 장치

  • 기술번호 : KST2020007843
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 실시예는 라이다 데이터를 카메라 파라미터 정보를 기반으로, 카메라로 촬영된 이미지 영역 상에 투영하여 라이다 영상 데이터를 생성하고, 이를 활용하여 객체를 검출함으로써 추가적인 융합 알고리즘 및 범위 제한의 한계 없이 보다 단순화된 네트워크를 통해 객체 검출이 효율적으로 이루어질 수 있도록 하는 카메라 및 라이다 센서 융합을 이용한 객체 검출 방법 및 그를 위한 장치에 관한 것이다.
Int. CL G06K 9/20 (2006.01.01) G01S 13/86 (2006.01.01) G06T 7/11 (2017.01.01) G06K 9/00 (2006.01.01)
CPC G06K 9/20(2013.01) G06K 9/20(2013.01) G06K 9/20(2013.01) G06K 9/20(2013.01)
출원번호/일자 1020180159606 (2018.12.12)
출원인 충북대학교 산학협력단
등록번호/일자
공개번호/일자 10-2020-0071960 (2020.06.22) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2018.12.12)
심사청구항수 7

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 충북대학교 산학협력단 대한민국 충청북도 청주시 서원구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 박태형 충청북도 청주시 서원구
2 권순섭 충청북도 청주시 서원구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 이철희 대한민국 서울특별시 강남구 도곡로**길 **(역삼동) 베리타스빌딩, *-*층(베리타스국제특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 충북대학교 산학협력단 충청북도 청주시 서원구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2018.12.12 수리 (Accepted) 1-1-2018-1244468-57
2 선행기술조사의뢰서
Request for Prior Art Search
2019.12.06 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2020.02.26 발송처리완료 (Completion of Transmission) 9-6-2020-0027767-64
4 의견제출통지서
Notification of reason for refusal
2020.04.08 발송처리완료 (Completion of Transmission) 9-5-2020-0254753-15
5 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2020.05.26 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2020-0532357-45
6 [거절이유 등 통지에 따른 의견]의견서·답변서·소명서
2020.05.26 수리 (Accepted) 1-1-2020-0532356-00
7 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.07.06 수리 (Accepted) 4-1-2020-5149268-82
8 등록결정서
Decision to grant
2020.08.24 발송처리완료 (Completion of Transmission) 9-5-2020-0578321-15
9 [출원서 등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2020.08.26 수리 (Accepted) 1-1-2020-0899273-60
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
카메라 및 라이다 센서로부터 영상 데이터와 라이다 데이터를 수집하는 센서부;상기 라이다 데이터를 카메라 파라미터 정보를 기반으로, 상기 카메라로 촬영된 이미지 영역 상에 투영하여 라이다 영상 데이터를 생성하는 영상 처리부; 및상기 라이다 영상 데이터를 기반으로 객체를 검출하는 객체 검출부를 포함하되,상기 영상 처리부는,상기 라이다 데이터를 상기 카메라 파라미터 정보 중 화각(FOV) 정보를 기반으로 인 n개의 영역으로 분할하여 각 분할 영역별로 대응되는 라이다 영상 데이터를 생성하여 상기 카메라의 화각 범위 상에 매칭되는 분할 영역을 제외한 나머지 분할 영역을 상기 화각 범위에 매칭하는 것을 특징으로 하는 라이다 센서 및 카메라를 이용한 객체 검출장치
2 2
제 1항에 있어서,상기 영상 처리부는,상기 라이다 데이터의 포인트 좌표, 상기 카메라 파라미터, 상기 카메라와 상기 라이다 센서 사이의 회전 행렬 및 이동 벡터 중 적어도 하나의 변수를 이용하여 상기 라이다 데이터의 3D 데이터를 상기 이미지 영역 상에 투영하는 것을 특징으로 하는 라이다 센서 및 카메라를 이용한 객체 검출장치
3 3
제 2항에 있어서,상기 영상 처리부는,상기 라이다 데이터의 포인트 좌표를 상기 회전 행렬 및 상기 이동 벡터를 이용하여 카메라 좌표계로 변경하고, 상기 카메라 좌표계를 상기 카메라 파라미터를 이용하여 상기 이미지 영역에 투영하여 상기 라이다 영상 데이터를 생성하는 것을 특징으로 하는 라이다 센서 및 카메라를 이용한 객체 검출장치
4 4
제 3항에 있어서,상기 영상 처리부는,상기 카메라 좌표계를 상기 카메라의 초점거리 및 중점 중 적어도 하나의 상기 카메라 파라미터를 이용하여 영상 좌표계로 변경하는 것을 특징으로 하는 라이다 센서 및 카메라를 이용한 객체 검출장치
5 5
제 4항에 있어서,상기 영상 처리부는,상기 라이다 데이터의 거리, 밝기 강도 및 높이 중 적어도 하나의 변수값을 이용하여 상기 영상 좌표계에 상응하는 거리, 밝기 강도 및 높이 값을 산출하는 것을 특징으로 하는 라이다 센서 및 카메라를 이용한 객체 검출장치
6 6
삭제
7 7
제 1항에 있어서,상기 영상 처리부는,상기 n개의 분할 영역 중 상기 카메라의 화각 범위 상에 매칭되는 분할 영역을 제외한 나머지 분할 영역에 대한 상기 라이다 영상 데이터를 생성 시 상기 라이다 데이터를 회전시켜 상기 라이다 영상 데이터의 생성 대상이 되는 분할 영역이 상기 카메라의 화각 범위 상에 매칭되도록 조정하는 것을 특징으로 하는 라이다 센서 및 카메라를 이용한 객체 검출장치
8 8
라이다 센서 및 카메라를 이용하여 객체를 검출하는 방법에 있어서,상기 카메라 및 상기 라이다 센서로부터 영상 데이터와 라이다 데이터를 수집하는 과정;상기 라이다 데이터를 카메라 파라미터를 기반으로, 상기 카메라로 촬영된 이미지 영역 상에 투영하여 라이다 영상 데이터를 생성하는 과정; 및상기 라이다 영상 데이터를 기반으로 객체를 검출하는 과정을 포함하되,상기 영상 데이터를 생성하는 과정은,상기 라이다 데이터를 상기 카메라 파라미터 정보 중 화각(FOV) 정보를 기반으로 인 n개의 영역으로 분할하여 각 분할 영역별로 대응되는 라이다 영상 데이터를 생성하여 상기 카메라의 화각 범위 상에 매칭되는 분할 영역을 제외한 나머지 분할 영역을 상기 화각 범위에 매칭하는 것을 특징으로 하는 라이다 센서 및 카메라를 이용한 객체 검출방법
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 미래창조과학부 충북대학교 산학협력단 IT·SW융합산업원천기술개발 차량 통신 기반의 광역 주행환경인지 및 협조 주행기술 개발
2 과학기술정보통신부 충북대학교 산학협력단 Grand ICT연구센터지원사업 Grand ICT연구센터(충북대)