맞춤기술찾기

이전대상기술

인공지능 기반의 차량과 객체 간의 충돌 위험도 검출 시스템 및 방법

  • 기술번호 : KST2022009518
  • 담당센터 : 인천기술혁신센터
  • 전화번호 : 032-420-3580
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 기술은 인공지능 기반의 차량과 객체 간의 충돌 위험도 검출 시스템 및 방법이 개시된다. 이러한 본 기술에 대한 구체적인 구현 예는 차량의 내부 및 외부에 설치된 소정 수의 카메라를 통해 수집된 운전자 모션 영상 및 차량 외부 영상에 대해 인공지능 기반으로 학습 수행하고 학습 결과를 토대로 운전자 비인지 영역에 대한 차량과 객체 간의 충돌 가능성 및 객체 위험도를 도출함에 따라, 운전자 및 관심 객체 간의 충돌로 인한 사고를 미연에 방지할 수 있으며, 이에 자율 주행 차량에 대한 안전성 및 신뢰성을 더욱 향상시킬 수 있는 효과가 있다.
Int. CL B60W 30/08 (2006.01.01) B60W 40/09 (2012.01.01) B60W 50/14 (2020.01.01) B60R 11/04 (2006.01.01) B60Q 9/00 (2006.01.01) G06N 3/08 (2006.01.01) B60W 50/00 (2006.01.01)
CPC B60W 30/08(2013.01) B60W 40/09(2013.01) B60W 40/02(2013.01) B60W 50/14(2013.01) B60R 11/04(2013.01) B60Q 9/008(2013.01) G06N 3/08(2013.01) B60W 2420/42(2013.01) B60W 2540/30(2013.01) B60W 2554/00(2013.01) B60W 2540/225(2013.01) B60W 2050/143(2013.01) B60W 2050/0022(2013.01) B60Y 2300/08(2013.01)
출원번호/일자 1020200188162 (2020.12.30)
출원인 인하대학교 산학협력단, 주식회사 이노카
등록번호/일자
공개번호/일자 10-2022-0097682 (2022.07.08) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 공개
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2020.12.30)
심사청구항수 9

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 인하대학교 산학협력단 대한민국 인천광역시 미추홀구
2 주식회사 이노카 대한민국 서울특별시 구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 박승보 인천광역시 연수구
2 박지영 인천광역시 부평구
3 김유원 경기도 부천시 경인로***
4 박세희 경기도 부천시 성곡

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 이은철 대한민국 서울특별시 송파구 법원로**길 **, A동 *층 ***호(문정동, 에이치비지니스파크)(*T국제특허법률사무소)
2 이수찬 대한민국 서울특별시 송파구 법원로**길 **, A동 *층 ***호(문정동, 에이치비지니스파크)(*T국제특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2020.12.30 수리 (Accepted) 1-1-2020-1436035-53
2 보정요구서
Request for Amendment
2021.01.11 발송처리완료 (Completion of Transmission) 1-5-2021-0005025-14
3 [출원서 등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2021.02.15 수리 (Accepted) 1-1-2021-0178192-38
4 선행기술조사의뢰서
Request for Prior Art Search
2022.02.15 수리 (Accepted) 9-1-9999-9999999-89
5 선행기술조사보고서
Report of Prior Art Search
2022.05.17 발송처리완료 (Completion of Transmission) 9-6-2022-0112003-53
6 의견제출통지서
Notification of reason for refusal
2022.07.08 발송처리완료 (Completion of Transmission) 9-5-2022-0508780-53
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
차량 내부의 설치된 카메라로부터 제공받은 차량의 운전자 모션 영상을 수집하는 운전자 모션 수집부;차량의 외부에 설치된 카메라로부터 제공받은 차량 외부 영상을 수집하는 외부 영상 수집부;다수의 운전자 모션 영상으로부터 획득된 각 운전자 시선 좌표를 생성한 다음 생성된 운전자 시선 좌표를 학습 데이터로 저장하고, 입력된 차량 외부 영상으로부터 획득된 다수의 객체 좌표를 생성하여 학습 데이터로 저장하여 학습 모델을 구축하는 충돌 위험도 도출부를 포함하고, 상기 충돌 위험도 도출부는, 입력된 운전자 모션 영상에 대해 기 구축된 학습 모델을 기반으로 학습 수행하여 운전자 시선 좌표에 의거한 운전자 인지 영역을 추정하고, 추정된 운전자 인지 영역을 제외한 운전자 비인지 영역에 대해 수집된 차량 외부 영상을 토대로 차량과 관심 객체 간의 충돌 위험도 및 관심 객체 위험도를 도출하도록 구비되는 것을 특징으로 하는 인공지능 기반의 차량과 객체 간의 충돌 위험도 검출 시스템
2 2
바람직하게 상기 시스템은, 상기 관심 객체 위험도에 의거 운전자 및 관심 객체에게 경고를 생성하여 방송하는 경고 제공부를 포함하는 것을 특징으로 하는 인공지능 기반의 차량과 객체 간의 충돌 위험도 검출 시스템
3 3
제2항에 있어서, 상기 충돌 위험도 판단부는,수집된 다수의 운전자 모션 영상을 토대로 추출된 운전자 시선 좌표를 생성하고 생성된 운전자 시선 좌표에 의거 추출된 운전자 인지 영역을 학습 데이터로 생성하고, 수집된 다수의 외부 영상으로부터 감지된 다수의 객체 및 감지된 각 객체들의 좌표를 학습 데이터로 저장하여 학습 모델을 구축하는 모델 구축모듈;입력된 운전자 모션 영상에 대해 구축된 모델 기반으로 학습 수행하여 운전자 시선 좌표에 따른 운전자 인지 영역을 추정하고 추정된 운전자 인지 영역을 제외한 나머지 운전자 비인지 영역에서의 차량 외부 영상으로 획득된 다수의 객체 좌표를 출력하는 학습 모듈; 현재 시점 t을 기준으로 기 정해진 소정 주기 이전의 t-1 시점 프레임의 다수의 객체 좌표와 t-1 시점을 기준으로 이전의 t-2 시점 프레임의 다수의 객체 좌표를 토대로 다수의 객체 중 충돌 가능성이 존재하는 관심 객체를 도출하는 관심 객체 추출모듈; 및도출된 관심 객체와 운전자 간의 객체 위험도를 도출하고 도출된 관심 객체와의 객체 위험도에 따라 경고를 발생하고 발생된 경고를 경고 제공부로 전달하는 충돌 위험도 생성모듈을 포함하는 것을 특징으로 하는 인공지능 기반의 차량과 객체 간의 충돌 위험도 검출 시스템
4 4
제3항에 있어서, 상기 학습 모델은, 수집된 다수의 운전자 모션 영상으로부터 각 운전자 시선 좌표를 생성하여 저장하는 시야 검출 DB; 다수의 차량 외부 영상으로부터 획득된 각 차량 외부 영상의 다수의 객체 및 각 객체 좌표를 운전자 시선 좌표에 매칭시켜 저장하는 객체 검출 DB; 각 획득된 각 차량 외부 영상의 객체의 종류 및 크기 별 기 정해진 가중치를 획득된 객체와 매칭시켜 저장하는 객체 가중치 DB를 포함하는 것을 특징으로 하는 인공지능 기반의 차량과 객체 간의 충돌 위험도 검출 시스템
5 5
제4항에 있어서, 상기 시야 검출 DB는 현재 시점 t를 기준으로 가장 인접된 이전 시점 t에서의 운전자 시선 좌표 및 이전 시점 t를 기준으로 이전 시점 t-1의 운전자 시선 좌표를 저장하고,상기 객체 검출 DB는,현재 시점 t를 기준으로 가장 인접된 이전 시점 t에서의 운전자 시선에 의거 감지된 다수의 객체들의 좌표 및 임의의 시점 t를 기준으로 이전 시점 t-1에서 운전자 시선에 의거 감지된 다수의 객체들의 좌표를 각 운전자 시선 좌표와 매핑시켜 저장하도록 구비되는 것을 특징으로 하는 인공지능 기반의 차량과 객체 간의 충돌 위험도 검출 시스템
6 6
제5항에 있어서, 상기 관심 객체 도출모듈은,현재 시점 t에서 입력된 운전자 모션 영상에 대해 추정된 운전자 인지 영역을 제외한 나머지 운전자 비인지 영역을 도출하고,상기 운전자 비인지 영역 내의 객체 검출 DB 내에 저장된 이전 시점 t에서 다수의 객체들의 좌표 및 이전 시점 t-1에서 다수의 객체들의 좌표의 차를 토대로 다수의 객체 중 충돌 가능성이 존재하는 관심 객체를 도출하도록 구비되는 것을 특징으로 하는 인공지능 기반의 차량과 객체 간의 충돌 위험도 검출 시스템
7 7
제6항에 있어서, 상기 충돌 위험도 생성모듈은,현재 시점 t를 기준으로 t-1 시점의 프레임에서의 관심 객체들의 좌표 및 t-2 시점 프레임에서 관심 객체의 좌표를 토대로 관심 객체의 이동 거리 및 이동 속도로 충돌 예상 시간 별 관심 객체 충돌 가능성을 도출하는 충돌 위험도 도출기; 및 도출된 충돌 위험도와 관심 객체 가중치 DB의 관심 객체의 종류 및 크기 가중치로 관심 객체 위험도를 생성하는 관심객체 위험도 생성기를 포함하도록 구비되는 것을 특징으로 하는 인공지능 기반의 차량과 객체 간의 충돌 위험도 검출 시스템
8 8
차량 내부에 설치되는 카메라를 통해 수집된 다수의 내부 영상과 차량 외부에 설치되는 카메라를 통해 수집된 다수의 외부 영상을 수집하고 수집된 내부 영상에 대한 운전자 시선 좌표를 학습 데이터로 구축하고, 수집된 외부 영상으로부터 운전자 시선 별 다수의 객체 좌표를 학습 데이터로 구축하는 학습 모델 구축 단계;입력된 내부 영상 및 외부 영상에 대해 구축된 모델 기반으로 학습 수행하여 운전자 시선에 따른 운전자 인지 영역을 도출하고 도출된 운전자 인지 영역으로부터 운전자 비인지 영역을 도출하며, 도출된 운전자 비인지 영역의 다수의 객체 좌표 중 관심 객체 좌표를 도출하는 학습 단계; 및상기 도출된 관심 객체 좌표를 토대로 운전자 비인지 영역 내의 관심 객체과 차량 간의 충돌 위험도를 생성하고 생성된 충돌 위험도에 따른 경고를 출력하는 경고 단계를 포함하는 것을 특징으로 하는 인공지능 기반의 차량과 객체 간의 충돌 위험도 검출 방법
9 9
제8항의 인공지능 기반의 차량과 객체 간의 충돌 위험도 검출 방법을 실행하기 위한 프로그램이 기록되고 컴퓨터에서 판단 가능한 기록매체
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 과학기술정보통신부 인하대학교 과학기술인력육성지원기반구축(R&D) AI 에지컴퓨팅 기반의 차량 밖 운전자 주시 물체 검출 기술