맞춤기술찾기

이전대상기술

어라운드뷰 모니터링 영상 자동 보정 및 생성 장치 및 방법

  • 기술번호 : KST2019031420
  • 담당센터 : 서울서부기술혁신센터
  • 전화번호 : 02-6124-6930
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 AVM 영상 자동 보정 및 생성 장치 및 방법을 공개한다. 본 발명은 차량의 지정된 위치에 배치되어 차량을 중심으로 각각 지정된 방향의 촬영 영상을 획득하는 복수개의 카메라를 구비하는 영상 획득부, 복수개의 카메라 각각에서 미리 획득되어 저장된 복수개의 기준 영상과 복수개의 촬영 영상 각각에서 차체의 특징점으로 기지정된 복수개의 참조점을 추출하고, 복수개의 기준 영상에서 추출된 참조점과 복수개의 촬영 영상에서 추출된 참조점의 위치를 비교하여 획득되는 오차값을 이용하여 복수개의 촬영 영상을 보정하여 복수개의 보정 영상을 생성하는 영상 보정부 및 영상 보정부에서 출력된 복수개의 영상을 정합하여 AVM 영상을 생성하는 영상 생성부를 포함한다.
Int. CL H04N 5/262 (2006.01.01) H04N 5/232 (2006.01.01) H04N 5/265 (2006.01.01) H04N 5/225 (2006.01.01) B60R 1/08 (2006.01.01) B60W 50/14 (2012.01.01)
CPC H04N 5/2628(2013.01) H04N 5/2628(2013.01) H04N 5/2628(2013.01) H04N 5/2628(2013.01) H04N 5/2628(2013.01) H04N 5/2628(2013.01)
출원번호/일자 1020160058917 (2016.05.13)
출원인 광운대학교 산학협력단
등록번호/일자 10-1808092-0000 (2017.12.06)
공개번호/일자 10-2017-0128727 (2017.11.23) 문서열기
공고번호/일자 (20171213) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2016.05.13)
심사청구항수 15

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 광운대학교 산학협력단 대한민국 서울특별시 노원구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 정용진 대한민국 경기도 성남시 분당구
2 방지원 대한민국 경기도 용인시 수지구
3 표정환 대한민국 서울특별시 노원구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인우인 대한민국 서울특별시 강남구 역삼로 ***, *층(역삼동, 중평빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 광운대학교 산학협력단 서울특별시 노원구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2016.05.13 수리 (Accepted) 1-1-2016-0459431-52
2 선행기술조사의뢰서
Request for Prior Art Search
2016.11.10 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2017.01.10 수리 (Accepted) 9-1-2017-0000816-83
4 의견제출통지서
Notification of reason for refusal
2017.01.16 발송처리완료 (Completion of Transmission) 9-5-2017-0038195-44
5 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2017.03.16 수리 (Accepted) 1-1-2017-0260252-10
6 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2017.03.16 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2017-0260253-55
7 출원인정보변경(경정)신고서
Notification of change of applicant's information
2017.03.27 수리 (Accepted) 4-1-2017-5046666-19
8 의견제출통지서
Notification of reason for refusal
2017.06.05 발송처리완료 (Completion of Transmission) 9-5-2017-0396403-54
9 [공지예외적용 보완 증명서류]서류제출서
2017.06.07 수리 (Accepted) 1-1-2017-0541716-51
10 [출원서 등 보정(보완)]보정서
2017.06.07 수리 (Accepted) 1-1-2017-0541704-14
11 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2017.06.07 수리 (Accepted) 1-1-2017-0541730-91
12 등록결정서
Decision to grant
2017.09.29 발송처리완료 (Completion of Transmission) 9-5-2017-0689050-24
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
차량의 지정된 위치에 배치되어 상기 차량을 중심으로 각각 지정된 방향의 촬영 영상을 획득하는 복수개의 카메라를 구비하는 영상 획득부; 상기 복수개의 카메라 각각에서 미리 획득되어 저장된 복수개의 기준 영상과 상기 복수개의 촬영 영상 각각에서 차체의 특징점으로 기지정된 복수개의 참조점을 추출하고, 상기 복수개의 기준 영상에서 추출된 참조점과 상기 복수개의 촬영 영상에서 추출된 참조점의 위치를 비교하여 획득되는 오차값을 이용하여 상기 복수개의 촬영 영상을 보정하여 복수개의 보정 영상을 생성하는 영상 보정부; 및 상기 영상 보정부에서 출력된 복수개의 영상을 정합하여 AVM 영상을 생성하는 영상 생성부; 를 포함하는 AVM 영상 자동 보정 및 생성 장치
2 2
제1 항에 있어서, 상기 영상 보정부는 상기 차량에서 상기 복수개의 카메라가 상기 차체에 정상적으로 설치된 것으로 판별된 초기 상태에서 상기 복수개의 카메라 각각에서 획득된 복수개의 기준 영상을 저장하는 영상 저장부; 상기 복수개의 기준 영상 각각 및 상기 복수개의 촬영 영상 각각에서 상기 복수개의 참조점을 추출하는 참조점 추출부;상기 복수개의 기준 영상 및 상기 복수개의 촬영 영상에서 추출된 상기 복수개의 참조점 중 서로 대응하는 참조점들의 위치를 비교하여 상기 복수개의 카메라 각각의 촬영 방향 및 카메라의 회전 각도에 대한 상기 오차값을 획득하는 영상 비교부; 및 상기 오차값을 보상할 수 있도록 따라 상기 복수개의 촬영 영상을 보정하여 상기 복수개의 보정 영상을 생성하는 오차 보정부; 를 포함하는 것을 특징으로 하는 AVM 영상 자동 보정 및 생성 장치
3 3
제1 항에 있어서, 상기 영상 생성부는 상기 복수개의 보정 영상을 누적하여 저장하는 영상 누적부; 상기 영상 누적부에 저장된 상기 복수개의 보정 영상에서 상기 복수개의 추출점에 대응하는 점들과 함께 상기 보정 영상에 포함된 차선의 모서리에 대응하는 점들을 복수개의 기준점으로 추출하는 기준점 추출부; 및 상기 복수개의 보정 영상을 역 투영 변환하고, 역 투영 변환된 복수개의 변환 영상 중 상기 AVM 영상에서 서로 인접하여 배치될 변환 영상에 공통으로 포함되는 상기 복수개의 기준점들의 위치를 비교하여, 변환 오차값을 판별하고, 판별된 변환 오차값을 이용하여 상기 복수개의 변환 영상을 보정하는 기준점 매칭부; 및 상기 기준점 매칭부에서 보정된 상기 복수개의 변환 영상을 상기 복수개의 카메라 각각의 배치 위치에 대응하는 위치에 정합 배치하여 조감도 형태의 상기 AVM 영상을 생성하는 영상 조합부; 를 포함하는 것을 특징으로 하는 AVM 영상 자동 보정 및 생성 장치
4 4
제3 항에 있어서, 상기 기준점 추출부는 도로 상에서 상기 차량의 양측으로 서로 교대로 표시되는 상기 차선의 모서리를 검출하기 위해, 상기 영상 누적부에 누적되어 저장된 상기 복수개의 보정 영상 중 기지정된 시간 이내에 연속하여 획득된 보정 영상에서 상기 차선의 모서리에 대한 상기 기준점을 검출하는 것을 특징으로 하는 AVM 영상 자동 보정 및 생성 장치
5 5
제1 항에 있어서, 상기 영상 보정부는 상기 차량에서 상기 복수개의 카메라가 상기 차체에 정상적으로 설치된 것으로 판별된 초기 상태에서 상기 복수개의 카메라 각각에서 획득된 복수개의 기준 영상 및 상기 복수개의 카메라에서 인가되는 상기 복수개의 촬영 영상을 누적하여 저장하는 영상 저장부; 상기 복수개의 기준 영상 각각 및 상기 복수개의 촬영 영상 각각에서 상기 차체의 특징점과 함께 상기 촬영 영상에 포함된 차선의 모서리에 대응하는 점들을 복수개의 기준점으로 추출하는 참조점 추출부; 상기 복수개의 기준 영상 및 상기 복수개의 촬영 영상에서 추출된 상기 복수개의 참조점 중 서로 대응하는 참조점들의 위치를 비교하여 상기 복수개의 카메라 각각의 촬영 방향 및 카메라의 회전 각도에 대한 상기 오차값을 획득하는 영상 비교부; 및 상기 오차값을 보상할 수 있도록 따라 상기 복수개의 촬영 영상을 보정하여 상기 복수개의 보정 영상을 생성하고, 상기 복수개의 보정 영상을 역 투영 변환하고, 역 투영 변환된 복수개의 변환 영상 중 상기 AVM 영상에서 서로 인접하여 배치될 변환 영상에 공통으로 포함되는 상기 복수개의 참조점들의 위치를 비교하여, 변환 오차값을 판별하고, 판별된 변환 오차값을 이용하여 상기 복수개의 변환 영상을 보정하는 오차 보정부; 를 포함하는 것을 특징으로 하는 AVM 영상 자동 보정 및 생성 장치
6 6
제1 항에 있어서, 상기 영상 획득부는 상기 차량의 전방을 촬영하며, 상기 촬영 영상에 상기 참조점으로 추출될상기 차량의 전방 번호판의 상단 모서리가 포함되도록 라디에이터 그릴에 배치되는 전방 카메라; 상기 차량의 후방을 촬영하며, 상기 촬영 영상에 상기 참조점으로 추출될상기 차량의 후방 번호판의 복수개의 고정 나사가 포함되도록 상기 차량의 트렁크 리드와 후방 범퍼 사이에 배치되는 후방 카메라; 상기 차량의 좌측을 촬영하며, 상기 촬영 영상에 상기 참조점으로 추출될 차량의 좌측 문 손잡이와 전방 범퍼가 포함되도록 상기 차량의 좌측 사이드 미러에 설치되는 좌측 카메라; 및 상기 차량의 우측을 촬영하며, 상기 촬영 영상에 상기 참조점으로 추출될 차량의 우측 문 손잡이와 상기 전방 범퍼가 포함되도록 상기 차량의 우측 사이드 미러에 설치되는 우측 카메라; 를 포함하는 것을 특징으로 하는 AVM 영상 자동 보정 및 생성 장치
7 7
제1 항에 있어서, 상기 영상 보정부는 미리 지정된 주기마다 또는 기설정된 이벤트 발생시 상기 복수개의 참조점을 추출하여 상기 오차값을 획득하고, 상기 주기가 아니거나 이벤트가 발생되지 않으면, 이전 획득된 오차값을 이용하여 상기 복수개의 촬영 영상을 보정하는 것을 특징으로 하는 AVM 영상 자동 보정 및 생성 장치
8 8
영상 획득부, 영상 보정부 및 영상 생성부를 구비하는 AVM 영상 자동 보정 및 생성 장치의 AVM 영상 자동 보정 및 생성 방법에 있어서, 상기 영상 획득부의 복수개의 카메라가 각각 차량의 지정된 위치에 배치되어 상기 차량을 중심으로 지정된 방향의 촬영 영상을 획득하는 단계; 상기 영상 보정부가 상기 복수개의 카메라 각각에서 미리 획득되어 저장된 복수개의 기준 영상과 상기 복수개의 촬영 영상 각각에서 차체의 특징점으로 기지정된 복수개의 참조점을 추출하는 단계; 상기 영상 보정부가 상기 복수개의 기준 영상에서 추출된 참조점과 상기 복수개의 촬영 영상에서 추출된 참조점의 위치를 비교하여 오차값을 획득하는 단계; 상기 영상 보정부가 상기 오차값을 이용하여 상기 복수개의 촬영 영상을 보정하여 복수개의 보정 영상을 생성하는 단계; 및 상기 영상 생성부가 상기 복수개의 보정 영상을 이용하여 AVM 영상을 생성하는 단계; 를 포함하는 AVM 영상 자동 보정 및 생성 방법
9 9
제8 항에 있어서, 상기 오차값을 획득하는 단계는 상기 차량에서 상기 복수개의 카메라가 상기 차체에 정상적으로 설치된 것으로 판별된 초기 상태에서 상기 복수개의 카메라 각각에서 획득된 복수개의 기준 영상 및 상기 복수개의 촬영 영상에서 추출된 상기 복수개의 참조점 중 서로 대응하는 참조점들의 위치를 비교하여 상기 복수개의 카메라 각각의 촬영 방향 및 카메라의 회전 각도에 대한 상기 오차값을 획득하는 것을 특징으로 하는 AVM 영상 자동 보정 및 생성 방법
10 10
제8 항에 있어서, 상기 AVM 영상을 생성하는 단계는 상기 복수개의 보정 영상을 누적하여 저장하는 단계; 누적 저장된 상기 복수개의 보정 영상에서 상기 복수개의 추출점에 대응하는 점들과 함께 상기 보정 영상에 포함된 차선의 모서리에 대응하는 점들을 복수개의 기준점으로 추출하는 단계; 상기 복수개의 보정 영상을 역 투영 변환하여 원근감이 제거된 복수개의 변환 영상을 생성하는 단계; 상기 복수개의 변환 영상 중 상기 AVM 영상에서 서로 인접하여 배치될 변환 영상에 공통으로 포함되는 상기 복수개의 기준점들의 위치를 비교하여, 변환 오차값을 판별하는 단계; 판별된 변환 오차값을 이용하여 상기 복수개의 변환 영상을 보정하는 단계; 및 상기 보정된 상기 복수개의 변환 영상을 상기 복수개의 카메라 각각의 배치 위치에 대응하는 위치에 정합 배치하여 조감도 형태의 상기 AVM 영상을 생성하는 단계; 를 포함하는 것을 특징으로 하는 AVM 영상 자동 보정 및 생성 방법
11 11
제10 항에 있어서, 상기 복수개의 기준점으로 추출하는 단계는 도로 상에서 상기 차량의 양측으로 서로 교대로 표시되는 상기 차선의 모서리를 검출하기 위해, 누적되어 저장된 상기 복수개의 보정 영상 중 기지정된 시간 이내에 연속하여 획득된 보정 영상에서 상기 차선의 모서리에 대한 상기 기준점을 검출하는 것을 특징으로 하는 AVM 영상 자동 보정 및 생성 방법
12 12
제8 항에 있어서, 상기 복수개의 참조점을 추출하는 단계는 상기 차량에서 상기 복수개의 카메라가 상기 차체에 정상적으로 설치된 것으로 판별된 초기 상태에서 상기 복수개의 카메라 각각에서 획득된 복수개의 기준 영상 및 상기 복수개의 카메라에서 인가되는 상기 복수개의 촬영 영상을 누적하여 저장하는 단계; 및 상기 복수개의 기준 영상 각각 및 상기 복수개의 촬영 영상 각각에서 상기 차체의 특징점과 함께 상기 촬영 영상에 포함된 차선의 모서리에 대응하는 점들을 복수개의 참조점으로 추출하는 단계; 를 포함하는 것을 특징으로 하는 AVM 영상 자동 보정 및 생성 방법
13 13
제12 항에 있어서, 상기 AVM 영상을 생성하는 단계는 상기 복수개의 보정 영상을 역 투영 변환하여, 원근감이 제거된 복수개의 변환 영상을 생성하는 단계; 상기 복수개의 변환 영상 중 상기 AVM 영상에서 서로 인접하여 배치될 변환 영상에 공통으로 포함되는 상기 복수개의 참조점들의 위치를 비교하여, 변환 오차값을 판별하는 단계; 판별된 변환 오차값을 이용하여 상기 복수개의 변환 영상을 보정하는 단계; 및 상기 보정된 상기 복수개의 변환 영상을 상기 복수개의 카메라 각각의 배치 위치에 대응하는 위치에 정합 배치하여 조감도 형태의 상기 AVM 영상을 생성하는 단계; 를 포함하는 것을 특징으로 하는 AVM 영상 자동 보정 및 생성 방법
14 14
제8 항에 있어서, 상기 복수개의 카메라는 전방 카메라, 후방 카메라, 좌측 카메라 및 우측 카메라를 구비하고, 상기 전방 카메라는 상기 차량의 전방을 촬영하며, 상기 촬영 영상에 상기 참조점으로 추출될상기 차량의 전방 번호판의 상단 모서리가 포함되도록 라디에이터 그릴에 배치되고, 상기 후방 카메라는 상기 차량의 후방을 촬영하며, 상기 촬영 영상에 상기 참조점으로 추출될상기 차량의 후방 번호판의 복수개의 고정 나사가 포함되도록 상기 차량의 트렁크 리드와 후방 범퍼 사이에 배치되고, 상기 좌측 카메라는 상기 차량의 좌측을 촬영하며, 상기 촬영 영상에 상기 참조점으로 추출될 차량의 좌측 문 손잡이와 전방 범퍼가 포함되도록 상기 차량의 좌측 사이드 미러에 설치되며, 상기 우측 카메라는 상기 차량의 우측을 촬영하며, 상기 촬영 영상에 상기 참조점으로 추출될 차량의 우측 문 손잡이와 상기 전방 범퍼가 포함되도록 상기 차량의 우측 사이드 미러에 설치되는 것을 특징으로 하는 AVM 영상 자동 보정 및 생성 방법
15 15
제8 항에 있어서, 상기 복수개의 참조점을 추출하는 단계는 미리 지정된 주기마다 또는 기설정된 이벤트 발생 시 상기 복수개의 참조점을 추출하는 것을 특징으로 하는 AVM 영상 자동 보정 및 생성 방법
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 산업통상자원부 광운대학교 산학협력단 산학연협력기술개발사업 ADAS(Advanced Driver Assistance System)를 위한 영상처리 SoC 설계 및 검증 플랫폼 개발