맞춤기술찾기

이전대상기술

건설장비 기울기 변화에 따른 어라운드 뷰 영상 왜곡 보정 장치 및 그 방법

  • 기술번호 : KST2019022772
  • 담당센터 : 인천기술혁신센터
  • 전화번호 : 032-420-3580
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 건설장비 기울기 변화에 따른 어라운드 뷰 영상 왜곡 보정 장치 및 그 방법에 대한 것이다. 본 발명에 따른 건설장비 기울기 변화에 따른 어라운드 뷰 영상 왜곡 보정 장치는 건설장비의 전후좌우면에 각각 설치된 복수의 카메라(α,γ,β,θ)로부터 촬영된 복수의 영상을 수신하는 영상 수신부; 상기 복수의 영상을 어라운드 뷰 형태의 영상으로 변환하는 영상 변환부; 상기 건설장비에 설치되어 상기 건설장비가 피치(Pitch)와 롤(Roll) 방향으로 기울어진 각도를 각각 센싱하는 센서로부터 센싱된 각도값을 각각 수신하는 각도값 수신부; 상기 각도값을 반영하여 상기 건설장비가 평탄한 지면에 위치한 경우 촬영되는 제1 영상취득범위 끝점 좌표와, 기울어진 지면에 위치한 경우 촬영되는 제2 영상취득범위 끝점 좌표 및 상기 기울어진 지면에 의해 왜곡된 영상에서의 상기 제1 영상취득범위 끝점 좌표를 상기 복수의 영상별로 각각 도출하는 좌표 도출부; 상기 왜곡된 영상에서의 제1 영상취득범위 끝점 좌표를, 상기 제1 영상취득범위 끝점 좌표로 이동시켜 왜곡된 영상을 상기 복수의 영상별로 각각 보정하는 영상 보정부; 및 상기 보정된 복수의 영상을 조합하여 어라운드 뷰 영상으로 출력하는 출력부를 포함한다.
Int. CL G06T 5/00 (2019.01.01) H04N 5/232 (2006.01.01) E02F 9/26 (2006.01.01)
CPC G06T 5/001(2013.01) G06T 5/001(2013.01) G06T 5/001(2013.01) G06T 5/001(2013.01) G06T 5/001(2013.01)
출원번호/일자 1020170020914 (2017.02.16)
출원인 인하대학교 산학협력단
등록번호/일자 10-1864985-0000 (2018.05.30)
공개번호/일자
공고번호/일자 (20180605) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2017.02.16)
심사청구항수 12

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 인하대학교 산학협력단 대한민국 인천광역시 미추홀구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 김영석 대한민국 서울특별시 강남구
2 염동준 대한민국 경기도 고양시 일산동구
3 최준근 대한민국 경기도 부천시 성오로
4 홍유나 대한민국 충청북도 청주시 청원구
5 김유준 대한민국 인천광역시 남구
6 유현석 대한민국 충청북도 청주시 흥덕구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인태백 대한민국 서울 금천구 가산디지털*로 *** 이노플렉스 *차 ***호

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 인하대학교 산학협력단 대한민국 인천광역시 미추홀구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2017.02.16 수리 (Accepted) 1-1-2017-0160103-03
2 선행기술조사의뢰서
Request for Prior Art Search
2017.08.11 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2017.10.23 발송처리완료 (Completion of Transmission) 9-6-2017-0155651-08
4 의견제출통지서
Notification of reason for refusal
2017.12.11 발송처리완료 (Completion of Transmission) 9-5-2017-0866809-23
5 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2018.02.06 수리 (Accepted) 1-1-2018-0131142-38
6 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2018.02.06 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2018-0131141-93
7 출원인정보변경(경정)신고서
Notification of change of applicant's information
2018.03.02 수리 (Accepted) 4-1-2018-5036549-31
8 등록결정서
Decision to grant
2018.05.29 발송처리완료 (Completion of Transmission) 9-5-2018-0359695-91
9 출원인정보변경(경정)신고서
Notification of change of applicant's information
2018.12.27 수리 (Accepted) 4-1-2018-5266647-91
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
건설장비의 전후좌우면에 각각 설치된 복수의 카메라(α, γ, β, θ)로부터 촬영된 복수의 영상을 수신하는 영상 수신부;상기 복수의 영상을 어라운드 뷰 형태의 영상으로 변환하는 영상 변환부;상기 건설장비에 설치되어 상기 건설장비가 피치(Pitch)와 롤(Roll) 방향으로 기울어진 각도를 각각 센싱하는 센서로부터 센싱된 각도값을 각각 수신하는 각도값 수신부;상기 각도값을 반영하여 상기 건설장비가 평탄한 지면에 위치한 경우 촬영되는 제1 영상취득범위 끝점 좌표와, 기울어진 지면에 위치한 경우 촬영되는 제2 영상취득범위 끝점 좌표 및 상기 기울어진 지면에 의해 왜곡된 영상에서의 상기 제1 영상취득범위 끝점 좌표를 상기 복수의 영상별로 각각 도출하는 좌표 도출부;상기 왜곡된 영상에서의 제1 영상취득범위 끝점 좌표를, 상기 제1 영상취득범위 끝점 좌표로 이동시켜 왜곡된 영상을 상기 복수의 영상별로 각각 보정하는 영상 보정부; 및상기 보정된 복수의 영상을 조합하여 어라운드 뷰 영상으로 출력하는 출력부를 포함하고, 상기 좌표 도출부는,상기 건설장비가 평탄한 지면에 위치했을 때 상기 건설장비의 중심을 원점으로 놓은 좌표상에서 상기 복수의 카메라(α, γ, β, θ)가 설치된 각각의 위치 좌표와, 상기 복수의 카메라로부터 촬영되는 영상취득범위 외부 끝점(A, B, C, D) 각각의 좌표 및 내부 끝점(a, b, c, d) 각각의 좌표로부터 각각의 평면의 법선벡터를 이용하여 상기 제1 영상취득범위 끝점 좌표를 각 카메라의 영상별로 복수개씩 산출하되,상기 카메라(γ)에 대하여 아래의 수학식과 같이 평면의 법선벡터를 이용하여 제1 영상취득범위 끝점 좌표를 각각 산출하고, 나머지 카메라(α, β, θ)에 대해서도 동일하게 산출하는 건설장비 기울기 변화에 따른 어라운드 뷰 영상 왜곡 보정 장치: ,,,여기서, r은 상기 건설장비의 중심을 기준으로 전후좌우 영상취득반경이다
2 2
삭제
3 3
삭제
4 4
제1항에 있어서,상기 좌표 도출부는,피치와 롤 방향의 각도값에 대한 회전행렬을 이용하여 상기 기울어진 지면에 위치한 건설장비에 설치된 복수의 카메라(α', γ', β', θ') 각각의 위치 좌표를 산출하는 건설장비 기울기 변화에 따른 어라운드 뷰 영상 왜곡 보정 장치:
5 5
제4항에 있어서,상기 좌표 도출부는,상기 복수의 카메라(α', γ', β', θ') 각각의 위치 좌표와, 상기 복수의 카메라로부터 각각 촬영되는 영상취득범위 외부 끝점((A', B', C', D')과 (A'', B'', C'', D'')) 각각의 좌표 및 내부 끝점((a', b', c', d')과 (a'', b'', c'', d'')) 각각의 좌표를 이용하여 상기 복수의 카메라별 복수개의 영상취득경로 각각의 평면의 법선벡터와 상기 평면의 법선벡터로부터 각각의 평면 방정식을 산출하는 건설장비 기울기 변화에 따른 어라운드 뷰 영상 왜곡 보정 장치
6 6
제5항에 있어서,상기 좌표 도출부는,다음의 수학식으로부터 상기 카메라(γ')의 복수개의 영상취득경로 각각의 평면의 법선벡터와 상기 평면의 법선벡터로부터 각각의 평면 방정식을 산출하고, 나머지 카메라(α, β, θ)에 대해서도 동일한 방식으로 산출하는 건설장비 기울기 변화에 따른 어라운드 뷰 영상 왜곡 보정 장치:,,,
7 7
제5항에 있어서,상기 좌표 도출부는,상기 산출된 복수의 카메라(α', γ', β', θ') 각각에 대하여 각각의 평면 방정식과 z=0 평면의 접점을 이용하여 상기 제2 영상취득범위 끝점 좌표를 각각 도출하고, 다음의 비례관계를 이용하여 상기 왜곡된 영상에서의 상기 제1 영상취득범위 끝점 좌표를 각 카메라별로 도출하는 건설장비 기울기 변화에 따른 어라운드 뷰 영상 왜곡 보정 장치:“ : = : “* 여기서, “는 상기 제2 영상취득범위 끝점 좌표, 는 상기 제1 영상취득범위 끝점 좌표, “*는 상기 왜곡된 영상에서의 상기 제1 영상취득범위 끝점 좌표이다
8 8
제7항에 있어서,상기 좌표 도출부는,상기 카메라(γ)에 대하여 아래의 수학식과 같이 상기 왜곡된 영상에서의 상기 제1 영상취득범위 끝점 좌표를 각각 산출하고, 나머지 카메라(α, β, θ)에 대해서도 동일하게 산출하는 건설장비 기울기 변화에 따른 어라운드 뷰 영상 왜곡 보정 장치:, ,, 여기서, c''*, C''*, d'*, D'*은 카메라(γ)에 대한 왜곡된 영상에서의 제1 영상취득범위 끝점이다
9 9
건설장비 기울기 변화에 따른 어라운드 뷰 영상 왜곡 보정 장치를 이용한 어라운드 뷰 영상 왜곡 보정 방법에 있어서,상기 건설장비의 전후좌우면에 각각 설치된 복수의 카메라(α, γ, β, θ)로부터 촬영된 복수의 영상을 수신하는 단계;상기 복수의 영상을 어라운드 뷰 형태의 영상으로 변환하는 단계;상기 건설장비에 설치되어 상기 건설장비가 피치(Pitch)와 롤(Roll) 방향으로 기울어진 각도를 각각 센싱하는 센서로부터 센싱된 각도값을 각각 수신하는 단계;상기 각도값을 반영하여 상기 건설장비가 평탄한 지면에 위치한 경우 촬영되는 제1 영상취득범위 끝점 좌표와, 기울어진 지면에 위치한 경우 촬영되는 제2 영상취득범위 끝점 좌표 및 상기 기울어진 지면에 의해 왜곡된 영상에서의 상기 제1 영상취득범위 끝점 좌표를 상기 복수의 영상별로 각각 도출하는 단계;상기 왜곡된 영상에서의 제1 영상취득범위 끝점 좌표를, 상기 제1 영상취득범위 끝점 좌표로 이동시켜 왜곡된 영상을 상기 복수의 영상별로 각각 보정하는 단계; 및상기 보정된 복수의 영상을 조합하여 어라운드 뷰 영상으로 출력하는 단계를 포함하고,상기 좌표를 각각 도출하는 단계는,상기 건설장비가 평탄한 지면에 위치했을 때 상기 건설장비의 중심을 원점으로 놓은 좌표상에서 상기 복수의 카메라(α, γ, β, θ)가 설치된 각각의 위치 좌표와, 상기 복수의 카메라로부터 촬영되는 영상취득범위 외부 끝점(A, B, C, D) 각각의 좌표 및 내부 끝점(a, b, c, d) 각각의 좌표로부터 각각의 평면의 법선벡터를 이용하여 상기 제1 영상취득범위 끝점 좌표를 각 카메라의 영상별로 복수개씩 산출하되,상기 카메라(γ)에 대하여 아래의 수학식과 같이 평면의 법선벡터를 이용하여 제1 영상취득범위 끝점 좌표를 각각 산출하고, 나머지 카메라(α, β, θ)에 대해서도 동일하게 산출하는 어라운드 뷰 영상 왜곡 보정 방법: ,,,여기서, r은 상기 건설장비의 중심을 기준으로 전후좌우 영상취득반경이다
10 10
삭제
11 11
삭제
12 12
제9항에 있어서,상기 좌표를 각각 도출하는 단계는,피치와 롤 방향의 각도값에 대한 회전행렬을 이용하여 상기 기울어진 지면에 위치한 건설장비에 설치된 복수의 카메라(α', γ', β', θ') 각각의 위치 좌표를 산출하는 어라운드 뷰 영상 왜곡 보정 방법
13 13
제12항에 있어서,상기 좌표를 각각 도출하는 단계는,상기 복수의 카메라(α', γ', β', θ') 각각의 위치 좌표와, 상기 복수의 카메라로부터 각각 촬영되는 영상취득범위 외부 끝점((A', B', C', D')과 (A'', B'', C'', D'')) 각각의 좌표 및 내부 끝점((a', b', c', d')과 (a'', b'', c'', d'')) 각각의 좌표를 이용하여 상기 복수의 카메라별 복수개의 영상취득경로 각각의 평면의 법선벡터와 상기 평면의 법선벡터로부터 각각의 평면 방정식을 산출하는 어라운드 뷰 영상 왜곡 보정 방법
14 14
제13항에 있어서,상기 좌표를 각각 도출하는 단계는,다음의 수학식으로부터 상기 카메라(γ')의 복수개의 영상취득경로 각각의 평면의 법선벡터와 상기 평면의 법선벡터로부터 각각의 평면 방정식을 산출하고, 나머지 카메라(α, β, θ)에 대해서도 동일한 방식으로 산출하는 어라운드 뷰 영상 왜곡 보정 방법:,,,
15 15
제13항에 있어서,상기 좌표를 각각 도출하는 단계는,상기 산출된 복수의 카메라(α', γ', β', θ') 각각에 대하여 각각의 평면 방정식과 z=0 평면의 접점을 이용하여 상기 제2 영상취득범위 끝점 좌표를 각각 도출하고, 다음의 비례관계를 이용하여 상기 왜곡된 영상에서의 상기 제1 영상취득범위 끝점 좌표를 각 카메라별로 도출하는 어라운드 뷰 영상 왜곡 보정 방법:“ : = : “* 여기서, “는 상기 제2 영상취득범위 끝점 좌표, 는 상기 제1 영상취득범위 끝점 좌표, “*는 상기 왜곡된 영상에서의 상기 제1 영상취득범위 끝점 좌표이다
16 16
제15항에 있어서,상기 좌표를 각각 도출하는 단계는,상기 카메라(γ)에 대하여 아래의 수학식과 같이 상기 왜곡된 영상에서의 상기 제1 영상취득범위 끝점 좌표를 각각 산출하고, 나머지 카메라(α, β, θ)에 대해서도 동일하게 산출하는 어라운드 뷰 영상 왜곡 보정 방법:, ,, 여기서, c''*, C''*, d'*, D'*은 카메라(γ)에 대한 왜곡된 영상에서의 제1 영상취득범위 끝점이다
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 국토교통부 부산대학교 산학협력단 건설기술연구사업 건설장비 AR-어라운드 뷰 네비게이터 기술 개발(3차년도)