맞춤기술찾기

이전대상기술

스테레오 비전 시스템의 렉티피케이션 장치 및 그 방법(Apparatus for Rectification of Stereo Vision System and Method thereof)

  • 기술번호 : KST2017008174
  • 담당센터 : 대구기술혁신센터
  • 전화번호 : 053-550-1450
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 스테레오 비전 시스템의 렉티피케이션 장치 및 그 방법에 관한 것으로서, 스테레오 카메라로부터 획득한 좌우 영상에 대한 렉티피케이션을 수행하는 전처리 모듈을 포함하는 스테레오 비전 시스템에 의해 수행되는 스테레오 비전 시스템의 렉티피케이션 방법에 있어서, 상기 렉티피케이션의 축이동을 위해 상기 스테레오 카메라의 파라미터들 및 렉티피케이션 파라미터들로 구성되는 행렬식에서 기설정된 파라미터들과 변수를 구분하고, 상기 행렬식에 기설정된 파라미터들에 대한 상수 파라미터들을 대입하여 상기 변수에 대한 일차 함수로 변환하는 단계; 상기 스테레오 카메라로부터 전송되는 좌우 영상을 저장하는 단계; 상기 렉티피케이션 영상 평면의 좌표를 열이 증가하는 방향 또는 행이 증가하는 방향으로 상기 일차 함수를 이용하여 픽셀 단위의 좌표 연산을 누적 연산으로 순차 진행하는 단계; 상기 좌표 연산의 결과값에 해당하는 좌표에서의 픽셀값을 선형 보간하기 위한 카메라 영상 평면의 좌표들과 가중치를 산출하는 단계; 및 상기 저장한 좌우 영상에서 상기 산출한 카메라 영상 평면의 좌표들과 가중치를 이용하여 픽셀값을 선형 보간 한 후 그 픽셀 값을 상기 렉티피케이션 영상 평면의 좌표에 맵핑하는 단계를 포함한다. 따라서, 본 발명은 렉티피케이션의 복잡한 행렬 연산에서 카메라의 캘리브레이션 과정으로 추출된 파라미터 값을 상수 값으로 대체한 후 카메라 좌표 연산의 규칙성을 이용하여 복잡한 행렬 연산을 단순한 누적 연산으로 간소화할 수 있고, 그로 인해 스테레오 정합의 시차 탐색 영역을 줄임으로써 그 연산을 대폭 감소시켜 스테레오 카메라로부터 전송되는 좌우 영상을 실시간 스테레오 정합 처리 및 구현을 용이하게 할 수 있는 효과가 있다.
Int. CL H04N 13/02 (2016.01.06) H04N 13/00 (2016.01.06)
CPC H04N 13/20(2013.01) H04N 13/20(2013.01)
출원번호/일자 1020150163224 (2015.11.20)
출원인 경북대학교 산학협력단
등록번호/일자
공개번호/일자 10-2017-0059518 (2017.05.31) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2015.11.20)
심사청구항수 10

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 경북대학교 산학협력단 대한민국 대구광역시 북구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 문병인 대한민국 대구광역시 서구
2 현종길 대한민국 대구광역시 달서구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인(유한) 해담 대한민국 서울특별시 강남구 논현로 ***, **층 *호(역삼동, 송촌빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 경북대학교 산학협력단 대구광역시 북구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2015.11.20 수리 (Accepted) 1-1-2015-1134317-66
2 [대리인선임]대리인(대표자)에 관한 신고서
[Appointment of Agent] Report on Agent (Representative)
2016.01.27 수리 (Accepted) 1-1-2016-0089611-40
3 의견제출통지서
Notification of reason for refusal
2016.12.12 발송처리완료 (Completion of Transmission) 9-5-2016-0893889-53
4 [공지예외적용 보완 증명서류]서류제출서
2017.02.13 수리 (Accepted) 1-1-2017-0145196-20
5 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2017.02.13 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2017-0145284-40
6 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2017.02.13 수리 (Accepted) 1-1-2017-0145277-20
7 [출원서 등 보정(보완)]보정서
2017.02.13 수리 (Accepted) 1-1-2017-0145183-37
8 등록결정서
Decision to grant
2017.03.07 발송처리완료 (Completion of Transmission) 9-5-2017-0169420-62
9 출원인정보변경(경정)신고서
Notification of change of applicant's information
2018.03.26 수리 (Accepted) 4-1-2018-5051994-32
10 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.06.23 수리 (Accepted) 4-1-2020-5136893-04
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
스테레오 카메라로부터 획득한 좌우 영상에 대한 렉티피케이션을 수행하는 전처리 모듈을 포함하는 스테레오 비전 시스템에 의해 수행되는 스테레오 비전 시스템의 렉티피케이션 방법에 있어서,상기 렉티피케이션의 축이동을 위해 상기 스테레오 카메라의 파라미터들 및 렉티피케이션 파라미터들로 구성되는 행렬식에서 기설정된 파라미터들과 변수를 구분하고, 상기 행렬식에 기설정된 파라미터들에 대한 상수 파라미터들을 대입하여 상기 변수에 대한 일차 함수로 변환하는 단계;상기 스테레오 카메라로부터 전송되는 좌우 영상을 저장하는 단계;렉티피케이션 영상 평면 좌표를 열이 증가하는 방향 또는 행이 증가하는 방향으로 상기 일차 함수를 이용하여 픽셀 단위의 좌표 연산을 누적 연산으로 순차 진행하는 단계; 상기 좌표 연산의 결과값에 해당하는 좌표에서의 픽셀값을 선형 보간하기 위한 카메라 영상 평면의 좌표들과 가중치를 산출하는 단계; 및 상기 저장한 좌우 영상에서 상기 산출한 카메라 영상 평면의 좌표들과 가중치를 이용하여 픽셀값을 선형 보간 한 후 그 픽셀 값을 상기 렉티피케이션 영상 평면의 좌표에 맵핑하는 단계를 포함하는 것을 특징으로 하는 스테레오 비전 시스템의 렉티피케이션 방법
2 2
제1항에 있어서, 상기 렉티피케이션 영상 평면 좌표를 열이 증가하는 방향 또는 행이 증가하는 방향으로 상기 일차 함수를 이용하여 픽셀 단위의 좌표 연산을 누적 연산으로 순차 진행하는 단계는,열이 증가하는 방향으로 좌표 연산이 진행될 경우에 상기 일차 함수는 행이 증가하는 방향의 변수가 고정되어 제1 기울기를 갖는 제1 직선 방정식이 되고, 행이 증가하는 방향으로 좌표 연산이 진행될 경우에 상기 일차 함수는 열이 증가하는 방향의 변수가 고정되어 제2 기울기를 갖는 제2 직선 방정식이 되는 단계; 및 상기 열이 증가하는 방향으로 좌표 연산을 진행할 경우에 픽셀 단위로 상기 제1 기울기만큼의 상수가 누적되고, 상기 행이 증가하는 방향으로 좌표 연산을 진행할 경우에 픽셀 단위로 상기 제2 기울기만큼의 상수 누적되는 단계를 더 포함하는 것을 특징으로 하는 스테레오 비전 시스템의 렉티피케이션 방법
3 3
제1항에 있어서, 상기 행렬식은 수학식 1과 같고, 상기 상수 파라미터들은 수학식 2와 같으며, 상기 변수에 대한 일차 함수는 수학식 3과 같이 나타내고,[수학식 1][수학식 2][수학식 3]수학식 1 및 수학식 2에서 A는 스테레오 카메라의 내부 파라미터, Rrect은 스테레오 카메라의 렉티피케이션 회전 행렬, Arect는 렉티피케이션 영상 평면의 내부 파라미터인 것을 특징으로 하는 스테레오 비전 시스템의 렉티피케이션 방법
4 4
제3항에 있어서, 상기 렉티피케이션 영상 평면 좌표를 열이 증가하는 방향 또는 행이 증가하는 방향으로 상기 일차 함수를 이용하여 픽셀 단위로 좌표 연산을 진행하는 단계는,상기 좌우 영상이 M×N 영상인 경우에, 상기 일차 함수는 열이 증가하는 방향으로 좌표 연산이 진행되면 행이 증가하는 방향의 변수(yrect)가 고정되어 제1 기울기가 [c11 c21 c31]T이 되고, 행이 증가하는 방향으로 좌표 연산이 진행되면 열이 증가하는 방향의 변수(xrect)가 고정되어 제2 기울기가 [c12-(M-1)c11 c22-(M-1)c21 c32-(M-1)c31]T이 되는 것을 특징으로 하는 스테레오 비전 시스템의 렉티피케이션 방법
5 5
제4항에 있어서, 상기 렉티피케이션의 영상 평면 좌표의 첫 번째 지점인 (0, 0)에서 초기값 [c13 c23 c33]T을 갖는 것을 특징으로 하는 스테레오 비전 시스템의 렉티피케이션 방법
6 6
스테레오 카메라로부터 획득한 좌우 영상에 대한 렉티피케이션을 수행하는 전처리 모듈을 포함하는 스테레오 비전 시스템에 의해 수행되는 스테레오 비전 시스템의 렉티피케이션 장치에 있어서, 상기 전처리 모듈은, 상기 스테레오 카메라로부터 전송되는 좌우 영상을 저장하는 영상 저장부;상기 렉티피케이션의 축이동을 위해 상기 스테레오 카메라의 파라미터들 및 렉티피케이션 파라미터들로 구성되는 행렬식에서 기설정된 파라미터들과 변수를 구분하고, 행렬식에 기설정된 파라미터들에 대한 상수 파라미터들을 대입하여 행렬식을 변수에 대한 일차 함수로 변환한 후 상기 일차 함수를 이용하여 렉티피케이션 영상 평면의 좌표에 대응되는 카메라 영상 평면의 좌표를 픽셀 단위의 누적 연산으로 좌표 연산을 진행하는 좌표 연산부; 및 상기 좌표 연산부의 결과값에 해당하는 좌표에서의 픽셀값을 선형 보간하기 위한 카메라 영상 평면의 좌표들과 가중치를 산출하는 좌표 산출부; 및 상기 영상 저장부에 저장된 좌우 영상에서 상기 좌표 산출부에서 산출한 좌표들과 가중치를 이용하여 상기 좌표 연산부에서 산출한 좌표의 픽셀값을 선형 보간하여 그 픽셀 값을 상기 렉티피케이션 영상 평면의 좌표에 맵핑하는 좌표 맵핑부를 포함하는 것을 특징으로 하는 스테레오 비전 시스템의 렉티피케이션 장치
7 7
제6항에 있어서,상기 전처리 모듈은 상기 스테레오 카메라로부터 전송되는 좌우 영상을 수신하여 상기 영상 저장부에 전송하는 영상 수신부를 더 포함하는 것을 특징으로 하는 스테레오 비전 시스템의 렉티피케이션 장치
8 8
제6항에 있어서, 상기 행렬식은 수학식 1과 같고, 상기 상수 파라미터들은 수학식 2와 같으며, 상기 변수에 대한 일차 함수는 수학식 3과 같이 나타내고,[수학식 1][수학식 2][수학식 3]수학식 1 및 수학식 2에서 A는 스테레오 카메라의 내부 파라미터, Rrect은 스테레오 카메라의 렉티피케이션 회전 행렬, Arect는 렉티피케이션 영상 평면의 내부 파라미터인 것을 특징으로 하는 스테레오 비전 시스템의 렉티피케이션 장치
9 9
제8항에 있어서, 상기 좌표 연산부는, 상기 좌우 영상이 M×N 영상인 경우에, 상기 일차 함수는 열이 증가하는 방향으로 좌표 연산이 진행되면 행이 증가하는 방향의 변수(yrect)가 고정되어 제1 기울기가 [c11 c21 c31]T이 되고, 행이 증가하는 방향으로 좌표 연산이 진행되면 열이 증가하는 방향의 변수(xrect)가 고정되어 제2 기울기가 [c12-(M-1)c11 c22-(M-1)c21 c32-(M-1)c31]T이 되는 것을 특징으로 하는 스테레오 비전 시스템의 렉티피케이션 장치
10 10
제9항에 있어서, 상기 렉티피케이션 영상 평면 좌표의 첫 번째 지점인 (0, 0)에서 초기값 [c13 c23 c33]T을 갖는 것을 특징으로 하는 스테레오 비전 시스템의 렉티피케이션 장치
지정국 정보가 없습니다
순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - 패밀리정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 US09866821 US 미국 FAMILY
2 US20170148150 US 미국 FAMILY

DOCDB 패밀리 정보

순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - DOCDB 패밀리 정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 US2017148150 US 미국 DOCDBFAMILY
2 US9866821 US 미국 DOCDBFAMILY
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 미래창조과학부 경북대학교 ICT융합고급인력과정지원사업 스마트 자동차를 위한 AUTOSAR 기반 차량 내외부 통신 플랫폼 및 응용 기술