맞춤기술찾기

이전대상기술

특징기반의 스테레오 매칭 방법 및 장치

  • 기술번호 : KST2015089261
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명에 따른 특징기반의 스테레오 매칭 방법 및 장치가 개시된다. 본 발명에 따른 스테레오 매칭 방법은 적어도 두 개의 카메라로 동일한 시각에 다른 관점에서 촬영된 레퍼런스 영상과 적어도 하나의 비교 영상에 대하여, 컴퓨터 장치를 이용하여 스테레오 매칭하는 방법으로, 상기 레퍼런스 영상과 상기 적어도 하나의 비교 영상을 수집하는 단계, 상기 레퍼런스 영상에서 특징점들을 추출하는 단계, 광 흐름 기법을 이용하여, 상기 적어도 하나의 비교 영상에서 각각 상기 각 특징점들에 대응되는 점들을 추적하는 대응점 추적단계 및 상기 대응점 추적 결과에 따라 깊이 맵을 생성하는 단계를 포함하여 구성된다. 따라서, 캘리브레이션의 필요 없이, 광흐름 기법을 이용한 특징점 추적을 통하여 양안 영상의 색감이나 밝기에 민감하지 않은 안정적인 고속의 깊이 맵을 생성할 수 있으며, 복수의 카메라의 상대적 위치나 배치 간격과 같은 최소한의 사전 정보를 이용하여 추적 윈도우의 모양이나 크기를 조정함으로써 특징점 추적 속도와 정확도가 개선된 스테레오 매칭을 수행할 수 있다.
Int. CL H04N 13/00 (2006.01) H04N 5/262 (2006.01)
CPC H04N 13/271(2013.01) H04N 13/271(2013.01) H04N 13/271(2013.01) H04N 13/271(2013.01) H04N 13/271(2013.01) H04N 13/271(2013.01)
출원번호/일자 1020110023400 (2011.03.16)
출원인 한국전자통신연구원
등록번호/일자
공개번호/일자 10-2012-0105764 (2012.09.26) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2016.03.15)
심사청구항수 16

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국전자통신연구원 대한민국 대전광역시 유성구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 박준석 대한민국 대전광역시 유성구
2 고은진 대한민국 대전광역시 서구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인이상 대한민국 서울특별시 서초구 바우뫼로 ***(양재동, 우도빌딩 *층)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 한국전자통신연구원 대전광역시 유성구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2011.03.16 수리 (Accepted) 1-1-2011-0191791-82
2 출원인정보변경(경정)신고서
Notification of change of applicant's information
2015.02.02 수리 (Accepted) 4-1-2015-0006137-44
3 [심사청구]심사청구(우선심사신청)서
[Request for Examination] Request for Examination (Request for Preferential Examination)
2016.03.15 수리 (Accepted) 1-1-2016-0247766-70
4 선행기술조사의뢰서
Request for Prior Art Search
2016.12.13 수리 (Accepted) 9-1-9999-9999999-89
5 선행기술조사보고서
Report of Prior Art Search
2017.03.13 발송처리완료 (Completion of Transmission) 9-6-2017-0043042-64
6 의견제출통지서
Notification of reason for refusal
2017.03.21 발송처리완료 (Completion of Transmission) 9-5-2017-0204178-73
7 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2017.05.19 수리 (Accepted) 1-1-2017-0478138-14
8 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2017.05.19 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2017-0478348-95
9 등록결정서
Decision to grant
2017.08.21 발송처리완료 (Completion of Transmission) 9-5-2017-0577857-14
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
다른 관점에서 촬영된 레퍼런스 영상과 적어도 하나의 비교 영상에 대하여, 컴퓨터 장치를 이용하여 스테레오 매칭하는 방법으로,상기 레퍼런스 영상과 상기 적어도 하나의 비교 영상을 수집하는 단계;상기 레퍼런스 영상에서 특징점들을 추출하는 단계;광 흐름 기법을 이용하여, 상기 적어도 하나의 각 비교 영상에서 상기 각 특징점들에 대응되는 점들을 추적하는 대응점 추적단계; 및상기 대응점 추적 결과에 따라 깊이 맵을 생성하는 단계를 포함하고,상기 레퍼런스 영상에서 특징점들을 추출하는 단계는, 상기 레퍼런스 영상의 각 위치에서 그레디언트 행렬 G의 고유값을 계산하고, 그 결과로 산출된 두 개의 고유값 중 작은 고유값에 대하여 내림차순으로 각 해당하는 점들을 나열함으로써, 일정순위 내의 점들을 추출하는 스테레오 매칭 방법
2 2
제 1항에 있어서,상기 레퍼런스 영상과 상기 적어도 하나의 비교 영상 각각에 대하여, 본래의 영상보다 해상도를 일정 단계별로 낮추어서, 다양한 해상도 레벨을 갖는 영상을 생성하되, 본래 영상보다 해상도가 낮은 적어도 하나의 영상을 생성하는 단계를 더 포함하고, 상기 특징점 추출 및 대응점 추적은 해상도가 가장 낮은 레퍼런스 영상과 이에 대응하는 비교 영상에서부터 시작하여, 본래의 해상도를 갖는 레퍼런스 영상과 이에 대응하는 비교 영상에 대해서 최종적으로 수행하는 것을 특징으로 하는 스테레오 매칭 방법
3 3
삭제
4 4
제 1항에 있어서,상기 광흐름 기법에 뉴턴-랩슨(Newton-Raphson) 방법을 적용함으로써, 여러 번 반복하여 근접한 대응점을 찾는 것을 특징으로 하는 스테레오 매칭 방법
5 5
제 1항에 있어서,상기 대응점 추적단계는,상기 레퍼런스 영상에서 상기 특징점에 대응하는 점들을 추적하기 위한, 특징점 추적 윈도우를 구성하는 단계를 포함하고, 상기 특징점 추적 윈도우는 미리 제공된 정보에 따라서, 윈도우의 크기, 모양 및 중심점의 위치가 변경되는 것을 특징으로 하는 스테레오 매칭 방법
6 6
제 5항에 있어서,상기 미리 제공된 정보는 적어도 두 대의 카메라간의 상대적 위치, 배치 간격 중 적어도 하나를 포함하는 것을 특징으로 하는 스테레오 매칭 방법
7 7
제 1항에 있어서,상기 레퍼런스 영상과 상기 적어도 하나의 비교 영상의 전경과 배경을 분리시키는 단계를 더 포함하고,상기 레퍼런스 영상과 상기 적어도 하나의 비교 영상은 각각 적외선 조명을 이용하여 촬영되고, 상기 특징점 추출과 상기 대응점 추적은 각각 상기 레퍼런스 영상의 전경 및 상기 적어도 하나의 비교 영상의 전경에 대해서 수행되는 것을 특징으로 하는 스테레오 매칭 방법
8 8
제 7항에 있어서,상기 각 영상으로부터 전경과 배경을 분리시키는 방법은 상기 각 영상에서 일정한 밝기 이상의 영역을 전경으로 분리하거나 또는 영상의 일정한 비율을 전경으로 분리하는 것을 특징으로 하는 스테레오 매칭 방법
9 9
제 1항에 있어서,상기 레퍼런스 영상 및 적어도 하나의 비교 영상은 적어도 2개의 카메라로 동일한 시각에 다른 관점에서 촬영된 것을 특징으로 하는 스테레오 매칭 방법
10 10
다른 관점에서 촬영된 레퍼런스 영상과 적어도 하나의 비교영상에 대하여, 컴퓨터 장치를 이용하여 스테레오 매칭하는 방법으로,상기 레퍼런스 영상과 상기 적어도 하나의 비교영상을 수집하는 단계;상기 레퍼런스 및 상기 적어도 하나의 비교 영상 각각에 대하여, 본래의 영상보다 해상도를 일정 단계별로 낮추어서, 다양한 해상도 레벨을 갖는 영상을 생성하되, 본래 영상보다 해상도가 낮은 적어도 하나의 영상을 생성하는 단계;상기 레퍼런스 영상에서 제1특징점들을 추출하는 단계;광 흐름 기법을 이용하여, 상기 적어도 하나의 각 비교 영상에서, 상기 각 제1 특징점들에 대응되는 제 1 대응점들을 추적하는 단계;상기 적어도 하나의 각 비교 영상에서 제 2 특징점들을 추출하는 단계;광 흐름 기법을 이용하여, 상기 레퍼런스 영상에 대하여, 상기 각 제 2 특징점들에 대응되는 제 2 대응점들을 추적하는 단계; 및상기 제 1 및 제 2 대응점 추적 결과를 합성하여 깊이 맵을 생성하는 단계를 포함하고,상기 제1 및 제2 특징점 추출과 상기 제1 및 제2 대응점 추적은 해상도가 가장 낮은 영상들에 대해서부터 시작하여, 본래의 해상도를 갖는 영상들에 대해서 최종적으로 수행하고,상기 제1 특징점들을 추출하는 단계 및 상기 제2 특징점들을 추출하는 단계는,상기 레퍼런스 영상 및 적어도 하나의 비교 영상의 각 위치에서 그레디언트 행렬 G의 고유값을 계산하고, 그 결과로 산출된 두 개의 고유값 중 작은 고유값에 대하여 내림차순으로 각 해당하는 점들을 나열함으로써, 일정순위 내의 점들을 추출하는 것을 특징으로 하는 스테레오 매칭 방법
11 11
삭제
12 12
다른 관점에서 촬영된 레퍼런스 영상과 적어도 하나의 비교 영상을 이용하여, 스테레오 매칭하는 장치로,상기 레퍼런스 영상과 상기 적어도 하나의 비교 영상을 수집하는 영상 수집부;상기 레퍼런스 영상에서 특징점들을 추출하되, 상기 레퍼런스 영상의 각 위치의 그레디언트 행렬의 고유값을 계산하고, 그 결과로 산출된 두 개의 고유값 중 작은 고유값에 대하여 내림차순으로 각 해당하는 점들을 나열함으로써, 일정순위 내의 점들을 특징점으로 추출하는 특징점 추출부;광 흐름 기법을 이용하여, 상기 적어도 하나의 비교영상에서 각각 상기 각 특징점들에 대응되는 점들을 추적하는 대응점 추적부; 및상기 대응점들 추적 결과를 이용하여 깊이 맵을 생성하는 깊이 맵 생성부를 포함하는 것을 특징으로 하는 스테레오 매칭 장치
13 13
제 12항에 있어서,상기 레퍼런스 영상과 적어도 하나의 비교영상 각각에 대하여, 본래의 영상보다 해상도를 일정 단계별로 낮추어서, 다양한 해상도 레벨을 갖는 영상을 생성하되, 본래 영상보다 해상도가 낮은 적어도 하나의 영상을 생성하는 해상도 조정부를 더 포함하고, 상기 특징점 추출 및 대응점 추적은 해상도가 가장 낮은 레퍼런스 영상과 이에 대응하는 비교영상에서부터 시작하여, 본래의 해상도를 갖는 레퍼런스 영상과 이에 대응하는 비교 영상에 대해서 최종적으로 수행하는 것을 특징으로 하는 스테레오 매칭 장치
14 14
제 12항에 있어서,상기 대응점 추적부는 특징점 추적 윈도우를 이용하여 상기 레퍼런스 영상에서 상기 특징점에 대응하는 점들을 추적하고, 상기 특징점 추적 윈도우는 적어도 두 대의 카메라간의 상대적 위치, 배치 간격 중 적어도 하나의 정보를 기초로, 윈도우의 크기, 모양 및 중심점의 위치가 변경되는 것을 특징으로 하는 스테레오 매칭 장치
15 15
제 12항에 있어서,상기 레퍼런스 영상과 상기 적어도 하나의 영상에서 각각 전경과 배경을 분리하되, 상기 각 영상의 일정한 밝기 이상의 영역 또는 일정한 비율을 전경으로 분리하는 전경/배경 분리부를 더 포함하고, 상기 레퍼런스 영상과 상기 적어도 하나의 비교 영상은 각각 적외선 조명을 이용하여 촬영되고, 상기 특징점 추출과 상기 광흐름 기법을 이용한 대응점 추적은 각각 상기 레퍼런스 영상 및 상기 적어도 하나의 비교 영상의 전경에 대해서 수행되는 것을 특징으로 하는 스테레오 매칭 장치
16 16
제 12항에 있어서,상기 적어도 하나의 비교 영상에서 제 2 특징점들을 추출하는 제 2 특징점 추출부; 및광 흐름 기법을 이용하여, 상기 레퍼런스 영상에서, 상기 각 제 2 특징점들에 대응되는 점을 추출하는 제 2 대응점 추적부를 더 포함하고, 상기 깊이 맵 생성부는 상기 대응점 추적 결과에 상기 제2 대응점 추적결과를 합성하여 상기 깊이 맵을 생성하는 것을 특징으로 하는 스테레오 매칭 장치
17 17
제 12항에 있어서,상기 레퍼런스 영상 및 적어도 하나의 비교 영상은 적어도 2개의 카메라로 동일한 시각에 다른 관점에서 촬영된 것을 특징으로 하는 스테레오 매칭 장치
18 18
제 12항에 있어서,상기 스테레오 매칭 장치는 박막 형태로 제작되어 컴퓨터의 LCD 측에 내장하거나 부착하는 것을 특징으로 하는 스테레오 매칭 장치
지정국 정보가 없습니다
순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - 패밀리정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 US08787656 US 미국 FAMILY
2 US20120237114 US 미국 FAMILY

DOCDB 패밀리 정보

순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - DOCDB 패밀리 정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 US2012237114 US 미국 DOCDBFAMILY
2 US8787656 US 미국 DOCDBFAMILY
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 지식경제부 한국전자통신연구원 정보통신산업원천기술개발사업 비접촉식 멀티포인트 실감 인터랙션 기술 개발