맞춤기술찾기

이전대상기술

멀티 카메라 촬영 영상의 기하보정 방법 및 장치

  • 기술번호 : KST2019009470
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 멀티 카메라를 통해 촬영한 영상의 기하보정 방법 및 영상 획득 장치에 관한 것으로, 특히, 상대적 기하관계가 고정된 멀티 카메라와 움직임이 자유로운 카메라를 함께 사용한 영상 촬영 장비를 통해 촬영한 영상들의 기하보정 방법 및 영상 획득 장치에 관한 것이다. 본 발명의 멀티 카메라 영상의 기하보정 방법은, 카메라로부터 촬영된 영상들을 수신하는, 영상 입력 단계, 상기 입력된 영상들의 특징점을 추출하고, 추출된 특징점 간의 상호 관련성을 확인하는, 영상 특징점 추출 단계, 상기 특징점간 상호 관련성을 이용하여 각 영상이 획득된 카메라의 위치와 방향을 추정하는, 위치 및 방향 추정 단계, 상기 입력된 영상들이, 상호 기하관계가 고정된 멀티 카메라로부터 획득된 영상으로 판단되는 경우, 상기 추정된 카메라의 위치 및 방향으로부터 멀티 카메라간 상대적 기하관계를 계산하는 단계, 및 상기 계산된 기하관계를 이용하여 각 영상의 기하보정을 수행하는 단계를 포함하는 것을 특징으로 한다. 본 발명의 실시예에 따른 효율적인 기하보정 방법을 통해, 촬영 시간이 짧은 무인기를 이용한 영상 획득이 보다 용이하게 한다.
Int. CL G06T 5/00 (2019.01.01) G06T 7/11 (2017.01.01) G06T 7/73 (2017.01.01)
CPC G06T 5/006(2013.01) G06T 5/006(2013.01) G06T 5/006(2013.01) G06T 5/006(2013.01)
출원번호/일자 1020170167846 (2017.12.07)
출원인 한국전자통신연구원
등록번호/일자
공개번호/일자 10-2019-0067671 (2019.06.17) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2019.01.11)
심사청구항수 14

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국전자통신연구원 대한민국 대전광역시 유성구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 추창우 대전광역시 서구
2 강경규 대전광역시 유성구
3 김혜선 대전광역시 유성구
4 박창준 대전광역시 유성구
5 반윤지 대전광역시 유성구
6 유동완 대전광역시 서구
7 유정재 대전광역시 유성구
8 이만희 대전광역시 유성구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 성병기 대한민국 서울특별시 서초구 사임당로 **, **층 (서초동, 재우빌딩)(마루특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2017.12.07 수리 (Accepted) 1-1-2017-1222644-47
2 [심사청구]심사청구(우선심사신청)서
[Request for Examination] Request for Examination (Request for Preferential Examination)
2019.01.11 수리 (Accepted) 1-1-2019-0036369-78
3 선행기술조사의뢰서
Request for Prior Art Search
2019.10.02 수리 (Accepted) 9-1-9999-9999999-89
4 선행기술조사보고서
Report of Prior Art Search
2019.11.08 발송처리완료 (Completion of Transmission) 9-6-2020-0020242-09
5 의견제출통지서
Notification of reason for refusal
2020.02.18 발송처리완료 (Completion of Transmission) 9-5-2020-0122451-25
6 [거절이유 등 통지에 따른 의견]의견서·답변서·소명서
2020.04.20 수리 (Accepted) 1-1-2020-0406143-15
7 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2020.04.20 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2020-0406144-50
8 거절결정서
Decision to Refuse a Patent
2020.10.19 발송처리완료 (Completion of Transmission) 9-5-2020-0715251-43
9 [명세서등 보정]보정서(재심사)
Amendment to Description, etc(Reexamination)
2020.11.18 보정승인 (Acceptance of amendment) 1-1-2020-1239050-17
10 [거절이유 등 통지에 따른 의견]의견서·답변서·소명서
2020.11.18 수리 (Accepted) 1-1-2020-1239051-63
11 등록결정서
Decision to Grant Registration
2020.11.24 발송처리완료 (Completion of Transmission) 9-5-2020-0816003-28
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
멀티 카메라 영상의 기하보정 방법에 있어서, 카메라로부터 촬영된 영상들을 수신하는, 영상 입력 단계, 상기 입력된 영상들의 특징점을 추출하고, 추출된 특징점 간의 상호 관련성을 확인하는, 영상 특징점 추출 단계,상기 특징점간 상호 관련성을 이용하여 각 영상이 획득된 카메라의 위치와 방향을 추정하는, 위치 및 방향 추정 단계, 상기 입력된 영상들이, 상호 기하관계가 고정된 멀티 카메라로부터 획득된 영상으로 판단되는 경우, 상기 추정된 카메라의 위치 및 방향으로부터 멀티 카메라간 상대적 기하관계를 계산하는 단계, 및상기 계산된 기하관계를 이용하여 각 영상의 기하보정을 수행하는 단계를 포함하는, 멀티 카메라 영상의 기하보정 방법
2 2
제 1 항에 있어서, 상기 입력된 영상들이, 상호 기하관계가 고정된 멀티 카메라가 아닌 움직임이 자유로운 카메라로부터 획득된 영상이라고 판단되는 경우, 상기 추정된 카메라의 위치 및 방향을 적용하여 각 영상의 기하보정을 수행하는 단계를 더 포함하는, 멀티 카메라 영상의 기하보정 방법
3 3
제 2 항에 있어서, 상호 기하관계가 고정된 멀티 카메라로부터 획득된 영상을 기하보정하는 단계 및 상호 기하관계가 고정된 멀티 카메라가 아닌 움직임이 자유로운 카메라로부터 획득된 영상을 기하보정하는 단계를, 동시에 처리하는 것을 특징으로 하는 멀티 카메라 영상의 기하보정 방법
4 4
제 1 항 또는 3 항에 있어서, 상기 특징점간 상호 관련성을 이용하여 기하보정 초기화를 수행하는 기하보정 초기화 단계를 더 포함하는, 멀티 카메라 영상의 기하보정 방법
5 5
제 4 항에 있어서, 상기 기하보정 초기화 단계는, 초기 프레임 영상들로부터 영상간 필수 메트릭스(essential matrix)를 분해하여 상대적인 자세 및 위치값을 획득하는 것을 특징으로 하는, 멀티 카메라 영상의 기하보정 방법
6 6
제 1 항 있어서, 상기 영상 입력 단계는, 근거리 무선통신 수단, 유무선 데이터 통신수단 또는 각 카메라로부터 직접 복사 중 어느 한 방법으로 촬영된 영상을 수신하는 것을 특징으로 하는, 멀티 카메라 영상의 기하보정 방법
7 7
제 1 항에 있어서, 상기 영상 입력 단계는, 입력 영상의 메타정보(meta information)를 이용하여 상호 기하관계가 고정된 카메라에서 촬영된 영상을 분류하는 단계를 포함하는 멀티 카메라 영상의 기하보정 방법
8 8
제 7 항에 있어서, 상기 영상 입력 단계는, 상기 상호 기하관계가 고정된 카메라에서 촬영된 영상으로 분류된 경우, 멀티 카메라중 어느 한 카메라로 획득한 영상을, 각 촬영시간별 참조 영상으로 결정하고, 나머지 다른 카메라에서 촬영한 영상을 참조 영상과 동일 시점에 촬영된 비교 영상으로 결정하는 단계를 더 포함하는 멀티 카메라 영상의 기하보정 방법
9 9
제 3 항에 있어서, 상기 기하보정을 동시에 수행하는 단계는, 카메라간 상호 기하관계 및 카메라군, 움직임이 자유로운 카메라의 위치, 방향 동시 최적화를 수행하는 것을 특징으로 하는 멀티 카메라 영상의 기하보정 방법
10 10
제 1 항에 있어서, 상기 카메라간 상호 기하관계 계산 단계는, 획득된 영상으로부터 영상 촬영시점의 카메라간 상호 기하관계를 추정하는 것을 특징으로 하는 멀티 카메라 영상의 기하보정 방법
11 11
멀티 카메라 영상의 기하보정을 포함하는 영상 획득 장치에 있어서, 카메라로부터 촬영된 영상들을 수신하는, 영상 입력부, 상기 입력된 영상들의 특징점을 추출하고, 추출된 특징점 간의 상호 관련성을 확인하는, 영상 특징점 추출부, 상기 특징점간 상호 관련성을 이용하여 각 영상이 획득된 카메라의 위치와 방향을 추정하고, 상기 입력된 영상들이, 상호 기하관계가 고정된 멀티 카메라로부터 획득된 영상으로 판단되는 경우, 상기 추정된 카메라의 위치 및 방향으로부터 멀티 카메라간 상대적 기하관계를 계산하는 기하관계 판단부, 및상기 계산된 기하관계를 이용하여 각 영상의 기하보정을 수행하는 기하보정 처리부를 포함하는, 영상 획득 장치
12 12
제 11 항에 잇어서, 기하보정될 영상 또는 기하보정된 영상을 시각적으로 보여주는 디스플레이부를 더 포함하는, 영상 획득 장치
13 13
제 11 항에 잇어서, 카메라 또는 외부 기기와 통신을 수행하는 통신부를 더 포함하는, 영상 획득 장치
14 14
제 11 항에 있어서, 상기 기하보정 처리부는, 상기 입력된 영상들이, 상호 기하관계가 고정된 멀티 카메라가 아닌 움직임이 자유로운 카메라로부터 획득된 영상이라고 판단되는 경우, 상기 추정된 카메라의 위치 및 방향을 적용하여 각 영상의 기하보정을 수행하는 것을 특징으로 하는 영상 획득 장치
15 15
제 14 항에 있어서, 상기 기하보정 처리부는, 상호 기하관계가 고정된 멀티 카메라로부터 획득된 영상을 기하보정하는 과정 및 상호 기하관계가 고정된 멀티 카메라가 아닌 움직임이 자유로운 카메라로부터 획득된 영상을 기하보정하는 과정을, 동시에 처리하는 것을 특징으로 하는 영상 획득 장치
16 16
제 11 항 또는 15 항에 있어서, 상기 영상 특징점 추출부는, 상기 특징점간 상호 관련성을 이용하여 기하보정 초기화를 수행하는 과정을 포함하는, 영상 획득 장치
17 17
제 11 항에 있어서, 상기 영상 입력부는 입력 영상의 메타정보(meta information)를 이용하여 상호 기하관계가 고정된 카메라에서 촬영된 영상을 분류하는 과정을 포함하는, 영상 획득 장치
18 18
제 17 항에 있어서, 상기 영상 입력부는, 상기 상호 기하관계가 고정된 카메라에서 촬영된 영상으로 분류된 경우, 멀티 카메라중 어느 한 카메라로 획득한 영상을, 각 촬영시간별 참조 영상으로 결정하고, 나머지 다른 카메라에서 촬영한 영상을 참조 영상과 동일 시점에 촬영된 비교 영상으로 결정하는 것을 특징으로 하는, 영상 획득 장치
19 19
제 15 항에 있어서, 상기 기하보정 처리부는, 상기 기하보정을 동시에 수행함에 있어서, 카메라간 상호 기하관계 및 카메라군, 움직임이 자유로운 카메라의 위치, 방향 동시 최적화를 수행하는 것을 특징으로 하는 영상 획득 장치
20 20
제 11 항에 있어서, 상기 기하관계 판단부는, 획득된 영상으로부터 영상 촬영시점의 카메라간 상호 기하관계를 추정하는 것을 특징으로 하는 영상 획득 장치
지정국 정보가 없습니다
순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - 패밀리정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 US20190180422 US 미국 FAMILY

DOCDB 패밀리 정보

순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - DOCDB 패밀리 정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 US2019180422 US 미국 DOCDBFAMILY
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 미래창조과학부 ETRI 디지털콘텐츠원천기술개발사업 다고도 이기종 실사영상 기반 3차원 합성전장 구축 및 가시화 기술 개발