맞춤기술찾기

이전대상기술

마커리스 증강현실 서비스 제공 장치 및 이를 위한 촬영 위치 추정 방법

  • 기술번호 : KST2015123689
  • 담당센터 : 서울동부기술혁신센터
  • 전화번호 : 02-2155-3662
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은, 크기가 큰 대상 객체의 전체 형상을 촬영한 참조 영상을 분할하여 분할 영상별로 특징점을 학습하고, 이를 실시간 영상의 특징점과 비교하여 추정한 실시간 영상의 촬영 자세 및 위치를 기초로 증강현실 서비스를 제공하는 마커리스 증강현실 서비스 제공 장치 및 이를 위한 촬영 위치 추정 방법에 관한 것으로, 본 발명에 따르면, 종래에는 마커리스 증강현실 서비스를 제공하기 어려울 정도로 크기가 큰 대형 물체를 대상 객체로 하여 실시간으로 촬영 자세 및 위치를 추정하여 증강현실 서비스를 제공할 수 있게 된다. 이는 스마트폰이나 태블릿 PC와 같은 소형의 단말 장치에서 증강현실 서비스를 제공함에 있어서 특히 유용하다.
Int. CL G06T 7/00 (2006.01) H04N 5/262 (2006.01)
CPC G06T 7/00(2013.01) G06T 7/00(2013.01) G06T 7/00(2013.01)
출원번호/일자 1020120095008 (2012.08.29)
출원인 한국과학기술연구원
등록번호/일자 10-1586071-0000 (2016.01.11)
공개번호/일자 10-2014-0030444 (2014.03.12) 문서열기
공고번호/일자 (20160203) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항 심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2012.08.29)
심사청구항수 10

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국과학기술연구원 대한민국 서울특별시 성북구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 황재인 대한민국 서울 광진구
2 김익재 대한민국 서울특별시 서초구
3 성민혁 대한민국 서울 영등포구
4 안상철 대한민국 서울 용산구
5 고희동 미국 서울 성북구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 리앤목특허법인 대한민국 서울 강남구 언주로 **길 **, *층, **층, **층, **층(도곡동, 대림아크로텔)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 한국과학기술연구원 대한민국 서울특별시 성북구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2012.08.29 수리 (Accepted) 1-1-2012-0697054-19
2 선행기술조사의뢰서
Request for Prior Art Search
2013.07.04 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2013.08.07 수리 (Accepted) 9-1-2013-0062420-00
4 의견제출통지서
Notification of reason for refusal
2013.09.25 발송처리완료 (Completion of Transmission) 9-5-2013-0661857-69
5 [지정기간연장]기간연장(단축, 경과구제)신청서
[Designated Period Extension] Application of Period Extension(Reduction, Progress relief)
2013.11.25 수리 (Accepted) 1-1-2013-1070759-74
6 [지정기간연장]기간연장(단축, 경과구제)신청서
[Designated Period Extension] Application of Period Extension(Reduction, Progress relief)
2013.12.26 수리 (Accepted) 1-1-2013-1192803-13
7 [지정기간연장]기간연장(단축, 경과구제)신청서
[Designated Period Extension] Application of Period Extension(Reduction, Progress relief)
2014.01.27 수리 (Accepted) 1-1-2014-0087701-35
8 출원인정보변경(경정)신고서
Notification of change of applicant's information
2014.02.19 수리 (Accepted) 4-1-2014-5022002-69
9 [지정기간연장]기간연장(단축, 경과구제)신청서
[Designated Period Extension] Application of Period Extension(Reduction, Progress relief)
2014.02.25 수리 (Accepted) 1-1-2014-0185261-13
10 지정기간연장관련안내서
Notification for Extension of Designated Period
2014.03.04 발송처리완료 (Completion of Transmission) 1-5-2014-0038053-13
11 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2014.03.25 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2014-0287126-27
12 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2014.03.25 수리 (Accepted) 1-1-2014-0287125-82
13 거절결정서
Decision to Refuse a Patent
2014.08.29 발송처리완료 (Completion of Transmission) 9-5-2014-0596358-18
14 [법정기간연장]기간연장(단축, 경과구제)신청서
[Extension of Legal Period] Request for Extension of Period (Reduction, Expiry Reconsideration)
2014.10.01 수리 (Accepted) 7-1-2014-0037365-76
15 의견제출통지서
Notification of reason for refusal
2015.04.24 발송처리완료 (Completion of Transmission) 9-5-2015-0273208-82
16 [지정기간연장]기간연장(단축, 경과구제)신청서
[Designated Period Extension] Application of Period Extension(Reduction, Progress relief)
2015.06.24 수리 (Accepted) 1-1-2015-0613108-54
17 [지정기간연장]기간연장(단축, 경과구제)신청서
[Designated Period Extension] Application of Period Extension(Reduction, Progress relief)
2015.07.24 수리 (Accepted) 1-1-2015-0721214-41
18 [지정기간연장]기간연장(단축, 경과구제)신청서
[Designated Period Extension] Application of Period Extension(Reduction, Progress relief)
2015.08.24 수리 (Accepted) 1-1-2015-0821126-44
19 [지정기간연장]기간연장(단축, 경과구제)신청서
[Designated Period Extension] Application of Period Extension(Reduction, Progress relief)
2015.09.24 수리 (Accepted) 1-1-2015-0933712-38
20 지정기간연장 관련 안내서
Notification for Extension of Designated Period
2015.09.25 발송처리완료 (Completion of Transmission) 1-5-2015-0149148-56
21 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2015.10.26 수리 (Accepted) 1-1-2015-1034805-12
22 등록결정서
Decision to grant
2015.12.24 발송처리완료 (Completion of Transmission) 9-5-2015-0898389-63
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
대상 객체의 전체 형상을 촬영한 참조영상을 분할한 복수의 분할 영상들 각각의 특징점을 분할 영상 별로 저장하는 저장부;실시간으로 상기 대상 객체의 부분 형상을 촬영한 실시간 영상을 획득하여 상기 실시간 영상의 특징점을 추출하는 실시간 영상 특징점 추출부;상기 복수의 분할영상들 각각의 특징점과 상기 실시간 영상의 특징점을 서로 정합하고, 정합된 결과를 기초로 상기 복수의 분할영상들 중 상기 실시간 영상에 매칭되는 매칭분할영상을 도출하는 영상 정합부;상기 도출된 매칭분할영상 내에서 상기 실시간 영상의 특징점에 대응되는 특징점의 상대적인 위치를 기초로 상기 실시간 영상의 촬영 자세 및 위치를 추정하는 촬영 위치 계산부; 및상기 실시간 영상의 촬영 자세 및 위치를 기초로 실시간 증강 현실을 제공하는 증강 현실 제공부를 포함하고, 상기 영상정합부는 상기 분할영상과 상기 실시간 영상의 대응되는 특징점 쌍 중 임의로 4개의 특징점 쌍을 추출하여 호모그래피를 정의하고 상기 정의된 호모그래피 상에서 상기 실시간 영상과 유사한 대응점의 수를 연산하는 작업을 반복하여, 가장 많은 수의 유사한 대응점을 갖는 호모그래피에 대응되는 분할영상을 상기 매칭분할영상으로 도출하는 것을 특징으로 하는 마커리스 증강현실 제공장치
2 2
제1항에 있어서,상기 마커리스 증강현실 제공장치는 모바일 단말 장치 내에 탑재되는 것을 특징으로 하는 마커리스 증강현실 제공장치
3 3
제1항에 있어서,상기 촬영 위치 계산부는 상기 매칭분할영상 및 상기 실시간 영상의 객체 평면 간의 대응관계를 기초로 상기 실시간 영상의 촬영 자세 및 위치를 추정하는 것을 특징으로 하는 마커리스 증강현실 제공장치
4 4
제1항에 있어서,상기 매칭분할영상은 상기 실시간 영상의 특징점에 대응되는 특징점을 적어도 4개 이상 갖는 것을 특징으로 하는 마커리스 증강현실 제공장치
5 5
제1항에 있어서,상기 실시간 영상 특징점 추출부는 SIFT(Scale Invariant Feature Transform)나 SURF(Speed Up Robust Features) 중 적어도 하나 이상을 이용하는 것을 특징으로 하는 마커리스 증강현실 제공장치
6 6
대상 객체의 전체 형상을 촬영한 참조영상을 분할하여 서로 동일한 해상도를 갖는 복수의 분할영상들을 생성하는 단계;상기 복수의 분할영상들 각각의 특징점을 추출하여 분할영상 별로 저장하는 단계;실시간으로 상기 대상 객체의 부분 형상을 촬영한 실시간 영상을 획득하여 상기 실시간 영상의 특징점을 추출하는 특징점추출단계;상기 복수의 분할영상들 각각의 특징점과 상기 실시간 영상의 특징점을 서로 정합하고, 정합된 결과를 기초로 상기 복수의 분할영상들 중 상기 실시간 영상에 매칭되는 매칭분할영상을 도출하는 단계; 및상기 도출된 매칭분할영상 내에서 상기 실시간 영상의 특징점에 대응되는 특징점의 상대적인 위치를 기초로 상기 실시간 영상의 촬영 자세 및 위치를 추정하는 트레이싱 단계를 포함하고, 상기 매칭분할영상을 도출하는 단계는 상기 분할영상과 상기 실시간 영상의 대응되는 특징점 쌍 중 임의로 4개의 특징점 쌍을 추출하여 호모그래피를 정의하고 상기 정의된 호모그래피 상에서 상기 실시간 영상과 유사한 대응점의 수를 연산하는 작업을 반복하여, 가장 많은 수의 유사한 대응점을 갖는 호모그래피에 대응되는 분할영상을 상기 매칭분할영상으로 도출하는 것을 특징으로 하는 마커리스 증강현실을 위한 촬영 위치 추정 방법
7 7
제6항에 있어서,상기 트레이싱 단계는 상기 매칭분할영상 및 상기 실시간 영상의 객체 평면 간의 대응관계를 기초로 상기 실시간 영상의 촬영 자세 및 위치를 추정하는 단계를 포함하는 것을 특징으로 하는 마커리스 증강현실을 위한 촬영 위치 추정 방법
8 8
제6항에 있어서,상기 매칭분할영상은 상기 실시간 영상의 특징점에 대응되는 특징점을 적어도 4개 이상 갖는 것을 특징으로 하는 마커리스 증강현실을 위한 촬영 위치 추정 방법
9 9
제6항에 있어서,상기 특징점 추출 단계는 SIFT(Scale Invariant Feature Transform)나 SURF(Speed Up Robust Features) 중 적어도 하나 이상을 이용하는 것을 특징으로 하는 마커리스 증강현실을 위한 촬영 위치 추정 방법
10 10
마커리스 증강현실을 위한 촬영 위치 추정 기능을 포함하는 프로그램을 수록한 컴퓨터로 읽을 수 있는 기록매체에 있어서,대상 객체의 전체 형상을 촬영한 참조영상을 분할하여 서로 동일한 해상도를 갖는 복수의 분할영상들을 생성하는 기능;상기 복수의 분할영상들 각각의 특징점을 추출하여 분할영상 별로 저장하는 기능;실시간으로 상기 대상 객체의 부분 형상을 촬영한 실시간 영상을 획득하여 상기 실시간 영상의 특징점을 추출하는 기능;상기 복수의 분할영상들 각각의 특징점과 상기 실시간 영상의 특징점을 서로 정합하고, 정합된 결과를 기초로 상기 복수의 분할영상들 중 상기 실시간 영상에 매칭되는 매칭분할영상을 도출하는 기능; 및상기 도출된 매칭분할영상 내에서 상기 실시간 영상의 특징점에 대응되는 특징점의 상대적인 위치를 기초로 상기 실시간 영상의 촬영 자세 및 위치를 추정하는 기능를 포함하는 것을 특징으로 하는 프로그램을 수록한 컴퓨터로 읽을 수 있는 기록매체
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 문화체육관광부 한국콘텐츠진흥원 문화콘텐츠지원사업 모바일 혼합현실 기반 체험투어 기술개발(2M28660)