맞춤기술찾기

이전대상기술

카메라 모션 추출장치, 이를 이용한 해상장면의 증강현실 제공 시스템 및 방법

  • 기술번호 : KST2015093805
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 해상장면의 증강현실 제공 시스템 및 방법에 관한 것으로서, 초점거리가 포함된 입력 영상에 대해, 바다의 수평선 정보, 바다평면 및 상기 바다평면상에 존재하는 두 개 이상의 특징점 트래킹 데이터로부터 원거리 배경 특징을 이용하여 카메라의 회전정보를 추출하고, 다음으로 상기 카메라 회전정보와 바다평면상에 존재하는 두 개 이상의 특징점 트래킹 데이터로부터 카메라 위치변화를 순차적으로 계산한 후, 카메라 위치 데이터를 임포팅(Importing)하여 바다 대체평면(Ground Plane) 상에 컴퓨터 그래픽 객체를 얹어 놓고 카메라를 움직이며 렌더링하는 과정을 통해, 바다 영상을 배경으로 하는 동영상에서 촬영 당시 카메라의 초점거리 정보를 알고 있다는 전제 하에서 카메라의 회전과 위치 변화를 정확히 계산함으로써 영화나 드라마 등과 같은 영상물 제작시 바다 배경에서의 CG/실사 합성을 사실감 있고 정확하게 만들어 준다. 해상장면, 카메라 모션, 카메라 트래킹, CG/실사 합성
Int. CL G06T 3/20 (2006.01) G06T 7/60 (2006.01) G06T 7/00 (2006.01) H04N 5/232 (2006.01)
CPC G06T 7/80(2013.01) G06T 7/80(2013.01) G06T 7/80(2013.01) G06T 7/80(2013.01) G06T 7/80(2013.01) G06T 7/80(2013.01)
출원번호/일자 1020060094267 (2006.09.27)
출원인 한국전자통신연구원
등록번호/일자 10-0793838-0000 (2008.01.04)
공개번호/일자
공고번호/일자 (20080111) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2006.09.27)
심사청구항수 11

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국전자통신연구원 대한민국 대전광역시 유성구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 유정재 대한민국 경기 성남시 분당구
2 김재헌 대한민국 대전 서구
3 박창준 대한민국 대전 유성구
4 이인호 대한민국 대전 서구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 권태복 대한민국 서울시 강남구 테헤란로*길 **, *층 (역삼동, 청원빌딩)(아리특허법률사무소)
2 이화익 대한민국 서울시 강남구 테헤란로*길** (역삼동,청원빌딩) *층,***,***호(영인국제특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 한국전자통신연구원 대한민국 대전광역시 유성구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 특허출원서
Patent Application
2006.09.27 수리 (Accepted) 1-1-2006-0704579-35
2 명세서등보정서
Amendment to Description, etc.
2006.12.04 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2006-0898228-74
3 명세서등보정서
Amendment to Description, etc.
2007.02.09 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2007-0123556-14
4 의견제출통지서
Notification of reason for refusal
2007.09.28 발송처리완료 (Completion of Transmission) 9-5-2007-0525582-55
5 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2007.11.23 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2007-0844752-12
6 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2007.11.23 수리 (Accepted) 1-1-2007-0844758-96
7 등록결정서
Decision to grant
2007.12.31 발송처리완료 (Completion of Transmission) 9-5-2007-0706584-92
8 출원인정보변경(경정)신고서
Notification of change of applicant's information
2009.08.04 수리 (Accepted) 4-1-2009-5150899-36
9 출원인정보변경(경정)신고서
Notification of change of applicant's information
2015.02.02 수리 (Accepted) 4-1-2015-0006137-44
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
입력 영상으로부터 바다의 수평선을 추출하여 카메라의 상하방향 회전성분(Tilt)과 축방향 회전성분(Yaw)을 획득하고, 상기 획득된 축방향 회전성분과 상기 입력 영상에 존재하는 적어도 두 개 이상의 제 1 특징점 트래킹 데이터의 원거리 배경 특징을 이용하여 카메라 좌우방향 회전성분(Pan)을 획득하는 카메라 회전정보 추출수단;상기 회전 성분으로부터 구해지는 회전 각도와 상기 입력 영상의 바다 평면상에 존재하는 적어도 두 개 이상의 제 2 특징점 트래킹 데이터로부터 카메라의 위치변화를 계산하는 카메라 위치변화 계산 수단을 포함하여 이루어지는 것을 특징으로 하는 카메라 모션 추출장치
2 2
제 1항에 있어서, 상기 제 1 특징점은 상기 바다 평면과 평행한 평면상에 존재하는 것을 특징으로 하는 카메라 모션 추출장치
3 3
제 1항에 있어서, 상기 바다의 수평선 추출하는 것은 Canny Edge operation과 라돈 변환(Randon Transform)을 통해 이루어지는 것을 특징으로 하는 카메라 모션 추출장치
4 4
제1항에 있어서, 상기 카메라 위치변화 계산수단은, 상기 카메라의 회전성분을 이용하여 첫 프레임에서 바다평면상에 존재하는 한 개의 특징점(p)을 기준으로 첫 번째 프레임에서의 카메라 위치를 획득하는 수단; 상기 첫 번째 프레임에서의 카메라 위치를 이용하여 바다 평면상에 존재하는 또 다른 특징점(q)의 공간상의 좌표를 획득하는 수단; 및 상기 특징점(p,q) 공간좌표와 각각의 프레임 영상에서의 특징점 위치를 이용하여 이후 이어지는 프레임에서의 카메라 위치변화를 획득하는 수단을 포함하여 이루어진 것을 특징으로 하는 카메라 모션 추출장치
5 5
입력 영상으로부터 추출된 바다의 수평선 정보와 상기 바다 평면과 평형한 평면에 존재하는 적어도 두 개 이상의 제 1 특징점 트래킹 데이터로부터 원거리 배경 특징을 이용하여 카메라의 회전정보를 추출하는 카메라 회전정보 추출수단; 상기 카메라 회전정보와 바다평면상에 존재하는 적어도 두 개 이상의 제 2 특징점 트래킹 데이터로부터 카메라 위치변화를 계산하는 카메라 위치변화 계산수단;카메라 위치 데이터를 임포팅(Importing)하여 바다 대체평면(Ground Plane) 상에 컴퓨터 그래픽 객체가 위치하도록 카메라의 움직임에 따라 렌더링하는 수단을 포함하여 이루어지는 것을 특징으로 하는 카메라 모션 추출장치를 이용한 해상장면의 증강현실 제공 시스템
6 6
제5항에 있어서, 상기 카메라 회전정보 추출수단은, 상기 영상으로부터 수평선 정보와 제 1 특징점 트래킹 포인트를 추출하는 수단; 상기 바다평면의 법선벡터로부터 카메라의 상하방향 회전성분(Tilt), 축방향 회전성분(Yaw)을 획득하는 수단; 및 상기 카메라의 상하방향 회전성분(Tilt), 축방향 회전성분(Yaw)과 상기 트래킹 포인트를 이용하여 카메라의 좌우방향 회전성분(Pan)을 획득하는 수단을 포함하여 이루어진 것을 특징으로 하는 카메라 모션 추출장치를 이용한 해상장면의 증강현실 제공 시스템
7 7
제5항에 있어서, 상기 카메라 위치변화 계산수단은, 상기 카메라의 회전정보를 이용하여 첫 프레임에서 바다평면상에 존재하는 한 개의 특징점(p)을 기준으로 첫 번째 프레임에서의 카메라 위치를 획득하는 수단; 상기 첫 번째 프레임에서의 카메라 위치를 이용하여 바다 평면상에 존재하는 또 다른 특징점(q)의 공간상의 좌표를 획득하는 수단; 및 상기 특징점(p,q) 공간좌표와 각각의 프레임 영상에서의 특징점 위치를 이용하여 이후 이어지는 프레임에서의 카메라 위치변화를 획득하는 수단을 포함하여 이루어진 것을 특징으로 하는 카메라 모션 추출장치를 이용한 해상장면의 증강현실 제공 시스템
8 8
(a) 입력 영상으로부터 추출된 바다의 수평선 정보와 바다평면 및 상기 바다평면과 평행한 평면에 존재하는 적어도 두 개 이상의 제 1 특징점 트래킹 데이터로부터 원거리 배경 특징을 이용하여 카메라의 회전정보를 추출하는 단계; (b) 상기 카메라 회전정보와 상기 바다평면상에 존재하는 적어도 두 개 이상의 제 2 특징점 트래킹 데이터로부터 카메라 위치변화를 계산하는 단계;(c) 상기 카메라 위치 데이터를 임포팅(Importing)하여 바다 대체평면(Ground Plane)상에 컴퓨터 그래픽 객체가 위치하도록 카메라의 움직임에 따라 렌더링하는 단계를 포함하여 이루어지는 것을 특징으로 하는 카메라 모션 추출장치를 이용한 해상장면의 증강현실 제공 방법
9 9
제8항에 있어서, 상기 (a) 단계는, 상기 입력 영상에서 수평선 위치를 추출하는 단계; 상기 바다평면의 법선벡터로부터 카메라의 상하방향 회전성분(Tilt), 축방향 회전성분(Yaw)을 획득하는 단계; 및 상기 카메라의 상하방향 회전성분(Tilt), 축방향 회전성분(Yaw)과 외부로부터 입력된 특징점 트래킹 데이터를 이용하여 카메라의 좌우방향 회전성분(Pan)을 획득하는 단계를 포함하여 이루어진 것을 특징으로 하는 카메라 모션 추출장치를 이용한 해상장면의 증강현실 제공 방법
10 10
제 9 항에 있어서, 상기 수평선 위치를 추출하는 단계는, 상기 입력 영상에 대해 ROI(Region Of Interest)를 지정하는 단계; 상기 지정된 ROI를 그레이스케일로 변환하는 단계; Canny Edge Operation을 수행하여 에지를 구하는 단계; 및 라돈 변환을 통해 수평선 위치를 추출하는 단계를 포함하여 이루어진 것을 특징으로 하는 카메라 모션 추출장치를 이용한 해상장면의 증강현실 제공 방법
11 11
제 8 항에 있어서, 상기 (b) 단계는 상기 카메라의 회전정보를 이용하여 첫 프레임에서 바다평면상에 존재하는 한 개의 특징점(p)을 기준으로 첫 번째 프레임에서의 카메라 위치를 획득하는 단계; 상기 프레임에서의 카메라 위치를 이용하여 바다 평면상에 존재하는 또 다른 특징점(q)의 공간상의 좌표를 획득하는 단계; 및 상기 특징점(p,q) 공간좌표와 각각의 프레임 영상에서의 특징점 위치를 이용하여 이후 이어지는 프레임에서의 카메라 위치변화를 획득하는 단계를 포함하여 이루어진 것을 특징으로 하는 카메라 모션 추출장치를 이용한 해상장면의 증강현실 제공 방법
지정국 정보가 없습니다
순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - 패밀리정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 US08077906 US 미국 FAMILY
2 US20080075358 US 미국 FAMILY

DOCDB 패밀리 정보

순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - DOCDB 패밀리 정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 US2008075358 US 미국 DOCDBFAMILY
2 US8077906 US 미국 DOCDBFAMILY
국가 R&D 정보가 없습니다.