맞춤기술찾기

홈으로 가기
맞춤기술찾기
이전대상기술
프린트하기

이전대상기술

영상 합성을 위한 조명환경 재구성 방법 및 프로그램이기록된 기록매체

  • 기술번호 : KST2014051637
  • 담당센터 : 서울서부기술혁신센터
  • 전화번호 : 02-6124-6930
상담신청 PDF 받기
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 영상 합성을 위한 조명환경 재구성 방법 및 프로그램이 기록된 기록매체가 개시된다. 본 발명의 실시예에 따른 영상합성을 위하여 조명공간을 재구성하는 방법은 대상 공간의 입력영상에 상응하는 복수개의 촬영위치를 산출하는 단계; 입력영상을 이용하여 상기 대상 공간의 조명의 특성을 분류하는 단계; 및 복수개의 촬영위치 및 조명의 특성을 이용하여 3차원 조명공간을 재구성하는 단계를 포함한다. 본 발명에 따르면, 사전 보정과정 없이 카메라 및 조명의 위치를 자동으로 산출하며, 움직이는 물체에 대해서도 정확하게 조명 정보를 적용할 수 있다는 장점이 있다. 영상합성, 렌더링, 조명
Int. CL G06T 15/50 (2006.01.01) G06T 5/50 (2006.01.01) G06T 15/55 (2011.01.01) G06T 7/20 (2017.01.01)
CPC G06T 15/50(2013.01) G06T 15/50(2013.01) G06T 15/50(2013.01) G06T 15/50(2013.01) G06T 15/50(2013.01) G06T 15/50(2013.01)
출원번호/일자 1020060114471 (2006.11.20)
출원인 중앙대학교 산학협력단
등록번호/일자 10-0834157-0000 (2008.05.26)
공개번호/일자 10-2008-0045392 (2008.05.23) 문서열기
공고번호/일자 (20080602) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 소멸
심사진행상태 수리
심판사항 심판사항
구분
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2006.11.20)
심사청구항수 15

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 중앙대학교 산학협력단 대한민국 서울특별시 동작구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 황용호 대한민국 서울 관악구
2 홍현기 대한민국 서울특별시 동작구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 이경란 대한민국 서울(특허법인 퇴사후 사무소변경 미신고)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 중앙대학교 산학협력단 대한민국 서울 동작구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 특허출원서
Patent Application		 2006.11.20 수리 (Accepted) 1-1-2006-0847471-78
2 선행기술조사의뢰서
Request for Prior Art Search		 2007.07.05 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search		 2007.08.14 수리 (Accepted) 9-1-2007-0049434-81
4 의견제출통지서
Notification of reason for refusal		 2007.12.12 발송처리완료 (Completion of Transmission) 9-5-2007-0673391-13
5 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment		 2008.02.12 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2008-0103163-40
6 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)		 2008.02.12 수리 (Accepted) 1-1-2008-0103130-44
7 거절결정서
Decision to Refuse a Patent		 2008.02.25 발송처리완료 (Completion of Transmission) 9-5-2008-0097916-73
8 명세서 등 보정서(심사전치)
Amendment to Description, etc(Reexamination)		 2008.03.26 보정승인 (Acceptance of amendment) 7-1-2008-0012356-38
9 등록결정서
Decision to grant		 2008.05.26 발송처리완료 (Completion of Transmission) 9-5-2008-0277832-14
10 출원인정보변경(경정)신고서
Notification of change of applicant's information		 2011.07.20 수리 (Accepted) 4-1-2011-5148879-89
11 출원인정보변경(경정)신고서
Notification of change of applicant's information		 2011.07.20 수리 (Accepted) 4-1-2011-5148883-62
12 출원인정보변경(경정)신고서
Notification of change of applicant's information		 2014.01.03 수리 (Accepted) 4-1-2014-0000494-54
13 출원인정보변경(경정)신고서
Notification of change of applicant's information		 2014.10.20 수리 (Accepted) 4-1-2014-5123944-33
14 출원인정보변경(경정)신고서
Notification of change of applicant's information		 2018.07.04 수리 (Accepted) 4-1-2018-5125629-51
15 출원인정보변경(경정)신고서
Notification of change of applicant's information		 2019.07.29 수리 (Accepted) 4-1-2019-5151122-15
16 출원인정보변경(경정)신고서
Notification of change of applicant's information		 2019.08.01 수리 (Accepted) 4-1-2019-5153932-16
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
영상합성을 위하여 조명공간을 재구성하는 방법에 있어서,(a) 대상 공간의 입력영상에 상응하는 복수개의 촬영위치를 산출하는 단계;(b) 상기 입력영상을 이용하여 상기 대상 공간의 조명을 전역조명 또는 지역조명으로 분류하여 산출하는 단계; 및(c) 상기 산출된 전역조명 또는 지역조명의 3차원 좌표 및 상기 복수개의 촬영위치의 3차원 좌표를 포함하는 3차원 조명 공간을 산출하는 단계를 포함하는 조명공간 재구성 방법
2 2
제 1항에 있어서,상기 입력영상은 어안렌즈(fisheye lens)를 장착한 카메라의 셔터 속도를 각각 다르게 하여 촬영된 다중 노출영상이고,(d) 상기 (a) 단계에 선행하여 상기 다중 노출영상을 이용하여 상기 카메라의 응답함수(response function)을 추정하고 HDR(High Dynamic Range) 영상을 생성하는 단계를 더 포함하는 조명공간 재구성 방법
3 3
제 1항에 있어서상기 (a) 단계는(a1) 상기 입력영상은 상기 복수개의 촬영위치에 상응한 전방 및 후방의 반구(hemi-sphere) 영상이고, 상기 복수개의 촬영위치를 원점으로 하는 반구 좌표계를 각각 구성하는 단계;(a2) 미리 설정된 알고리즘을 이용하여 제1 및 제2 촬영위치에서 취득된 반구 영상의 제1 및 제2 중앙점에 상응하는 사영(projection)된 중앙점을 산출하는 단계; 및(a3) 상기 제1 및 제2 중앙점과 상기 사영된 중앙점을 이용하여 상기 제1 촬영위치에 상대적인 제2 촬영위치를 계산하는 단계를 포함하되,상기 복수개의 촬영위치의 개수에 상응하여 상기 (a2) 단계 내지 상기 (a3)단계를 반복하여 상기 복수개의 촬영위치를 각각 산출하는 조명공간 재구성 방법
4 4
제 3항에 있어서상기 미리 설정된 알고리즘은 특징점 추출 알고리즘 및 매칭 알고리즘 중 적어도 하나인 조명공간 재구성 방법
5 5
제 3항에 있어서,상기 (a3) 단계는,수학식 를 이용하여 각(∠AC1B) 및 각(∠ C1 BC2)를 각각 구하는 단계 - C1 및 C2는 제1 및 제2 촬영위치이고, A 및 B는 C1 및 C2에서 취득한 반구영상의 중앙점이며, 는 렌즈의 초점거리이며, 은 각각의 반구영상의 중앙점과 상대 중앙점이 사영된 중앙점간의 거리임 -;상기 각(∠AC1B), 상기 각(∠ C1 BC2) 및 수학식을 이용하여 제1 촬영위치 C1에 상대적인 제2 촬영위치 C2를 계산하는 단계-상기 는 상기 제1 촬영위치 C1로부터 상기 중앙점 B를 통과하는 선분, 상기 는 상기 제2 촬영위치 C2로부터 상기 중앙점 A를 통과하는 선분, 상기 및 상기는 임의의 수 및 에 상응하여 각각 변화하는 상기 및 의 방향벡터임-를 포함하는 조명공간 재구성 방법
6 6
제 1항에 있어서,상기 (b) 단계에 선행하여,(e1) 상기 입력영상은 상기 복수개의 촬영위치에 대응하는 전방 및 후방의 반구(hemi-sphere) 영상이고, 상기 입력영상을 파노라믹 변환하여 L-L(Latitude-Longitude) 단위영상을 만드는 단계;(e2) 구조적 중요도(structured importance) 샘플링을 이용하여 상기 L-L 단위영상의 복수개의 조명원(light source)의 위치를 산출하는 단계;(e3) 상기 복수개의 촬영위치를 원점으로 하는 반구 좌표계를 각각 구성하는 단계; 및(e4) 상기 복수개의 조명원의 위치에 상응하는 단위 방향벡터를 각각 산출하는 단계를 더 포함하는 것을 특징으로 하는 조명공간 재구성 방법
7 7
제 6항에 있어서,상기 (b)단계는, (f1) 제1 촬영위치에 대응되는 제1 L-L 단위영상에서 산출된 복수개의 단위 방향벡터 중 제1 방향 벡터를 직각 좌표계로 변환하는 단계; (f2) 제2 촬영위치에 대응되는 제2 L-L 단위영상에서 미리 설정된 알고리즘과 상기 변환된 방향 벡터를 이용하여 상기 제2 L-L 단위영상에서의 대응점을 산출하는 단계; 및 (f3) 상기 제1 L-L 단위영상에서 산출된 복수개의 단위 방향벡터의 개수에 상응하여 상기 (f1)단계 내지 (f2)단계를 반복하여 제2 L-L 단위영상에서 대응점을 각각 산출하는 단계를 포함하되,상기 복수개의 촬영위치에 대응하는 L-L 단위영상의 개수에 상응하여 상기 (f1)단계 상기 (f3)단계를 반복하여 상기 복수개의 촬영위치에 대응하는 상기 L-L 단위영상에서 하나 이상의 상기 대응점을 각각 산출하는 것을 특징으로 하는 조명공간 재구성 방법
8 8
제 7항에 있어서,상기 (f2) 단계는 (g1) 수학식 를 이용하여 을 산출하는 단계- 은 제1 촬영위치 벡터, 는 첫번째 카메라 위치(C1)에서 출발하는 임의의 조명에 대한 3차원 방향벡터, 는 상기 제1 방향 벡터가 직각 좌표계로 변환된 것이고, 는 임의의 수임 - ;(g2) 상기 와 수학식 을 이용하여 을 산출하는 단계 - 는 제2 촬영위치 벡터, 는 제2 촬영위치에서 의 끝을 향하는 벡터임; 및(g3) 상기 을 이용하여 상기 제2 L-L 단위영상에서 대응점을 산출하는 단계를 포함하는 조명공간 재구성 방법
9 9
제 8항에 있어서,상기 (g3)단계는 (h1) 상기 을 구면 좌표계로 변환하여 을 산출하는 단계;(h2) 상기 가 상기 제2 L-L 단위영상에 대응되는 위치를 산출하는 단계;(h3) 상기 산출된 위치를 중심으로 미리 지정된 크기의 검색영역 내에서 밝기에 대한 SSD(Sum of Squared Differences)가 가장 적은 값에 대응되는 위치를 대응점으로 산출하는 단계를 포함하는 것을 특징으로 하는 조명공간 재구성 방법
10 10
제 7항에 있어서,상기 (b)단계는(i1) 제2 촬영위치에 대응하는 제2 L-L 단위영상에서 복수개의 조명을 샘플링하는 단계; (i2) 상기 복수개의 조명의 개수에 상응하여 상기 제2 L-L 단위영상을 복수개의 층(strata)을 나누는 단계; 및 (i3) 상기 대응점을 포함하지 않는 층에 상응하는 조명을 지역조명으로 산출하는 단계를 상기 단계 (f3) 이후에 더 포함하는 것을 특징으로 하는 조명공간 재구성 방법
11 11
제 6항에 있어서상기 제 (c)단계는(j1) 제1 및 제2 촬영위치에 상응하는 복수개의 단위 방향벡터를 수학식 을 이용하여 복수개의 3차원 단위 방향벡터로 각각 변환하는 단계; 및(j2) 상기 촬영위치 및 상기 복수개의 3차원 방향벡터를 미리 설정된 알고리즘에 적용하여 전역 조명의 좌표를 산출하는 단계를 포함하되,상기 복수개의 촬영위치에 대응하는 상기 L-L 단위 영상의 개수에 상응하여 상기 (j1)단계 내지 (j2)단계를 반복하여 상기 전역조명의 좌표를 각각 산출하는 것을 특징으로 하는 조명공간 재구성 방법
12 12
제 11항에 있어서상기 (j2)단계는 (k1) 수학식 을 이용하여 및 을 각각 산출하는 단계 - 및는 각각 제1 및 제2 촬영위치의 3차원 단위 방향벡터, 및 는 각각 제1 및 제2 촬영위치 벡터, 및 는 각각 제1 및 제2 촬영위치 벡터에서 출발하는 i번째 조명에 대한 3차원 벡터, t 및 s는 각각 및 의 스케일링 계수임; 및 (k2) 상기 및 상기의 교차점을 전역 조명의 좌표로 산출하는 단계를 포함하되, 상기 3차원 단위 방향벡터 및 의 개수에 상응하여 상기 (k1)단계 내지 (k2)단계를 반복하여 상기 전역 조명의 좌표를 각각 산출하는 것을 특징으로 하는 조명공간 재구성 방법
13 13
제 12항에 있어서,상기 (k2)단계는 상기 및 상기의 교차점이 존재하지 않는 경우 상기 및 상기간에 거리가 각각 가장 가까운 위치를 전역조명의 좌표로 산출하는 단계를 더 포함하는 특징으로 하는 조명공간 재구성 방법
14 14
제 6항에 있어서상기 (c) 단계는(l1) 제1 및 제2 촬영위치에 상응하는 복수개의 단위 방향벡터를 수학식 을 이용하여 복수개의 3차원 단위 방향벡터로 각각 변환하는 단계; (k2) 상기 복수개의 3차원 단위 방향벡터의 교차점을 지역조명의 좌표로 산출하는 단계;(k3) 상기 복수개의 촬영위치에 대응하는 상기 L-L 단위 영상의 개수에 상응하여 상기 (k1)단계 내지 (k2)단계를 반복하여 상기 L-L 단위영상에서 상기 지역조명의 좌표를 각각 산출하는 단계를 더 포함하는 것을 특징으로 하는 조명공간 재구성 방법
15 15
영상합성을 위한 조명환경 재구성을 위하여 디지털 영상처리기에 의해 실행될 수 있는 명령어들의 프로그램이 유형적으로 구현되어 있으며, 상기 디지털 영상처리기에 의해 판독될 수 있는 프로그램을 기록한 기록매체에 있어서, (a) 대상 공간의 입력영상에 상응하는 복수개의 촬영위치를 산출하는 단계;(b) 상기 입력영상을 이용하여 상기 대상 공간의 조명을 전역조명 및 또는 지역조명으로 분류하여 산출하는 단계; 및(c) 상기 산출된 전역조명 또는 지역조명의 3차원 좌표 및 상기 복수개의 촬영위치의 3차원 좌표를 포함하는 3차원 조명 공간을 산출하는 단계를 실행하는 프로그램을 기록한 기록매체
지정국 정보가 없습니다
패밀리정보가 없습니다
국가 R&D 정보가 없습니다.