1 |
1
모션 캡쳐 장비와 촬영 카메라를 동기화시키는 동기화부와, 모션 캡쳐를 위해 부착된 마커의 3차원 모션 캡쳐 데이터를 복원하는 3차원 복원부와,상기 촬영 카메라를 통해 촬영된 비디오 영상에서 상기 마커의 2차원 위치 데이터를 검출하는 2차원 검출부와,상기 복원된 3차원 모션 캡쳐 데이터 및 상기 검출된 2차원 위치 데이터로부터 상기 3차원 모션 캡쳐 데이터 좌표계를 기준으로 하는 촬영 카메라의 모션에 관련된 외부 인자와 촬영 카메라 렌즈의 초점 거리와 관련된 내부 인자를 각 영상 프레임에서 연속적으로 계산하여 상기 비디오 영상의 모든 프레임에 대한 상기 촬영 카메라의 외부 인자 및 내부 인자를 추적하는 추적부와,상기 모든 프레임에 대한 추적이 완료되면, 상기 추적된 외부 인자 및 내부 인자를 보정하는 보정부와,상기 보정된 외부 인자 및 내부 인자를 이용하여 기 설정된 CG(computer-generated) 영상과 상기 비디오 영상을 합성하는 합성부를 포함하고,상기 외부인자와 내부인자는 상기 마커의 3차원 위치데이터와 2차원 위치 데이터로부터 기 설정된 기하학적 오차함수 값이 최소값을 갖도록 계산되는 영상 합성 장치
|
2 |
2
제 1 항에 있어서,상기 동기화부는, 젠락(gen-lock) 신호와 타임 코드(time-code) 신호를 이용하여 상기 모션 캡쳐 장비 및 촬영 카메라의 내부 클락(clock)을 상호 동기화하는영상 합성 장치
|
3 |
3
제 2 항에 있어서,상기 동기화부는, 상기 타임 코드 신호를 이용하여 상기 모션 캡쳐 장비의 동작 속도를 상기 촬영 카메라의 녹화 속도의 정수배가 되도록 제어하고, 상기 모션 캡쳐와 상기 비디오 영상의 녹화 실행 시작 시간 및 종료 시간을 제어하는영상 합성 장치
|
4 |
4
제 1 항에 있어서,상기 3차원 복원부는, 모션 캡쳐 좌표계의 X축, Y축, Z축 상의 좌표 값에 따라 상기 3차원 모션 캡쳐 데이터를 복원하는영상 합성 장치
|
5 |
5
제 4 항에 있어서,상기 2차원 검출부는, 영상 좌표계의 U축과 V축 상의 좌표 값을 이용하여 광학적 오차 함수 값이 최소값을 갖도록 상기 2차원 위치 데이터를 검출하는영상 합성 장치
|
6 |
6
제 1 항에 있어서,상기 추적부는, 상기 촬영 카메라의 모션과 관련된 상기 외부 인자와, 상기 촬영 카메라의 렌즈와 관련된 상기 내부 인자를 추적하는영상 합성 장치
|
7 |
7
제 6 항에 있어서,상기 추적부는, 카메라 회전 모션 인자와 카메라 이동 모션 인자를 포함하는 상기 외부 인자를 추적하는영상 합성 장치
|
8 |
8
제 7 항에 있어서,상기 추적부는, 카메라 렌즈의 초점 거리 인자와, 상기 카메라 렌즈의 광중심 내부 인자와, 상기 카메라 렌즈의 방상 방향 및 접선 방향에 대한 렌즈 왜곡 인자를 포함하는 상기 내부 인자를 추적하는영상 합성 장치
|
9 |
9
제 1 항에 있어서, 상기 보정부는, 기 설정된 오차함수가 최소값을 갖도록 카메라 회전 모션 인자와 카메라 이동 모션 인자를 포함하는 상기 외부 인자와, 카메라 렌즈의 초점 거리 인자와, 상기 카메라 렌즈의 광중심 내부 인자와, 상기 카메라 렌즈의 방상 방향 및 접선 방향에 대한 렌즈 왜곡 인자를 포함하는 모든 촬영 카메라 인자에 대해 보정하여 최적화를 수행하는 영상 합성 장치
|
10 |
10
제 9 항에 있어서,상기 합성부는, 모션 캡쳐 좌표계를 기준으로 상기 외부 인자 및 내부 인자가 추적 및 보정된 상기 촬영 카메라를 렌더링을 위한 그래픽 카메라로 설정하고, 상기 설정된 그래픽 카메라를 이용하여 상기 CG 영상 및 비디오 영상을 합성하는영상 합성 장치
|
11 |
11
모션 캡쳐 장비와 촬영 카메라를 동기화시키는 단계와,모션 캡쳐를 위해 부착된 마커의 3차원 모션 캡쳐 데이터를 복원하는 단계와,상기 촬영 카메라를 통해 촬영된 비디오 영상에서 상기 마커의 2차원 위치 데이터를 검출하는 단계와,상기 복원된 3차원 모션 캡쳐 데이터 및 상기 검출된 2차원 위치 데이터로부터 상기 3차원 모션 캡쳐 데이터 좌표계를 기준으로 하는 촬영 카메라의 모션에 관련된 외부 인자와 촬영 카메라 렌즈의 초점 거리와 관련된 내부 인자를 각 영상 프레임에서 연속적으로 계산하여 상기 비디오 영상의 모든 프레임에 대한 상기 촬영 카메라의 외부 인자 및 내부 인자를 추적하는 단계와,상기 모든 프레임에 대한 추적이 완료되면, 상기 추적된 외부 인자 및 내부 인자를 보정하는 단계와,상기 보정된 외부 인자 및 내부 인자를 이용하여 기 설정된 CG(computer-generated) 영상과 상기 비디오 영상을 합성하는 단계를 포함하고,상기 외부인자와 내부인자는 상기 마커의 3차원 위치데이터와 2차원 위치 데이터로부터 기 설정된 기하학적 오차함수 값이 최소값을 갖도록 계산되는 영상 합성 방법
|
12 |
12
제 11 항에 있어서,상기 동기화시키는 단계는, 젠락(gen-lock) 신호와 타임 코드(time-code) 신호를 이용하여 상기 모션 캡쳐 장비 및 촬영 카메라의 내부 클락(clock)을 상호 동기화하는 방식으로 수행되는영상 합성 방법
|
13 |
13
제 12 항에 있어서,상기 동기화시키는 단계는, 상기 타임 코드 신호를 이용하여 상기 모션 캡쳐 장비의 동작 속도를 상기 촬영 카메라의 녹화 속도의 정수배가 되도록 제어하고, 상기 모션 캡쳐와 상기 비디오 영상의 녹화 실행 시작 시간 및 종료 시간을 제어하는 방식으로 수행되는영상 합성 방법
|
14 |
14
제 11 항에 있어서,상기 3차원 모션 캡쳐 데이터를 복원하는 단계는, 모션 캡쳐 좌표계의 X축, Y축, Z축 상의 좌표 값에 따라 상기 3차원 모션 캡쳐 데이터를 복원하는 방식으로 수행되는영상 합성 방법
|
15 |
15
제 14 항에 있어서,상기 2차원 위치 데이터를 검출하는 단계는, 영상 좌표계의 U축과 V축 상의 좌표 값을 이용하여 광학적 오차 함수 값이 최소값을 갖도록 상기 2차원 위치 데이터를 검출하는 방식으로 수행되는영상 합성 방법
|
16 |
16
제 11 항에 있어서,상기 외부 인자 및 내부 인자를 추적하는 단계는, 상기 촬영 카메라의 모션과 관련된 상기 외부 인자와, 상기 촬영 카메라의 렌즈와 관련된 상기 내부 인자를 추적하는 방식으로 수행되는영상 합성 방법
|
17 |
17
제 16 항에 있어서,상기 외부 인자 및 내부 인자를 추적하는 단계는, 카메라 회전 모션 인자와 카메라 이동 모션 인자를 포함하는 상기 외부 인자를 추적하는 방식으로 수행되는영상 합성 방법
|
18 |
18
제 17 항에 있어서,상기 외부 인자 및 내부 인자를 추적하는 단계는, 카메라 렌즈의 초점 거리 인자와, 상기 카메라 렌즈의 광중심 내부 인자와, 상기 카메라 렌즈의 방상 방향 및 접선 방향에 대한 렌즈 왜곡 인자를 포함하는 상기 내부 인자를 추적하는 방식으로 수행되는영상 합성 방법
|
19 |
19
제 11 항에 있어서, 상기 추적된 외부 인자 및 내부 인자를 보정하는 단계는, 기 설정된 오차함수가 최소값을 갖도록 카메라 회전 모션 인자와 카메라 이동 모션 인자를 포함하는 상기 외부 인자와, 카메라 렌즈의 초점 거리 인자와, 상기 카메라 렌즈의 광중심 내부 인자와, 상기 카메라 렌즈의 방상 방향 및 접선 방향에 대한 렌즈 왜곡 인자를 포함하는 모든 촬영 카메라 인자에 대해 최적화를 통해 상기 외부 인자 및 내부 인자를 보정하는 방식으로 수행되는 영상 합성 방법
|
20 |
20
제 19 항에 있어서,상기 비디오 영상을 합성하는 단계는, 모션 캡쳐 좌표계를 기준으로 상기 외부 인자 및 내부 인자가 추적 및 보정된 상기 촬영 카메라를 렌더링을 위한 그래픽 카메라로 설정하고, 상기 설정된 그래픽 카메라를 이용하여 상기 CG 영상 및 비디오 영상을 합성하는 방식으로 수행되는영상 합성 방법
|