요약 | 본 발명은 광학식 모션 캡쳐 시스템에서 동적 마커를 기반으로 모션 캡쳐 카메라와 고해상도 비디오 촬영 카메라를 보정(calibration)하는 방법에 관한 것으로, 별도의 카메라 보정 장치의 사용이나 보정용 마커를 카메라 혹은 배경에 부착함이 없이 모션 캡쳐 대상 물체 상에 부착된 동적 마커만을 이용하여 현장에서 촬영에 사용된 고해상도 비디오 촬영 카메라를 정확하게 보정을 할 수 있도록 한다. 즉, 본 발명은 광학식 모션 캡쳐 카메라를 통하여 복원되는 동적 마커의 3차원 모션 캡쳐 데이터를 3차원 보정 데이터로 저장하고, 현장에서 동시에 녹화된 고해상도 비디오에서 동적 마커의 위치를 추적(tracking)하여 이를 2차원 보정 데이터로 저장하여, 이를 일대일 대응시켜 보정을 수행시킴으로써, 촬영 카메라의 공간상 이동과 회전에 관련된 외부 인자뿐만 아니라 고해상도 카메라 렌즈와 관련된 내부 인자들도 동시에 보정되도록 하여, 광학식 모션 캡쳐 시스템에서 3차원 모션 캡쳐 데이터와 고해상도 촬영 비디오의 합성을 통한 HD 방송 및 영화에 사용 가능한 고해상도 3D 콘텐츠 제작에 필요한 고해상도 비디오 촬영 카메라 보정의 정확성과 안정성을 확보할 수 있다.모션 캡쳐, 합성, 촬영 카메라, 보정, 마커, 추적, 고해상도, HD, 3D 콘텐츠 |
---|---|
Int. CL | H04N 13/00 (2006.01) G06T 7/20 (2006.01) |
CPC | |
출원번호/일자 | 1020090026454 (2009.03.27) |
출원인 | 한국전자통신연구원 |
등록번호/일자 | 10-1221449-0000 (2013.01.07) |
공개번호/일자 | 10-2010-0108021 (2010.10.06) 문서열기 |
공고번호/일자 | (20130111) 문서열기 |
국제출원번호/일자 | |
국제공개번호/일자 | |
우선권정보 | |
법적상태 | 소멸 |
심사진행상태 | 수리 |
심판사항 | |
구분 | 신규 |
원출원번호/일자 | |
관련 출원번호 | |
심사청구여부/일자 | Y (2009.03.27) |
심사청구항수 | 16 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 한국전자통신연구원 | 대한민국 | 대전광역시 유성구 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 김종성 | 대한민국 | 대전광역시 동구 |
2 | 김혜미 | 대한민국 | 대전광역시 서구 |
3 | 김재헌 | 대한민국 | 대전광역시 서구 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 제일특허법인(유) | 대한민국 | 서울특별시 서초구 마방로 ** (양재동, 동원F&B빌딩) |
2 | 김원준 | 대한민국 | 서울특별시 서초구 마방로 ** (양재동, 동원F&B빌딩)(제일특허법인(유)) |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 한국전자통신연구원 | 대전광역시 유성구 |
번호 | 서류명 | 접수/발송일자 | 처리상태 | 접수/발송번호 |
---|---|---|---|---|
1 | [특허출원]특허출원서 [Patent Application] Patent Application |
2009.03.27 | 수리 (Accepted) | 1-1-2009-0186326-09 |
2 | 출원인정보변경(경정)신고서 Notification of change of applicant's information |
2009.08.04 | 수리 (Accepted) | 4-1-2009-5150899-36 |
3 | 의견제출통지서 Notification of reason for refusal |
2012.06.15 | 발송처리완료 (Completion of Transmission) | 9-5-2012-0347912-61 |
4 | [명세서등 보정]보정서 [Amendment to Description, etc.] Amendment |
2012.08.16 | 보정승인간주 (Regarded as an acceptance of amendment) | 1-1-2012-0655036-24 |
5 | [거절이유 등 통지에 따른 의견]의견(답변, 소명)서 [Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation) |
2012.08.16 | 수리 (Accepted) | 1-1-2012-0655037-70 |
6 | 등록결정서 Decision to grant |
2012.12.28 | 발송처리완료 (Completion of Transmission) | 9-5-2012-0799286-11 |
7 | 출원인정보변경(경정)신고서 Notification of change of applicant's information |
2015.02.02 | 수리 (Accepted) | 4-1-2015-0006137-44 |
번호 | 청구항 |
---|---|
1 |
1 모션 캡쳐 카메라와 비디오 촬영 카메라에서 촬영된 영상으로부터 동적 마커를 검출하는 검출부와,상기 모션 캡쳐 카메라를 통하여 촬영된 상기 동적 마커의 3차원 위치 데이터를 복원하여 3차원 카메라 보정 데이터로 저장하는 3차원 위치 복원부와,상기 비디오 촬영 카메라를 통하여 촬영된 상기 동적 마커의 2차원 위치 데이터를 추적하여 2차원 카메라 보정데이터로 저장하는 2차원 위치 추적부와,상기 동적 마커의 3차원 위치 데이터와 2차원 위치 데이터를 일대일 대응되도록 정합시키는 정합부와,상기 동적 마커의 공간 좌표계상 3차원 위치를 상기 비디오 촬영 카메라의 좌표계상 좌표로 변환하는 보정부를 포함하되,상기 3차원 카메라 보정 데이터는, 상기 동적 마커를 구별하기 위한 레이블 정보와 상기 동적 마커가 상기 모션 캡쳐 카메라에 의해 녹화된 시점을 나타내는 프레임 번호를 포함하는카메라간 영상 보정장치 |
2 |
2 제 1 항에 있어서,상기 검출부는,상기 동적 마커가 포함된 영상에서 상기 동적 마커를 중심으로 일정 영역을 상기 동적 마커의 추적을 위한 템플릿으로 설정하고, 상기 설정된 템플릿으로부터 상기 동적 마커를 검출하는 카메라간 영상 보정장치 |
3 |
3 제 2 항에 있어서,상기 검출부는,영상 프레임별로 다른 위치에 설정되는 템플릿의 위치를 이전 영상 프레임과의 템플릿 정합을 통해 검출하는 카메라간 영상 보정장치 |
4 |
4 제 3 항에 있어서,상기 검출부는,상기 동적 마커가 포함된 영상내 상기 템플릿을 탐색하기 위한 영역의 크기를 상기 동적 마커의 움직임 속도에 따라 가변적으로 설정하는 카메라간 영상 보정장치 |
5 |
5 삭제 |
6 |
6 삭제 |
7 |
7 제 1 항에 있어서,상기 2차원 카메라 보정 데이터는,상기 동적 마커를 구별하기 위한 레이블 정보를 포함하는 카메라간 영상 보정장치 |
8 |
8 제 7 항에 있어서,상기 2차원 카메라 보정 데이터는상기 동적 마커가 상기 비디오 촬영 카메라에 의해 녹화된 시점을 나타내는 프레임 번호를 포함하는 카메라간 영상 보정장치 |
9 |
9 제 1 항에 있어서,상기 보정부는,상기 비디오 촬영 카메라의 내부인자를 상수로 설정하고, 상기 동적 마커의 공간 좌표계상 3차원 위치를 상기 비디오 촬영 카메라 좌표계상 좌표로 1차 변환하고, 상기 내부인자를 변수로 설정하여 보정한 후, 상기 보정된 내부 인자값에 따라 상기 동적 마커의 공간 좌표계상 3차원 위치를 상기 비디오 촬영 카메라의 좌표계상 좌표로 2차 변환하는 카메라간 영상 보정장치 |
10 |
10 제 9 항에 있어서,상기 비디오 촬영 카메라의 내부인자는,상기 비디오 촬영 카메라의 렌즈의 초점거리, 상기 렌즈의 광 중심, 상기 렌즈의 방사방향의 왜곡 또는 상기 렌즈의 접선방향의 왜곡을 포함하는 카메라간 영상 보정장치 |
11 |
11 모션 캡쳐 카메라와 비디오 촬영 카메라에서 촬영된 영상으로부터 동적 마커를 검출하는 단계와,상기 모션 캡쳐 카메라를 통하여 촬영된 상기 동적 마커의 3차원 위치 데이터를 복원하여 3차원 카메라 보정 데이터로 저장하는 단계와,상기 비디오 촬영 카메라를 통하여 촬영된 상기 동적 마커의 2차원 위치 데이터를 추적하여 2차원 카메라 보정데이터로 저장하는 단계와,상기 동적 마커의 3차원 위치 데이터와 2차원 위치 데이터가 일대일 대응되도록 정합시키는 단계와,상기 동적 마커의 공간 좌표계상 3차원 위치를 상기 비디오 촬영 카메라의 좌표계상 좌표로 변환시키는 단계를 포함하되,상기 3차원 카메라 보정 데이터는, 상기 동적 마커를 구별하기 위한 레이블 정보와 상기 동적 마커가 상기 모션 캡쳐 카메라에 의해 녹화된 시점을 나타내는 프레임 번호를 포함하는카메라간 영상 보정 방법 |
12 |
12 제 11 항에 있어서,상기 동적 마커를 검출하는 단계는,영상 프레임별 일정 영역에 상기 동적 마커의 추적을 위한 템플릿을 설정하는 단계와,상기 설정된 템플릿으로부터 상기 동적 마커를 검출하는 단계를 포함하는 카메라간 영상 보정 방법 |
13 |
13 제 12 항에 있어서,상기 템플릿은,상기 동적 마커를 중심으로 일정 영역의 크기로 설정되며, 영상 프레임별 상기 템플릿의 위치 탐색을 위해 이전 영상 프레임의 템플릿과 정합이 수행되는 카메라간 영상 보정 방법 |
14 |
14 제 13 항에 있어서,상기 템플릿의 위치 탐색 시, 상기 템플릿의 위치를 탐색하기 위해 설정되는 영역의 크기는, 영상 프레임간 상기 동적 마커의 움직임 속도에 따라 가변적으로 설정되는 카메라간 영상 보정 방법 |
15 |
15 삭제 |
16 |
16 삭제 |
17 |
17 제 11 항에 있어서,상기 2차원 카메라 보정 데이터는,상기 동적 마커를 구별하기 위한 레이블 정보를 포함하는 카메라간 영상 보정 방법 |
18 |
18 제 17 항에 있어서,상기 2차원 카메라 보정 데이터는상기 동적 마커가 상기 비디오 촬영 카메라에 의해 녹화된 시점을 나타내는 프레임 번호를 포함하는 카메라간 영상 보정 방법 |
19 |
19 제 11 항에 있어서,상기 동적 마커의 좌표 변환 단계는,상기 비디오 촬영 카메라의 내부인자를 상수로 설정하고, 상기 동적 마커의 공간 좌표계상 3차원 위치를 상기 비디오 촬영 카메라의 좌표계상 좌표로 1차 변환하는 단계와,상기 내부인자를 변수로 설정하여 보정하고, 상기 보정된 내부 인자에 따라 상기 동적 마커의 공간 좌표계상 3차원 위치를 상기 비디오 촬영 카메라의 좌표계상 좌표로 2차 변환하는 단계를 포함하는 카메라간 영상 보정 방법 |
20 |
20 제 19 항에 있어서,상기 비디오 촬영 카메라의 내부인자는,상기 비디오 촬영 카메라의 렌즈의 초점거리, 상기 렌즈의 광 중심, 상기 렌즈의 방사방향의 왜곡 또는 상기 렌즈의 접선방향의 왜곡을 포함하는 카메라간 영상 보정 방법 |
지정국 정보가 없습니다 |
---|
순번 | 패밀리번호 | 국가코드 | 국가명 | 종류 |
---|---|---|---|---|
1 | US08405717 | US | 미국 | FAMILY |
2 | US20100245593 | US | 미국 | FAMILY |
순번 | 패밀리번호 | 국가코드 | 국가명 | 종류 |
---|---|---|---|---|
1 | US2010245593 | US | 미국 | DOCDBFAMILY |
2 | US8405717 | US | 미국 | DOCDBFAMILY |
순번 | 연구부처 | 주관기관 | 연구사업 | 연구과제 |
---|---|---|---|---|
1 | 지식경제부 및 정보통신연구진흥원 | 한국전자통신연구원 | IT성장동력기술개발사업 | 디지털 크리쳐 제작 S/W 개발 |
특허 등록번호 | 10-1221449-0000 |
---|
표시번호 | 사항 |
---|---|
1 |
출원 연월일 : 20090327 출원 번호 : 1020090026454 공고 연월일 : 20130111 공고 번호 : 특허결정(심결)연월일 : 20121228 청구범위의 항수 : 16 유별 : G06T 7/20 발명의 명칭 : 카메라간 영상 보정 장치 및 방법 존속기간(예정)만료일 : |
순위번호 | 사항 |
---|---|
1 |
(권리자) 한국전자통신연구원 대전광역시 유성구... |
제 1 - 3 년분 | 금 액 | 334,500 원 | 2013년 01월 08일 | 납입 |
제 4 년분 | 금 액 | 274,400 원 | 2015년 12월 28일 | 납입 |
제 5 년분 | 금 액 | 323,790 원 | 2017년 06월 21일 | 납입 |
제 6 년분 | 금 액 | 274,400 원 | 2017년 12월 26일 | 납입 |
제 7 년분 | 금 액 | 354,000 원 | 2018년 12월 26일 | 납입 |
제 8 년분 | 금 액 | 354,000 원 | 2019년 12월 23일 | 납입 |
번호 | 서류명 | 접수/발송일자 | 처리상태 | 접수/발송번호 |
---|---|---|---|---|
1 | [특허출원]특허출원서 | 2009.03.27 | 수리 (Accepted) | 1-1-2009-0186326-09 |
2 | 출원인정보변경(경정)신고서 | 2009.08.04 | 수리 (Accepted) | 4-1-2009-5150899-36 |
3 | 의견제출통지서 | 2012.06.15 | 발송처리완료 (Completion of Transmission) | 9-5-2012-0347912-61 |
4 | [명세서등 보정]보정서 | 2012.08.16 | 보정승인간주 (Regarded as an acceptance of amendment) | 1-1-2012-0655036-24 |
5 | [거절이유 등 통지에 따른 의견]의견(답변, 소명)서 | 2012.08.16 | 수리 (Accepted) | 1-1-2012-0655037-70 |
6 | 등록결정서 | 2012.12.28 | 발송처리완료 (Completion of Transmission) | 9-5-2012-0799286-11 |
7 | 출원인정보변경(경정)신고서 | 2015.02.02 | 수리 (Accepted) | 4-1-2015-0006137-44 |
기술정보가 없습니다 |
---|
과제고유번호 | 1415099664 |
---|---|
세부과제번호 | KI001732 |
연구과제명 | 디지털크리쳐제작기술개발 |
성과구분 | 등록 |
부처명 | 지식경제부 |
연구관리전문기관명 | 한국산업기술평가관리원 |
연구주관기관명 | 한국전자통신연구원 |
성과제출연도 | 2009 |
연구기간 | 200705~201004 |
기여율 | 1 |
연구개발단계명 | 응용연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1375000323 |
---|---|
세부과제번호 | 2-07-1205-001-10000-00-001 |
연구과제명 | 디지털크리쳐제작S/W개발 |
성과구분 | 출원 |
부처명 | 문화체육관광부 |
연구관리전문기관명 | 한국문화콘텐츠진흥원 |
연구주관기관명 | 한국전자통신연구원 |
성과제출연도 | 2007 |
연구기간 | 200705~200804 |
기여율 | 0.5 |
연구개발단계명 | 개발연구 |
6T분류명 | CT(문화기술) |
과제고유번호 | 1415099664 |
---|---|
세부과제번호 | KI001732 |
연구과제명 | 디지털크리쳐제작기술개발 |
성과구분 | 출원 |
부처명 | 지식경제부 |
연구관리전문기관명 | 한국산업기술평가관리원 |
연구주관기관명 | 한국전자통신연구원 |
성과제출연도 | 2009 |
연구기간 | 200705~201004 |
기여율 | 0.5 |
연구개발단계명 | 응용연구 |
6T분류명 | IT(정보기술) |
[1020090127714] | 실내외 상황인식 기반의 모바일 혼합현실 콘텐츠 운용 장치 및 방법 | 새창보기 |
---|---|---|
[1020090123342] | 모션 캡쳐 데이터의 포즈 검색 장치 및 방법 | 새창보기 |
[1020090100738] | 카메라 트래킹 시스템, 트래킹 방법 및 이를 이용한 실사영상 합성 시스템 | 새창보기 |
[1020090032205] | 관찰 방향 및 조명을 고려한 피부 질감 렌더링 방법 및 그 장치 | 새창보기 |
[1020090027583] | 서피스 텍스처 매핑 장치 및 그 방법 | 새창보기 |
[1020090026454] | 카메라간 영상 보정 장치 및 방법 | 새창보기 |
[1020090024051] | 멀티코어 멀티스레드 기반의 KLT 특징점 추적 방법 및 그 장치 | 새창보기 |
[1020090023985] | 다중 영상 스트림 녹화 방법 및 그 장치 | 새창보기 |
[1020090023570] | 원격 쉐이딩 기반의 3D스트리밍 장치 및 방법 | 새창보기 |
[1020090021064] | 군중 애니메이션 제작 장치 및 방법 | 새창보기 |
[1020080131662] | 광역 이동을 고려한 실시간 카메라 트래킹 장치 및 방법 | 새창보기 |
[1020080131371] | 동적 압축 장치 및 방법 | 새창보기 |
[1020080131370] | 평행사변형 기반의 무한 호모그래피 산출 방법과 이를 이용한 건물 구조 복원 방법 | 새창보기 |
[1020080131237] | 모션캡쳐 데이터베이스의 구축 방법과 이를 이용한 모션 합성 방법 | 새창보기 |
[1020080130778] | 그래픽 털 운동 생성 방법 및 그 장치 | 새창보기 |
[1020070133674] | 칼만 필터를 이용한 실시간 카메라 움직임 추정시스템에서의 움직임 추정 방법 및 장치 | 새창보기 |
[1020070132360] | 실시간 카메라 트래킹을 이용한 실사 영상 합성 시스템 및 그 방법 | 새창보기 |
[1020070131832] | 디지털 영상 촬영 방법 및 촬영 장치 | 새창보기 |
[1020070131831] | 영상 다면체 구조를 이용한 영상 분할 및 합성 방법 | 새창보기 |
[1020070131821] | 2차원 환경에서 3차원 모델의 텍스쳐 맵 제작 방법 및시스템 | 새창보기 |
[1020070131820] | 올라타기 동작을 이용한 이동 동작 애니메이션 제작 시스템및 방법 | 새창보기 |
[1020070131819] | 군중 시뮬레이션을 위한 인터페이스의 처리 방법 | 새창보기 |
[1020070129392] | 샘플 텍스처 합성에 의한 서피스 텍스처 맵핑 시스템 | 새창보기 |
[1020070082290] | 대규모 가상 군중 동작의 획득 및 편집 방법 및 그 장치 | 새창보기 |
[KST2014045527][한국전자통신연구원] | 다중 사용자의 인터렉션 인식 장치 및 방법 | 새창보기 |
---|---|---|
[KST2014066648][한국전자통신연구원] | 구조광 기반 영상 획득을 위한 패턴 영상 출력 제어 및 획득 제어 기술 | 새창보기 |
[KST2014045190][한국전자통신연구원] | 영상 촬영 장치의 객체 추적 장치 및 방법과 보안 관리 시스템의 객체 추적 장치 | 새창보기 |
[KST2014062770][한국전자통신연구원] | 이기종 디스플레이 연동 인터랙티브 콘텐츠 제작 기술 | 새창보기 |
[KST2014065699][한국전자통신연구원] | 스테레오 영상 이용한 3D 얼굴 복원 기술 | 새창보기 |
[KST2014045134][한국전자통신연구원] | 부분 궤적 인식 장치 및 방법 | 새창보기 |
[KST2015063616][한국전자통신연구원] | 체적형 3차원 패널 및 이를 이용한 디스플레이 장치 | 새창보기 |
[KST2014032296][한국전자통신연구원] | 입체감 조절방법 및 조절장치와 이를 이용한 3D 비디오 인코더 및 3D 단말 | 새창보기 |
[KST2014045083][한국전자통신연구원] | 다이내믹 레인지 삼차원 영상 시스템 | 새창보기 |
[KST2014045122][한국전자통신연구원] | 방송 신호 수신 방법 | 새창보기 |
[KST2014045338][한국전자통신연구원] | 영상 시스템에서 영상 표시 장치 및 방법 | 새창보기 |
[KST2014062881][한국전자통신연구원] | MPEG-2_HEVC 기반 3DTV 수신 및 재현 기술 | 새창보기 |
[KST2014062898][한국전자통신연구원] | 멀티 채널 구조광 영상 기반 Depth Map 획득 기술 | 새창보기 |
[KST2014067269][한국전자통신연구원] | [HRI]피사체의 움직임 여부에 기초하여 영상의 선택적 출력이 가능한 네트워크 기반 지능형 로봇 | 새창보기 |
[KST2015053690][한국전자통신연구원] | 오브젝트 움직임 계산 장치 및 방법 | 새창보기 |
[KST2015065311][한국전자통신연구원] | 그래픽 분할 실행을 이용한 3D 콘텐츠 제공 시스템 및 방법 | 새창보기 |
[KST2015077835][한국전자통신연구원] | 광학식과 자기식 모션 캡쳐 시스템을 위한 센서 퓨전 장치및 그 방법 | 새창보기 |
[KST2014031386][한국전자통신연구원] | 영상 시스템에서 영상 제공 장치 및 방법 | 새창보기 |
[KST2014045054][한국전자통신연구원] | 3D 입체감 적응 장치 및 방법 | 새창보기 |
[KST2015062266][한국전자통신연구원] | 시각 주의 분석에 근거한 시각 보조 시스템 및 상기 시각 주의 분석을 이용한 시각 보조 방법 | 새창보기 |
[KST2015077816][한국전자통신연구원] | 영상에서의 사물들간의 시차량을 조절하는 주시각 제어 장치 및 그 방법과 그를 이용한 평행축 입체 카메라 시스템 | 새창보기 |
[KST2014045877][한국전자통신연구원] | 통신 시스템에서 데이터 송수신 장치 및 방법 | 새창보기 |
[KST2015053999][한국전자통신연구원] | 3차원 영상 출력 방법 및 장치 | 새창보기 |
[KST2015076181][한국전자통신연구원] | 위상천이격자를 이용한 영사식 모아레법 및 시스템 | 새창보기 |
[KST2014009859][한국전자통신연구원] | 깊이 정보 기반 스테레오 / 다시점 영상 정합 장치 및 방법 | 새창보기 |
[KST2014031630][한국전자통신연구원] | 3차원 영상 디스플레이 장치 및 방법 | 새창보기 |
[KST2014031767][한국전자통신연구원] | 모션 캡쳐 데이터의 포즈 검색 장치 및 방법 | 새창보기 |
[KST2014045123][한국전자통신연구원] | 방송 신호 전송 방법 | 새창보기 |
[KST2014045827][한국전자통신연구원] | 디지털 방송 시스템에서 방송 서비스 모니터링 장치 및 방법 | 새창보기 |
[KST2014066593][한국전자통신연구원] | 3차원 국토정보 시각화 엔진 v2.0 | 새창보기 |
심판사항 정보가 없습니다 |
---|