요약 | 본 발명은 다시점 2차원 영상을 사용하여 3차원 정보를 복원하는 장치에 관한 것으로, 입력 영상을 로딩하여 전경 및 배경을 분리하고, 전경 및 배경이 분리된 각 영상을 3차원 텍스처로 변환하여 그래픽 프로세서로 전송하면, 그래픽 프로세서의 연산 유닛을 통해 전송된 3차원 텍스처에 대한 복셀 단위의 비주얼 헐을 생성하고, 메쉬 단위로 변환한 후에, 렌더링 파이프라인의 버텍스 쉐이더, 래스터 라이저 및 픽셀 쉐이더를 통해 데이터 정렬, 픽셀 변환, 화면 표시 값 결정의 과정을 수행하고, 결정된 화면 표시 값을 이용하여 렌더링함으로써, 실시간으로 다시점 2차원 영상을 고속으로 병렬 연산하여 3차원 영상으로 복원할 수 있는 것이다.영상 복원, 비주얼 헐(visual hull) |
---|---|
Int. CL | G06T 15/00 (2006.01) |
CPC | |
출원번호/일자 | 1020090118670 (2009.12.02) |
출원인 | 한국전자통신연구원 |
등록번호/일자 | 10-1271460-0000 (2013.05.30) |
공개번호/일자 | 10-2011-0062083 (2011.06.10) 문서열기 |
공고번호/일자 | (20130605) 문서열기 |
국제출원번호/일자 | |
국제공개번호/일자 | |
우선권정보 | |
법적상태 | 소멸 |
심사진행상태 | 수리 |
심판사항 | |
구분 | 신규 |
원출원번호/일자 | |
관련 출원번호 | |
심사청구여부/일자 | Y (2009.12.02) |
심사청구항수 | 19 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 한국전자통신연구원 | 대한민국 | 대전광역시 유성구 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 박지영 | 대한민국 | 대전광역시 유성구 |
2 | 구본기 | 대한민국 | 대전광역시 유성구 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 제일특허법인(유) | 대한민국 | 서울특별시 서초구 마방로 ** (양재동, 동원F&B빌딩) |
2 | 김원준 | 대한민국 | 서울특별시 서초구 마방로 ** (양재동, 동원F&B빌딩)(제일특허법인(유)) |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 한국전자통신연구원 | 대전광역시 유성구 |
번호 | 서류명 | 접수/발송일자 | 처리상태 | 접수/발송번호 |
---|---|---|---|---|
1 | [특허출원]특허출원서 [Patent Application] Patent Application |
2009.12.02 | 수리 (Accepted) | 1-1-2009-0745393-59 |
2 | 의견제출통지서 Notification of reason for refusal |
2012.12.13 | 발송처리완료 (Completion of Transmission) | 9-5-2012-0758780-59 |
3 | [명세서등 보정]보정서 [Amendment to Description, etc.] Amendment |
2013.02.13 | 보정승인간주 (Regarded as an acceptance of amendment) | 1-1-2013-0129793-54 |
4 | [거절이유 등 통지에 따른 의견]의견(답변, 소명)서 [Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation) |
2013.02.13 | 수리 (Accepted) | 1-1-2013-0129792-19 |
5 | 등록결정서 Decision to grant |
2013.05.27 | 발송처리완료 (Completion of Transmission) | 9-5-2013-0360476-40 |
6 | 출원인정보변경(경정)신고서 Notification of change of applicant's information |
2015.02.02 | 수리 (Accepted) | 4-1-2015-0006137-44 |
번호 | 청구항 |
---|---|
1 |
1 로딩된 입력 영상에서 전경 및 배경을 분리하여 3차원 텍스처로 변환하는 컨트롤 프로세서 유닛과,상기 변환된 3차원 텍스처에 대한 복셀 단위의 비주얼 헐을 생성하고, 상기 생성된 비주얼 헐을 메쉬 단위로 변환하며, 상기 메쉬 단위로 변환된 비주얼 헐의 데이터를 정렬하여 픽셀로 변환하며, 상기 변환된 픽셀을 기반으로 3차원 텍스처 상의 값을 참조하여 화면 표시 값을 결정한 후, 상기 결정된 화면 표시 값을 이용하여 렌더링하는 그래픽 프로세서 유닛을 포함하는 영상 복원 장치 |
2 |
2 제 1 항에 있어서,상기 컨트롤 프로세서 유닛은,다시점에서 촬영한 영상인 상기 로딩된 입력 영상에서 상기 전경 및 배경을 분리하는 데이터 입력부와,상기 전경 및 배경이 분리된 영상을 상기 3차원 텍스처로 변환하여 상기 그래픽 프로세서 유닛에 전송하는 데이터 전송부를 포함하는영상 복원 장치 |
3 |
3 제 1 항 또는 제 2 항에 있어서,상기 그래픽 프로세서 유닛은,연산 유닛을 통해 상기 3차원 텍스처에 대한 상기 복셀 단위의 상기 비주얼 헐을 생성하고, 상기 생성된 비주얼 헐을 상기 메쉬 단위로 변환하는 그래픽 연산부와,렌더링 파이프라인을 이용하여 상기 메쉬 단위로 변환된 비주얼 헐의 데이터를 정렬하여 픽셀로 변환하며, 상기 변환된 픽셀을 기반으로 3차원 텍스처 상의 값을 참조하여 화면 표시 값을 결정한 후 상기 화면 표시 값을 이용하여 랜더링을 수행하는 그래픽 렌더링부를 포함하는 영상 복원 장치 |
4 |
4 제 3 항에 있어서,상기 그래픽 연산부는, 상기 연산 유닛의 개수에 따라 복셀을 트리 구조로 분할하여 관리하는영상 복원 장치 |
5 |
5 제 4 항에 있어서,상기 그래픽 연산부는, 상기 비주얼 헐에 대한 각 복셀의 병렬 처리를 수행하기 위해 상기 각 복셀의 중점을 3차원 텍스처 맵에 투영하는 방식으로 처리하는영상 복원 장치 |
6 |
6 제 5 항에 있어서,상기 그래픽 연산부는, 마칭 큐브를 적용하여 복셀 모델의 외곽이 메쉬 형태로 표현된 메쉬 모델을 생성하는 방식으로 변환하는영상 복원 장치 |
7 |
7 제 3 항에 있어서,상기 렌더링 파이프 라인은,상기 메쉬 단위로 변환된 상기 비주얼 헐을 입력받는 버텍스 쉐이더와,상기 버텍스 쉐이더에서 출력되는 데이터를 정렬하여 픽셀로 변환하는 래스터 라이저를 포함하는 영상 복원 장치 |
8 |
8 제 7 항에 있어서,상기 그래픽 렌더링부는, 상기 래스터 라이저에 의해 변환된 픽셀을 기반으로 3차원 텍스처 상의 값을 참조하여 상기 화면 표시 값을 결정하는 픽셀 쉐이더를 포함하는영상 복원 장치 |
9 |
9 제 8 항에 있어서,상기 그래픽 렌더링부는, 상기 픽셀 쉐이더 내에서 텍스처링을 수행할 경우 화면에 나타날 화소의 텍스처 값만을 병렬 처리하는영상 복원 장치 |
10 |
10 제 8 항에 있어서,상기 그래픽 렌더링부는, 상기 픽셀 쉐이더 내에서 텍스처링을 수행할 경우 화면에 나타날 화소의 텍스처 값만을 병렬 처리하되, 상기 렌더링 파이프라인의 내부에서 3차원 모델의 깊이 값을 참조하는영상 복원 장치 |
11 |
11 로딩된 입력 영상에서 전경 및 배경을 분리하여 3차원 텍스처로 변환하는 단계와,상기 변환된 3차원 텍스처에 대한 복셀 단위의 비주얼 헐을 생성하여 메쉬 단위로 변환하는 단계와,상기 메쉬 단위로 변환된 상기 비주얼 헐의 데이터를 정렬하여 픽셀로 변환한 후 상기 변환된 픽셀을 기반으로 3차원 텍스처 상의 값을 참조하여 화면 표시 값을 결정하여 렌더링하는 단계를 포함하는영상 복원 방법 |
12 |
12 제 11 항에 있어서,상기 3차원 텍스처로 전송하는 단계는,다시점에서 촬영한 영상인 상기 로딩된 입력 영상에서 상기 전경 및 배경을 분리하는 단계와,상기 전경 및 배경이 분리된 영상을 상기 3차원 텍스처로 변환하는 단계를 포함하는영상 복원 방법 |
13 |
13 제 11 항 또는 제 12 항에 있어서,상기 메쉬 단위로 변환하는 단계는, 연산 유닛을 통해 상기 3차원 텍스처에 대한 상기 복셀 단위의 상기 비주얼 헐을 생성하고, 상기 생성된 비주얼 헐을 상기 메쉬 단위로 변환하는영상 복원 방법 |
14 |
14 제 13 항에 있어서,상기 화면 표시 값을 결정하여 렌더링하는 단계는, 렌더링 파이프라인을 통해 상기 비주얼 헐의 데이터를 정렬하여 픽셀로 변환하며, 상기 변환된 픽셀을 기반으로 3차원 텍스처 상의 값을 참조하여 상기 화면 표시 값을 결정한 후 상기 결정된 화면 표시 값을 이용하여 렌더링하는영상 복원 방법 |
15 |
15 제 14 항에 있어서,상기 메쉬 단위로 변환하는 단계는, 상기 비주얼 헐에 대한 각 복셀의 병렬 처리를 수행하기 위해 상기 각 복셀의 중점을 3차원 텍스처 맵에 투영하는 방식으로 처리되는영상 복원 방법 |
16 |
16 제 15 항에 있어서,상기 메쉬 단위로 변환하는 단계는, 마칭 큐브를 적용하여 복셀 모델의 외곽이 메쉬 형태로 표현된 메쉬 모델을 생성하는 방식으로 변환되는영상 복원 방법 |
17 |
17 제 14 항에 있어서,상기 화면 표시 값을 결정하여 렌더링하는 단계는, 상기 메쉬 단위로 변환된 상기 비주얼 헐의 데이터가 상기 렌더링 파이프라인 내 버텍스 쉐이더에 입력되어 출력된 데이터를 상기 렌더링 파이프라인 내 래스터 라이저를 통해 정렬하여 픽셀로 변환하고, 상기 렌더링 파이프라인 내 픽셀 쉐이더를 통해 상기 변환된 픽셀을 기반으로 3차원 텍스처 상의 값을 참조하여 상기 화면 표시 값이 결정되는영상 복원 방법 |
18 |
18 제 17 항에 있어서,상기 화면 표시 값을 결정하여 렌더링하는 단계는, 상기 픽셀 쉐이더 내에서 텍스처링을 수행할 경우 화면에 나타날 화소의 텍스처 값만이 병렬 처리되는영상 복원 방법 |
19 |
19 제 17 항에 있어서,상기 화면 표시 값을 결정하여 렌더링하는 단계는, 상기 픽셀 쉐이더 내에서 텍스처링을 수행할 경우 화면에 나타날 화소의 텍스처 값만을 병렬 처리하되, 상기 렌더링 파이프라인의 내부에서 3차원 모델의 깊이 값을 참조하는영상 복원 방법 |
지정국 정보가 없습니다 |
---|
순번 | 패밀리번호 | 국가코드 | 국가명 | 종류 |
---|---|---|---|---|
1 | US20110128286 | US | 미국 | FAMILY |
순번 | 패밀리번호 | 국가코드 | 국가명 | 종류 |
---|---|---|---|---|
1 | US2011128286 | US | 미국 | DOCDBFAMILY |
순번 | 연구부처 | 주관기관 | 연구사업 | 연구과제 |
---|---|---|---|---|
1 | 문화체육관광부 | 한국전자통신연구원 | IT원천기술개발 | 방통융합형 Full 3D 복원 기술 개발 |
특허 등록번호 | 10-1271460-0000 |
---|
표시번호 | 사항 |
---|---|
1 |
출원 연월일 : 20091202 출원 번호 : 1020090118670 공고 연월일 : 20130605 공고 번호 : 특허결정(심결)연월일 : 20130527 청구범위의 항수 : 19 유별 : G06T 15/00 발명의 명칭 : 영상 복원 장치 및 그 방법 존속기간(예정)만료일 : 20160531 |
순위번호 | 사항 |
---|---|
1 |
(권리자) 한국전자통신연구원 대전광역시 유성구... |
제 1 - 3 년분 | 금 액 | 393,000 원 | 2013년 05월 31일 | 납입 |
번호 | 서류명 | 접수/발송일자 | 처리상태 | 접수/발송번호 |
---|---|---|---|---|
1 | [특허출원]특허출원서 | 2009.12.02 | 수리 (Accepted) | 1-1-2009-0745393-59 |
2 | 의견제출통지서 | 2012.12.13 | 발송처리완료 (Completion of Transmission) | 9-5-2012-0758780-59 |
3 | [명세서등 보정]보정서 | 2013.02.13 | 보정승인간주 (Regarded as an acceptance of amendment) | 1-1-2013-0129793-54 |
4 | [거절이유 등 통지에 따른 의견]의견(답변, 소명)서 | 2013.02.13 | 수리 (Accepted) | 1-1-2013-0129792-19 |
5 | 등록결정서 | 2013.05.27 | 발송처리완료 (Completion of Transmission) | 9-5-2013-0360476-40 |
6 | 출원인정보변경(경정)신고서 | 2015.02.02 | 수리 (Accepted) | 4-1-2015-0006137-44 |
기술번호 | KST2014031651 |
---|---|
자료제공기관 | NTB |
기술공급기관 | 한국전자통신연구원 |
기술명 | 영상 복원 장치 및 그 방법 |
기술개요 |
본 발명은 다시점 2차원 영상을 사용하여 3차원 정보를 복원하는 장치에 관한 것으로, 입력 영상을 로딩하여 전경 및 배경을 분리하고, 전경 및 배경이 분리된 각 영상을 3차원 텍스처로 변환하여 그래픽 프로세서로 전송하면, 그래픽 프로세서의 연산 유닛을 통해 전송된 3차원 텍스처에 대한 복셀 단위의 비주얼 헐을 생성하고, 메쉬 단위로 변환한 후에, 렌더링 파이프라인의 버텍스 쉐이더, 래스터 라이저 및 픽셀 쉐이더를 통해 데이터 정렬, 픽셀 변환, 화면 표시 값 결정의 과정을 수행하고, 결정된 화면 표시 값을 이용하여 렌더링함으로써, 실시간으로 다시점 2차원 영상을 고속으로 병렬 연산하여 3차원 영상으로 복원할 수 있는 것이다.영상 복원, 비주얼 헐(visual hull) |
개발상태 | 기술개발완료 |
기술의 우수성 | |
응용분야 | |
시장규모 및 동향 | |
희망거래유형 | 기술매매 |
사업화적용실적 | |
도입시고려사항 |
과제고유번호 | 1415099666 |
---|---|
세부과제번호 | KI001798 |
연구과제명 | 방통융합형Full3D복원기술개발 |
성과구분 | 출원 |
부처명 | 지식경제부 |
연구관리전문기관명 | 한국산업기술평가관리원 |
연구주관기관명 | 한국전자통신연구원 |
성과제출연도 | 2009 |
연구기간 | 200803~201402 |
기여율 | 1 |
연구개발단계명 | 응용연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1415099666 |
---|---|
세부과제번호 | KI001798 |
연구과제명 | 방통융합형Full3D복원기술개발 |
성과구분 | 등록 |
부처명 | 지식경제부 |
연구관리전문기관명 | 한국산업기술평가관리원 |
연구주관기관명 | 한국전자통신연구원 |
성과제출연도 | 2009 |
연구기간 | 200803~201402 |
기여율 | 1 |
연구개발단계명 | 응용연구 |
6T분류명 | IT(정보기술) |
[1020100095399] | 비트스트림을 파싱하는 장치 및 방법 | 새창보기 |
---|---|---|
[1020100055675] | 이동 가능한 다시점 영상 획득 시스템 및 다시점 영상 전처리 방법 | 새창보기 |
[1020100052390] | 근육 및 외형 곡면 기반 개체 표준 메쉬 모델의 파라메트릭 제어를 통한 자동 리깅 및 형상 전이 방법 | 새창보기 |
[1020100034199] | 3차원 컨텐츠 데이터를 인코딩 및 디코딩하기 위한 방법 및 장치 | 새창보기 |
[1020100034197] | 3차원 컨텐츠 데이터를 인코딩/디코딩하기 위한 방법 및 장치 | 새창보기 |
[1020100023633] | 광고 컨텐츠 공급 장치 및 방법 | 새창보기 |
[1020100018863] | 3차원 도시 모델링 장치 및 방법 | 새창보기 |
[1020090127715] | 가상낙서 시스템 및 그 인터페이스 장치 | 새창보기 |
[1020090127345] | 멀티 카메라 연동 장치 및 방법 | 새창보기 |
[1020090127344] | 캐릭터 모델의 근육전이 시스템 및 방법 | 새창보기 |
[1020090126716] | 동적 개체 모션 캡쳐 방법 및 그 장치 | 새창보기 |
[1020090126710] | 사용자 맞춤형 고품질 3D 아바타 생성 방법 및 그 장치 | 새창보기 |
[1020090123460] | 사실적인 인체 모델 렌더링을 위한 광학 속성 측정 장치 및 방법 | 새창보기 |
[1020090123341] | 다시점 영상에서 코드북 기반의 전경 및 배경 분리 장치 및 방법 | 새창보기 |
[1020090118670] | 영상 복원 장치 및 그 방법 | 새창보기 |
[1020090117894] | 사용자 중독성에 따른 서비스 이용 제한 장치 및 방법 | 새창보기 |
[1020090078015] | 전역조명을 지원하는 그래픽 처리 장치 및 이를 이용한 그래픽 처리 방법 | 새창보기 |
[1020090052877] | 탐색 데이터 표시 방법 및 장치 | 새창보기 |
[KST2015067581][한국전자통신연구원] | 인터랙티브 증강현실 구현 시스템 및 증강현실 구현 방법 | 새창보기 |
---|---|---|
[KST2015085974][한국전자통신연구원] | 복잡한 재질감 정보 처리 장치 및 방법 | 새창보기 |
[KST2014045248][한국전자통신연구원] | 지오컨텍스트 생성 장치와 이를 이용한 공간 기반 상황 인식 서비스 제공 시스템 및 방법 | 새창보기 |
[KST2015084938][한국전자통신연구원] | 맵데이터를 이용한 간접조명 표현과 다층 변위매핑 시스템 및 그 방법 | 새창보기 |
[KST2015084557][한국전자통신연구원] | 3차원 모델 생성 방법 및 장치 | 새창보기 |
[KST2015081476][한국전자통신연구원] | 3차원 블록 모델 형성 방법 | 새창보기 |
[KST2015085052][한국전자통신연구원] | 카메라 이동에 따른 렌더링 데이터 처리 장치 및 방법 | 새창보기 |
[KST2016011306][한국전자통신연구원] | 사물 인터넷 기기 제어 시스템 및 방법(System and method for controlling Internet-of-Things device) | 새창보기 |
[KST2014045202][한국전자통신연구원] | 원격 렌더링 기반의 3D 응용프로그램 실행 장치 및 그 방법 | 새창보기 |
[KST2016019475][한국전자통신연구원] | 3차원 공간에서 영상정보를 이용한 사용자 의도 분석장치 및 분석방법(THE ANALYSIS APPARATUS AND METHOD OF USER INTENTION USING VIDEO INFORMATION IN THREE DIMENSIONAL SPACE) | 새창보기 |
[KST2015096751][한국전자통신연구원] | 3D 의류 모델 복원 방법 및 장치 | 새창보기 |
[KST2015085348][한국전자통신연구원] | 헤어 스타일링 데모 시스템 및 방법 | 새창보기 |
[KST2014062773][한국전자통신연구원] | 인터랙티브 콘텐츠를 위한 캐릭터 연동 및 입체가시화 기술 | 새창보기 |
[KST2016017357][한국전자통신연구원] | 영상 촬영 장치의 촬영 속도 증가 방법(METHOD FOR INCREASING FILM SPEED OF VIDEO CAMERA) | 새창보기 |
[KST2015086043][한국전자통신연구원] | 가상 시점 영상 생성 장치 및 방법 | 새창보기 |
[KST2015085639][한국전자통신연구원] | 광선 추적법을 이용한 반사 영역 결정 장치 및 그 방법 | 새창보기 |
[KST2014045056][한국전자통신연구원] | 가상 세계 객체에 대한 ADDITIONAL TYPE | 새창보기 |
[KST2015090528][한국전자통신연구원] | 3D 가상 객체에 대한 조작 처리 장치 및 방법 | 새창보기 |
[KST2015085466][한국전자통신연구원] | 특수효과 렌더링 장치 및 그 방법 | 새창보기 |
[KST2015089947][한국전자통신연구원] | 영상 워핑 처리 방법 및 장치 | 새창보기 |
[KST2015097841][한국전자통신연구원] | 모발 이미지 렌더링 시스템 및 렌더링 방법 | 새창보기 |
[KST2015085368][한국전자통신연구원] | 깊이 정보를 생성하기 위한 장치 및 방법 | 새창보기 |
[KST2014045053][한국전자통신연구원] | 3차원 제스처 처리 방법 및 장치 | 새창보기 |
[KST2014045068][한국전자통신연구원] | 광선 경로 추적 방법 | 새창보기 |
[KST2015083992][한국전자통신연구원] | 휴대 방송에서의 3차원 서비스를 위한 깊이 영상 기반렌더링 장치 및 방법 | 새창보기 |
[KST2015089959][한국전자통신연구원] | 다시점 무안경 입체영상 렌더링 방법 및 그 장치 | 새창보기 |
[KST2015085902][한국전자통신연구원] | 가상시점 영상 생성 방법 및 그 장치 | 새창보기 |
[KST2014031767][한국전자통신연구원] | 모션 캡쳐 데이터의 포즈 검색 장치 및 방법 | 새창보기 |
[KST2015080587][한국전자통신연구원] | 동영상에서 배경을 복원하기 위한 장치 및 그 방법 | 새창보기 |
[KST2015082497][한국전자통신연구원] | 마커 패턴 인식 및 자세 추정을 통한 마커 인식 장치 및 방법 | 새창보기 |
심판사항 정보가 없습니다 |
---|