요약 | 본 발명은 스테레오 비전 시스템 및 그 제어방법에 관한 것으로서, 좌,우 스테레오 카메라를 구비한 스테레오 비전 시스템에 있어서, 상기 좌,우 스테레오 카메라의 영상이 입력되면 영상의 밝기 조절을 위한 색상정보를 추출하는 영상정보 추출수단, 상기 색상 정보 및 기 저장한 교정 파라미터를 이용하여 좌,우 영상의 노이즈 감소를 위한 처리를 수행하는 영상 전처리수단, 상기 영상 전처리수단에서 처리된 좌,우 영상을 알고리즘을 통해 스테레오 정합을 수행하여 깊이 정보(depth map)를 도출하는 스테레오 정합수단 및 상기 스테레오 정합수단에서 도출한 깊이 정보를 입력받아 정합 정도를 측정하여 그 결과에 따라 상기 기 저장한 교정 파라미터를 변경하는 정합결과 측정수단을 포함하는 시스템 및 그 제어방법을 제공함으로써, 좌우 스테레오 카메라에서 입력되는 좌,우 영상의 색상정보인 밝기값을 평활화하고, 좌우 영상을 보정하여 정확한 깊이 정보에 따른 영상을 얻을 수 있으며, 하드웨어적인 카메라 위치의 뒤틀림이나 변형이 따른 비정상적인 스테레오 정합 결과가 얻어지면 학습을 통해 정상적인 스테레오 정합 결과를 얻을 수 있도록 하여 변화하는 상황에 대해 능동적으로 대처가 가능하도록 한다는 효과도 얻어진다. 스테레오 비전, 색상정보, 보정, 정합, 보정 파라미터, 학습 |
---|---|
Int. CL | H04N 13/00 (2006.01) H04N 13/02 (2006.01) |
CPC | |
출원번호/일자 | 1020080078528 (2008.08.11) |
출원인 | 한국전자통신연구원 |
등록번호/일자 | 10-0942925-0000 (2010.02.10) |
공개번호/일자 | 10-2010-0019804 (2010.02.19) 문서열기 |
공고번호/일자 | (20100222) 문서열기 |
국제출원번호/일자 | |
국제공개번호/일자 | |
우선권정보 | |
법적상태 | 등록 |
심사진행상태 | 수리 |
심판사항 | |
구분 | 신규 |
원출원번호/일자 | |
관련 출원번호 | |
심사청구여부/일자 | Y (2008.08.11) |
심사청구항수 | 15 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 한국전자통신연구원 | 대한민국 | 대전광역시 유성구 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 장지호 | 대한민국 | 대전광역시 유성구 |
2 | 최승민 | 대한민국 | 대전광역시 유성구 |
3 | 조재일 | 대한민국 | 대전광역시 유성구 |
4 | 황대환 | 대한민국 | 대전광역시 유성구 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 특허법인지명 | 대한민국 | 서울특별시 강남구 남부순환로**** 차우빌딩*층 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 공간정보기술 주식회사 | 경기도 성남시 분당구 |
번호 | 서류명 | 접수/발송일자 | 처리상태 | 접수/발송번호 |
---|---|---|---|---|
1 | [특허출원]특허출원서 [Patent Application] Patent Application |
2008.08.11 | 수리 (Accepted) | 1-1-2008-0574012-89 |
2 | 선행기술조사의뢰서 Request for Prior Art Search |
2009.02.04 | 수리 (Accepted) | 9-1-9999-9999999-89 |
3 | 선행기술조사보고서 Report of Prior Art Search |
2009.03.18 | 수리 (Accepted) | 9-1-2009-0017590-70 |
4 | 출원인정보변경(경정)신고서 Notification of change of applicant's information |
2009.08.04 | 수리 (Accepted) | 4-1-2009-5150899-36 |
5 | 의견제출통지서 Notification of reason for refusal |
2009.10.27 | 발송처리완료 (Completion of Transmission) | 9-5-2009-0440574-43 |
6 | [거절이유 등 통지에 따른 의견]의견(답변, 소명)서 [Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation) |
2009.10.28 | 수리 (Accepted) | 1-1-2009-0661300-87 |
7 | [명세서등 보정]보정서 [Amendment to Description, etc.] Amendment |
2009.10.28 | 보정승인간주 (Regarded as an acceptance of amendment) | 1-1-2009-0661299-17 |
8 | 등록결정서 Decision to grant |
2010.02.05 | 발송처리완료 (Completion of Transmission) | 9-5-2010-0053187-23 |
9 | 출원인정보변경(경정)신고서 Notification of change of applicant's information |
2015.02.02 | 수리 (Accepted) | 4-1-2015-0006137-44 |
번호 | 청구항 |
---|---|
1 |
1 좌,우 스테레오 카메라를 구비한 스테레오 비전 시스템에 있어서, 상기 좌,우 스테레오 카메라의 영상이 입력되면 영상의 밝기 조절을 위한 색상정보를 추출하는 영상정보 추출수단, 상기 색상 정보 및 기 저장한 교정 파라미터를 이용하여 좌,우 영상의 노이즈 감소를 위한 처리를 수행하는 영상 전처리수단, 상기 영상 전처리수단에서 처리된 좌,우 영상을 알고리즘을 통해 스테레오 정합을 수행하여 깊이 정보(depth map)를 도출하는 스테레오 정합수단 및 상기 스테레오 정합수단에서 도출한 깊이 정보를 입력받아 정합 정도를 측정하여 그 결과에 따라 상기 기 저장한 교정 파라미터를 변경하는 정합결과 측정수단을 포함하는 스테레오 비전 시스템 |
2 |
2 제1항에 있어서, 상기 영상 전처리수단은 상기 추출한 색상정보를 통해 영상의 히스토그램을 생성하고, 생성한 히스토그램의 평활화 작업과 동시에 좌,우 영상의 평균값을 균등하게 하는 평활화 수단 및 상기 기 저장된 교정 파라미터를 이용하여 좌,우 영상의 극상선(epipolar line)을 일치시키는 영상 보정을 수행하는 영상 보정수단을 포함하는 것인 스테레오 비전 시스템 |
3 |
3 제2항에 있어서, 상기 평활화 수단은 상기 히스토그램의 평활화시에 생성한 히스토그램의 정규화된 합을 계산하고, 계산한 정규화된 합을 기반으로 입력영상을 다시 변형하여 결과 영상을 생성하는 것인 스테레오 비전 시스템 |
4 |
4 제3항에 있어서, 상기 정규화된 합은 색상정보의 최대 밝기값을 입력영상 내부에 존재하는 전체 픽셀 수로 나눈 후, 입력영상 히스토그램의 누적합을 승산하여 얻는 것인 스테레오 비전 시스템 |
5 |
5 제1항에 있어서, 상기 정합결과 측정수단은 상기 깊이 정보를 푸리에 변환을 통해 전체 이미지를 주파수 영역으로 변환하는 푸리에 변환기, 상기 푸리에 변환기의 출력에서 고주파 신호를 검출하여 출력하는 고역통과필터 및 상기 고주파 신호와 기 저장한 참조표를 이용하여 정합 정도를 나타내는 계수값을 출력하는 결과출력수단을 포함하는 것인 스테레오 비전 시스템 |
6 |
6 제5항에 있어서, 상기 정합결과 측정수단은 상기 계수값이 설정값에 수렴하도록 상기 교정 파라미터들을 학습시키는 파라미터 학습수단을 더 포함하는 것인 스테레오 비전 시스템 |
7 |
7 제6항에 있어서, 상기 파라미터 학습수단은 상기 계수값을 변수값으로 하여 설정값에 수렴하도록 반복하여 학습하는 것인 스테레오 비전 시스템 |
8 |
8 제5항에 있어서, 상기 정합결과 측정수단은 상기 계수값이 설정값 이상인 경우에 학습 과정을 수행하도록 하는 것인 스테레오 비전 시스템 |
9 |
9 좌,우 스테레오 카메라를 구비한 스테레오 비전 시스템 제어방법에 있어서, 상기 좌,우 스테레오 카메라의 영상이 입력되면 영상의 밝기 조절을 위한 색상정보를 추출하는 영상정보 추출단계, 상기 추출한 색상정보를 통해 영상의 히스토그램을 생성하고, 생성한 히스토그램의 평활화 작업과 동시에 좌,우 영상의 평균값을 균등하게 하는 평활화단계, 상기 평활화 단계 수행 후 기 저장된 교정 파라미터를 이용하여 좌,우 영상의 극상선(epipolar line)을 일치시키는 영상 보정을 수행하는 영상보정단계, 상기 평활화단계 및 영상 보정단계에서 처리된 좌,우 영상을 알고리즘을 통해 스테레오 정합을 수행하여 깊이 정보(depth map)를 도출하는 스테레오 정합단계 및 상기 도출한 깊이 정보를 입력받아 정합 정도를 측정하여 그 결과에 따라 상기 기 저장한 교정 파라미터를 변경하는 정합결과 측정단계를 포함하는 스테레오 비전 시스템 제어방법 |
10 |
10 제9항에 있어서, 상기 평활화 단계는 상기 히스토그램의 평활화시에 생성한 히스토그램의 정규화된 합을 계산하고, 계산한 정규화된 합을 기반으로 입력영상을 다시 변형하여 결과 영상을 생성하는 것인 스테레오 비전 시스템 제어방법 |
11 |
11 제10항에 있어서, 상기 정규화합 히스토그램은 색상정보의 최대 밝기값을 입력영상 내부에 존재하는 전체 픽셀 수로 나눈 후, 입력영상 히스토그램의 누적합을 승산하여 얻는 것인 스테레오 비전 시스템 제어방법 |
12 |
12 제9항에 있어서, 상기 정합결과 측정단계는 상기 깊이 정보를 푸리에 변환을 통해 전체 이미지를 주파수 영역으로 변환하는 단계, 상기 푸리에 변환기의 출력에서 고주파 신호를 검출하여 출력하는 단계 및 상기 고주파 신호와 기 저장한 참조표(LUT:look up table)를 이용하여 정합 정도를 나타내는 계수값을 출력하는 단계를 포함하는 것인 스테레오 비전 시스템 제어방법 |
13 |
13 제12항에 있어서, 상기 정합결과 측정단계는 상기 계수값이 설정값에 수렴하도록 상기 교정 파라미터들을 학습시키는 파라미터 학습단계를 더 포함하는 것인 스테레오 비전 시스템 제어방법 |
14 |
14 제13항에 있어서, 상기 파라미터 학습단계는 상기 계수값을 변수값으로 하여 설정값 이하로 수렴하도록 반복하여 학습하는 것인 스테레오 비전 시스템 제어방법 |
15 |
15 제13항에 있어서, 상기 정합결과 측정단계는 상기 계수값이 설정값을 초과하는 경우에 학습 과정을 수행하도록 하는 것인 스테레오 비전 시스템 제어방법 |
지정국 정보가 없습니다 |
---|
순번 | 패밀리번호 | 국가코드 | 국가명 | 종류 |
---|---|---|---|---|
1 | US08098276 | US | 미국 | FAMILY |
2 | US20100066811 | US | 미국 | FAMILY |
순번 | 패밀리번호 | 국가코드 | 국가명 | 종류 |
---|---|---|---|---|
1 | US2010066811 | US | 미국 | DOCDBFAMILY |
2 | US8098276 | US | 미국 | DOCDBFAMILY |
순번 | 연구부처 | 주관기관 | 연구사업 | 연구과제 |
---|---|---|---|---|
1 | 지식경제부 및 정보통신연구진흥원 | 한국전자통신연구원 | IT원천기술개발사업 | u-로봇 HRI 솔루션 및 핵심 소자 기술 개발 |
특허 등록번호 | 10-0942925-0000 |
---|
표시번호 | 사항 |
---|---|
1 |
출원 연월일 : 20080811 출원 번호 : 1020080078528 공고 연월일 : 20100222 공고 번호 : 특허결정(심결)연월일 : 20100205 청구범위의 항수 : 4 유별 : H04N 13/00 발명의 명칭 : 스테레오 비전 시스템 및 그 제어방법 존속기간(예정)만료일 : |
순위번호 | 사항 |
---|---|
1 |
(권리자) 한국전자통신연구원 대전광역시 유성구... |
2 |
(의무자) 한국전자통신연구원 대전광역시 유성구... |
2 |
(권리자) 공간정보기술 주식회사 경기도 성남시 분당구... |
제 1 - 3 년분 | 금 액 | 315,000 원 | 2010년 02월 10일 | 납입 |
제 4 년분 | 금 액 | 128,000 원 | 2013년 02월 05일 | 납입 |
제 5 년분 | 금 액 | 128,000 원 | 2014년 01월 23일 | 납입 |
제 6 년분 | 금 액 | 89,600 원 | 2015년 01월 26일 | 납입 |
제 7 년분 | 금 액 | 252,000 원 | 2016년 01월 27일 | 납입 |
제 8 년분 | 금 액 | 176,400 원 | 2017년 01월 23일 | 납입 |
제 9 년분 | 금 액 | 176,400 원 | 2018년 02월 05일 | 납입 |
제 10 년분 | 금 액 | 230,000 원 | 2019년 02월 11일 | 납입 |
제 11 년분 | 금 액 | 230,000 원 | 2020년 01월 31일 | 납입 |
번호 | 서류명 | 접수/발송일자 | 처리상태 | 접수/발송번호 |
---|---|---|---|---|
1 | [특허출원]특허출원서 | 2008.08.11 | 수리 (Accepted) | 1-1-2008-0574012-89 |
2 | 선행기술조사의뢰서 | 2009.02.04 | 수리 (Accepted) | 9-1-9999-9999999-89 |
3 | 선행기술조사보고서 | 2009.03.18 | 수리 (Accepted) | 9-1-2009-0017590-70 |
4 | 출원인정보변경(경정)신고서 | 2009.08.04 | 수리 (Accepted) | 4-1-2009-5150899-36 |
5 | 의견제출통지서 | 2009.10.27 | 발송처리완료 (Completion of Transmission) | 9-5-2009-0440574-43 |
6 | [거절이유 등 통지에 따른 의견]의견(답변, 소명)서 | 2009.10.28 | 수리 (Accepted) | 1-1-2009-0661300-87 |
7 | [명세서등 보정]보정서 | 2009.10.28 | 보정승인간주 (Regarded as an acceptance of amendment) | 1-1-2009-0661299-17 |
8 | 등록결정서 | 2010.02.05 | 발송처리완료 (Completion of Transmission) | 9-5-2010-0053187-23 |
9 | 출원인정보변경(경정)신고서 | 2015.02.02 | 수리 (Accepted) | 4-1-2015-0006137-44 |
기술정보가 없습니다 |
---|
과제고유번호 | 1415086633 |
---|---|
세부과제번호 | A1100-0801-1496 |
연구과제명 | (국문)u-로봇HRI솔루션및핵심소자기술개발 |
성과구분 | 출원 |
부처명 | 지식경제부 |
연구관리전문기관명 | 정보통신연구진흥원 |
연구주관기관명 | 한국전자통신연구원 |
성과제출연도 | 2008 |
연구기간 | 200803~201202 |
기여율 | 1 |
연구개발단계명 | 기초연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1415107050 |
---|---|
세부과제번호 | KI001813 |
연구과제명 | u-로봇 HRI 솔루션 및 핵심소자 기술개발 |
성과구분 | 등록 |
부처명 | 지식경제부 |
연구관리전문기관명 | 한국산업기술평가관리원 |
연구주관기관명 | 한국전자통신연구원 |
성과제출연도 | 2010 |
연구기간 | 200803~201202 |
기여율 | 1 |
연구개발단계명 | 응용연구 |
6T분류명 | IT(정보기술) |
[1020100134085] | 다이나믹 프로그래밍 방식을 이용하는 스테레오 매칭 시스템 및 그 방법 | 새창보기 |
---|---|---|
[1020100134082] | 스테레오 영상 정합 장치 및 방법 | 새창보기 |
[1020100131859] | 물체 추적 장치 및 그 방법 | 새창보기 |
[1020100131825] | 상반신 검출장치 및 검출방법 | 새창보기 |
[1020100131556] | 인간컴퓨터 상호작용을 위한 영상처리장치 및 방법 | 새창보기 |
[1020100129529] | 스테레오 영상 처리 장치 및 그 방법 | 새창보기 |
[1020100121979] | 물체 추적 방법 및 그 장치 | 새창보기 |
[1020100121480] | 구동 명령을 이용한 카메라 줌 제어 시스템 및 방법 | 새창보기 |
[1020100121479] | 위치 감지 정보를 이용한 카메라 줌 조절 시스템 및 방법 | 새창보기 |
[1020100121479] | 위치 감지 정보를 이용한 카메라 줌 조절 시스템 및 방법 | 새창보기 |
[1020100111786] | 영상 객체 검출 장치 및 방법 | 새창보기 |
[1020100097227] | 영상 기반의 손 검출 장치 및 그 방법 | 새창보기 |
[1020100082072] | 복수의 객체를 추적하는 객체 추적 방법 및 장치 | 새창보기 |
[1020100075515] | 구동 명령을 이용한 비젼 트래킹 시스템 및 방법 | 새창보기 |
[1020100075515] | 구동 명령을 이용한 비젼 트래킹 시스템 및 방법 | 새창보기 |
[1020100073991] | 사용 패턴에 따라 변화하는 사용자 인터페이스 장치 및 그 방법 | 새창보기 |
[1020100065021] | 디지털 카메라를 이용한 실시간 사람/사물 윤곽선 추출 방법 및 합성 영상 생성, 활용 방법 | 새창보기 |
[1020100062125] | 제품정보 제공 장치 및 방법 | 새창보기 |
[1020100044142] | 멀티모달 융합을 위한 환경변수 측정방법 | 새창보기 |
[1020100039666] | 차량용 레이더 및 비젼 시스템의 방향 제어 시스템 및 방법 | 새창보기 |
[1020100030844] | 객체 형태 검출을 위한 배경 모델링 방법 | 새창보기 |
[1020100019065] | 연령 및 성별을 이용한 사용자 인식 장치 및 방법 | 새창보기 |
[1020100013200] | 이동 객체 통과 판정 장치 | 새창보기 |
[1020090043914] | 원거리 얼굴 추적 장치 및 이를 이용한 얼굴 추적 방법 | 새창보기 |
[1020080132626] | 음성 및 영상에 기반한 성별-연령 판별방법 및 그 장치 | 새창보기 |
[1020080131284] | 거리 측정 방법 및 스테레오 매칭 시스템 | 새창보기 |
[1020080131281] | 사람 검출 장치 및 방법 | 새창보기 |
[1020080131279] | 스테레오 비전을 이용한 실시간 얼굴 검출 시스템 및 그 방법 | 새창보기 |
[1020080129632] | 얼굴 검출 시스템 및 그 방법 | 새창보기 |
[1020080128697] | 사용자 자세를 사용자 명령으로 인식하는 게임 시스템 및 방법 | 새창보기 |
[1020080128695] | 하이브리드 특징벡터 처리 방법 및 이를 이용한 화자 인식 방법과 장치 | 새창보기 |
[1020080125425] | 영상 정합 장치 및 방법 | 새창보기 |
[1020080124073] | 음원 추정을 이용한 관심영상영역 검출 장치, 그를 이용한 얼굴 검출 시스템 및 그 방법 | 새창보기 |
[1020080114116] | 다채널 화자 식별 시스템 및 다채널 화자 식별 방법 | 새창보기 |
[1020080078528] | 스테레오 비전 시스템 및 그 제어방법 | 새창보기 |
[1020080076098] | 사용자 인식 장치 및 사용자 인식 방법 | 새창보기 |
[1020070132691] | 스테레오 비전 시스템 및 이의 영상 처리 방법 | 새창보기 |
[KST2014053741][성균관대학교] | 고정 또는 가변 프레임 레이트를 위한 고속의 고해상도 디스패리티 맵 생성 방법 및 장치 | 새창보기 |
---|---|---|
[KST2015011389][세종대학교] | 비정형 건축물 내비게이션 방법 및 그 장치 | 새창보기 |
[KST2015070340][LG그룹] | 3D 서브타이틀을 위한 디지털 방송 신호를 프로세싱하고 수신하는 방법 및 장치 | 새창보기 |
[KST2016007830][동국대학교] | 화각의 향상을 위한 최적 배치를 갖는 깊이 카메라 시스템(DEPTH CAMERA SYSTEM OF OPTIMAL ARRANGEMENT TO IMPROVE THE FIELD OF VIEW) | 새창보기 |
[KST2015011254][광주과학기술원] | 가변적 화면 그룹 예측 구조를 이용한 다시점 영상 부호화방법 및 장치, 영상 복호화 장치 그리고 상기 방법을수행하는 프로그램이 기록된 기록 매체) | 새창보기 |
[KST2015067520][LG그룹] | 3차원 영상을 분석하기 위한 양안 모델링 장치 | 새창보기 |
[KST2015017039][한양대학교 에리카캠퍼스] | 이미지의 뎁스 정보를 이용한 스테레오 비전 이미지 개선 방법 및 장치 | 새창보기 |
[KST2015231084][한국전자통신연구원] | 다시점 텔레프레즌스 서비스 제공 방법 및 장치(MULTIVIEW TELEPRESENCE SERVICE PROVIDING METHOD AND APPARAUS THEREOF) | 새창보기 |
[KST2015011445][세종대학교] | 스테레오 영상 보정 장치 및 그 방법 | 새창보기 |
[KST2014010128][부산대학교] | 현수교 구조물의 형상 모사 시스템 및 방법 | 새창보기 |
[KST2015067275][LG그룹] | 이동 단말기 및 그 제어방법 | 새창보기 |
[KST2015070933][LG그룹] | 영상표시장치 | 새창보기 |
[KST2014010704][강원대학교] | 3차원 시차 영상 획득 시스템 | 새창보기 |
[KST2016009732][한국기계연구원] | 부분 선형화 기반의 3차원 영상 정합 방법(STEREOSCOPIC IMAGE REGISTRATION METHOD BASED ON A PARTIAL LINEAR METHOD) | 새창보기 |
[KST2015067053][LG그룹] | 단말기 및 그 제어 방법 | 새창보기 |
[KST2015070369][LG그룹] | 디스플레이 장치 및 그 동작 방법 | 새창보기 |
[KST2015070236][광운대학교] | 공간 영상 투영 장치 | 새창보기 |
[KST2014009020][연세대학교] | 비강압적 3차원 얼굴 데이터 획득 시스템 및 그 방법 | 새창보기 |
[KST2015011288][세종대학교] | 멀티 디스플레이 제어 장치 및 콘텐츠 제공 방법 | 새창보기 |
[KST2015067428][LG그룹] | 영상표시기기 및 그 동작 방법 | 새창보기 |
[KST2015067343][LG그룹] | 이동 단말기 및 그것의 제어 방법 | 새창보기 |
[KST2015011290][고려대학교] | 영상 처리 장치 및 방법 | 새창보기 |
[KST2015070807][LG그룹] | 거리 검출 장치, 및 이를 구비하는 영상처리장치 | 새창보기 |
[KST2014053040][서울대학교] | 다시점 영상을 이용한 영상 시스템 및 영상 처리 방법 | 새창보기 |
[KST2016009030][한국전자통신연구원] | 디지털 홀로그래픽 테이블탑형 디스플레이 장치 및 그 방법(Digital holographic table-top display apparatus and method thereof) | 새창보기 |
[KST2019001254][한국과학기술연구원] | 무안경식 3차원 영상표시장치의 동적 최대 시역 형성 방법 | 새창보기 |
[KST2014008208][성균관대학교] | 구조광 기반 3차원 카메라의 최적 노출 결정 방법 및 시스템 | 새창보기 |
[KST2014009859][한국전자통신연구원] | 깊이 정보 기반 스테레오 / 다시점 영상 정합 장치 및 방법 | 새창보기 |
[KST2015011381][성균관대학교] | 압축 센싱을 사용하는 깊이 맵 부복호화 방법 및 장치 | 새창보기 |
[KST2016006443][한국전자통신연구원] | 깊이 맵 생성 장치 및 방법(APPARATUS AND METHOD FOR GENERATING DEPTH MAP) | 새창보기 |
심판사항 정보가 없습니다 |
---|