맞춤기술찾기

이전대상기술

멀티미디어 장치와 복수 개의 이종 이미지 센서 그리고 그 제어방법

  • 기술번호 : KST2015063420
  • 담당센터 :
  • 전화번호 :
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명의 일실시예에 의한 복수개의 이종 이미지 센서를 이용하는 멀티미디어 디바이스의 제어 방법은, 제1이미지 센서를 이용하여, 상기 멀티미디어 디바이스의 주변에 위치한 제1영상을 촬영하는 단계와, 상기 촬영된 제1영상으로부터 depth data 를 추출하는 단계와, 상기 추출된 depth data 를 이용하여 적어도 하나 이상의 사용자의 얼굴 그리고 포즈 정보를 디텍트하는 단계와, 제2이미지 센서를 이용하여, 상기 디텍트된 사용자의 얼굴에 대한 제2영상을 촬영하는 단계와, 상기 촬영된 제2영상으로부터 특징 정보를 추출하는 단계와, 그리고 상기 제1이미지 센서를 통해 획득된 포즈 정보 그리고 상기 제2이미지 센서를 통해 획득된 특징 정보에 기초하여, 메모리에 저장된 특정 사용자를 식별하는 정보를 추출하는 단계를 포함한다.
Int. CL G06T 7/00 (2006.01) H04N 5/232 (2006.01)
CPC H04N 5/232(2013.01) H04N 5/232(2013.01)
출원번호/일자 1020100111954 (2010.11.11)
출원인 엘지전자 주식회사
등록번호/일자 10-1629324-0000 (2016.06.03)
공개번호/일자 10-2012-0050616 (2012.05.21) 문서열기
공고번호/일자 (20160610) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2015.06.22)
심사청구항수 14

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 엘지전자 주식회사 대한민국 서울특별시 영등포구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 김상기 대한민국 서울특별시 서초구
2 강민구 대한민국 서울특별시 서초구
3 김태형 대한민국 서울특별시 서초구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 김용인 대한민국 서울특별시 송파구 올림픽로 ** (잠실현대빌딩 *층)(특허법인(유한)케이비케이)
2 방해철 대한민국 서울특별시 송파구 올림픽로 ** (잠실현대빌딩 *층)(특허법인(유한)케이비케이)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 엘지전자 주식회사 서울특별시 영등포구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2010.11.11 수리 (Accepted) 1-1-2010-0736009-55
2 [대리인선임]대리인(대표자)에 관한 신고서
[Appointment of Agent] Report on Agent (Representative)
2014.12.20 수리 (Accepted) 1-1-2014-1239775-03
3 출원인정보변경(경정)신고서
Notification of change of applicant's information
2015.05.22 수리 (Accepted) 4-1-2015-5068349-97
4 [심사청구]심사청구(우선심사신청)서
[Request for Examination] Request for Examination (Request for Preferential Examination)
2015.06.22 수리 (Accepted) 1-1-2015-0599344-93
5 선행기술조사의뢰서
Request for Prior Art Search
2016.01.14 수리 (Accepted) 9-1-9999-9999999-89
6 선행기술조사보고서
Report of Prior Art Search
2016.02.04 발송처리완료 (Completion of Transmission) 9-6-2016-0016080-21
7 의견제출통지서
Notification of reason for refusal
2016.02.16 발송처리완료 (Completion of Transmission) 9-5-2016-0117608-51
8 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2016.04.15 수리 (Accepted) 1-1-2016-0360172-33
9 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2016.04.15 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2016-0360167-15
10 등록결정서
Decision to grant
2016.05.24 발송처리완료 (Completion of Transmission) 9-5-2016-0375279-17
11 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.05.28 수리 (Accepted) 4-1-2020-5118228-40
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
복수개의 이종 이미지 센서를 이용하는 멀티미디어 디바이스의 제어 방법에 있어서,제1이미지 센서를 이용하여, 상기 멀티미디어 디바이스의 주변에 위치한 제1영상을 촬영하는 단계;상기 촬영된 제1영상으로부터 depth data 를 추출하는 단계;상기 추출된 depth data 를 이용하여 적어도 하나 이상의 사용자의 얼굴 그리고 포즈 정보를 디텍트하는 단계;제2이미지 센서를 이용하여, 상기 디텍트된 사용자의 얼굴에 대한 제2영상을 촬영하는 단계;상기 촬영된 제2영상으로부터 특징 정보를 추출하는 단계; 상기 제1이미지 센서를 통해 획득된 포즈 정보 그리고 상기 제2이미지 센서를 통해 획득된 특징 정보에 기초하여 특정 사용자를 식별할 수 없는 경우, 신체 정보를 저장하고 있는 메모리에 엑세스 하는 단계; 그리고상기 포즈 정보 및 상기 특징 정보 뿐만 아니라, 상기 메모리에 액세스 하여 검출한 상기 신체 정보에 기초하여 특정 사용자를 식별하는 정보를 추출하는 단계를 포함하는 복수개의 이종 이미지 센서를 이용하는 멀티미디어 디바이스의 제어 방법
2 2
제1항에 있어서,상기 특정 사용자의 포즈 정보 및 대응하는 특징 정보를 맵핑하여 상기 메모리에 저장하는 단계; 상기 메모리에 저장된 포즈 정보 및 대응하는 특징 정보와, 상기 제1이미지 센서를 통해 획득된 포즈 정보 및 상기 제2이미지 센서를 통해 획득된 특징 정보 각각을 비교하는 단계; 그리고각각이 동일한 경우, 상기 특정 사용자를 시청자(viewer) 로 선택하는 단계를 더 포함하는 복수개의 이종 이미지 센서를 이용하는 멀티미디어 디바이스의 제어 방법
3 3
제2항에 있어서,상기 특정 사용자의 신체 정보 및 대응하는 특징 정보를 맵핑하여 상기 메모리에 저장하는 단계;상기 메모리에 저장된 신체 정보 및 대응하는 특징 정보와, 상기 제1이미지 센서를 통해 획득된 신체 정보 및 상기 제2이미지 센서를 통해 획득된 특징 정보 각각을 비교하는 단계; 그리고각각이 동일한 경우, 상기 특정 사용자를 시청자(viewer) 로 선택하는 단계를 더 포함하는 복수개의 이종 이미지 센서를 이용하는 멀티미디어 디바이스의 제어 방법
4 4
제2항에 있어서,상기 제1이미지 센서를 통해 획득된 포즈 정보가 상기 메모리에 저장되어 있지 않은 경우, 상기 메모리에 저장된 포즈 정보에 해당하는 동작을 가이드 하는 메시지가 출력되도록 제어하는 단계를 더 포함하는 복수개의 이종 이미지 센서를 이용하는 멀티미디어 디바이스의 제어 방법
5 5
제1항에 있어서,상기 디텍트는 단계는,상기 사용자의 얼굴에 대한 위치 정보인 x, y, z 값들을 계산하는 단계 -상기 x는 상기 촬영된 제1영상에서 상기 얼굴의 가로축에 대한 위치, 상기 y는 상기 촬영된 제1영상에서 상기 얼굴의 세로축에 대한 위치, 그리고 상기 z는 상기 사용자의 얼굴과 제1이미지 센서 사이의 거리를 의미-를 더 포함하는 복수개의 이종 이미지 센서를 이용하는 멀티미디어 디바이스의 제어 방법
6 6
제5항에 있어서,상기 제2영상을 촬영하는 단계는,상기 계산된 x, y, z 값들에 기초하여, 상기 사용자의 얼굴에 대한 영역을 줌인하여 촬영하는 단계를 더 포함하는 복수개의 이종 이미지 센서를 이용하는 멀티미디어 디바이스의 제어 방법
7 7
제1항에 있어서,상기 제1이미지 센서는 depth camera에 대응하고, 상기 제2이미지 센서는 RGB camera에 대응하는복수개의 이종 이미지 센서를 이용하는 멀티미디어 디바이스의 제어 방법
8 8
제1항에 있어서,상기 제1이미지 센서 및 상기 제2이미지 센서는 상기 멀티미디어 디바이스에 임베디드 되거나 또는 상기 멀티미디어 디바이스의 외부에 위치한 모듈로 설계되어 있는복수개의 이종 이미지 센서를 이용하는 멀티미디어 디바이스의 제어 방법
9 9
적어도 하나 이상의 사용자를 인식하는 복수개의 이종 이미지 센서에 있어서,멀티미디어 디바이스 주변에 위치한 적어도 하나 이상의 사용자에게 빛을 발산하는 이미터(emitter)를 이용하여, 제1영상을 촬영하고, 상기 촬영된 제1영상으로부터 depth data 를 추출하고, 상기 추출된 depth data 를 이용하여 상기 적어도 하나 이상의 사용자의 얼굴, 신체 정보 그리고 포즈 정보를 디텍트하는 제1이미지 센서; 상기 디텍트된 사용자의 얼굴에 대한 제2영상을 촬영하고, 상기 촬영된 제2영상으로부터 특징 정보를 추출하는 제2이미지 센서; 신체 정보를 저장하고 있는 메모리; 그리고상기 제1이미지 센서를 통해 획득된 포즈 정보 그리고 상기 제2이미지 센서를 통해 획득된 특징 정보에 기초하여 특정 사용자를 식별할 수 없는 경우, 상기 신체 정보를 저장하고 있는 메모리에 액세스 하는 컨트롤러를 포함하되,상기 컨트롤러는 상기 포즈 정보 및 상기 특징 정보 뿐만 아니라 상기 메모리에 액세스 하여 검출한 상기 신체 정보에 기초하여 특정 사용자를 식별하는 정보를 추출하는 것을 특징으로 하는 복수개의 이종 이미지 센서
10 10
제9항에 있어서,상기 이미터는 IR(Infra Red) 이미터에 대응하는적어도 하나 이상의 사용자를 인식하는 복수개의 이종 이미지 센서
11 11
제9항에 있어서,상기 제1이미지 센서는 depth camera에 대응하고, 상기 제2이미지 센서는 RGB camera에 대응하는적어도 하나 이상의 사용자를 인식하는 복수개의 이종 이미지 센서
12 12
제11항에 있어서,상기 이미터는 코드화된 패턴 영상을 상기 사용자에게 연속적으로 투영하고,상기 depth camera 는, 상기 사용자에 의해 투영된 영상의 패턴이 왜곡된 정도를 이용하여, 상기 사용자의 위치를 추정하는적어도 하나 이상의 사용자를 인식하는 복수개의 이종 이미지 센서
13 13
제11항에 있어서,상기 depth camera 는,상기 이미터에 의해 발산된 light 와 상기 사용자에 의해 투영된(reflected) light 간의 시간 차이를 이용하여, 상기 사용자의 위치를 추정하는적어도 하나 이상의 사용자를 인식하는 복수개의 이종 이미지 센서
14 14
제9항에 있어서,상기 신체 정보는,상기 제1이미지 센서를 통해 촬영된 상기 사용자의 팔 길이, 어깨 넓이, 키 또는 얼굴 사이즈 중 적어도 하나 이상을 포함하는적어도 하나 이상의 사용자를 인식하는 복수개의 이종 이미지 센서
지정국 정보가 없습니다
순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - 패밀리정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 CN102467661 CN 중국 FAMILY
2 EP02453386 EP 유럽특허청(EPO) FAMILY
3 EP02453386 EP 유럽특허청(EPO) FAMILY
4 KR1020120050614 KR 대한민국 FAMILY
5 US09025023 US 미국 FAMILY
6 US20120120271 US 미국 FAMILY

DOCDB 패밀리 정보

순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - DOCDB 패밀리 정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 CN102467661 CN 중국 DOCDBFAMILY
2 CN102467661 CN 중국 DOCDBFAMILY
국가 R&D 정보가 없습니다.