맞춤기술찾기

이전대상기술

멀티미디어 장치와 복수 개의 이종 이미지 센서 그리고 그 제어방법

  • 기술번호 : KST2015063394
  • 담당센터 :
  • 전화번호 :
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명의 일실시예에 의한 복수개의 이종 이미지 센서를 이용하는 멀티미디어 디바이스의 제어 방법은, 제1이미지 센서를 이용하여, 상기 멀티미디어 디바이스의 정면에 위치한 제1영상을 촬영하는 단계와, 상기 촬영된 제1영상으로부터 depth data 를 추출하는 단계와, 상기 추출된 depth data 를 이용하여 적어도 하나 이상의 사용자의 얼굴을 디텍트하는 단계와, 제2이미지 센서를 이용하여, 상기 디텍트된 사용자의 얼굴에 대한 제2영상을 촬영하는 단계와, 상기 촬영된 제2영상으로부터 특징 정보를 추출하는 단계와, 상기 추출된 특징 정보에 대응하는 데이터를 저장하고 있는 메모리에 액세스 하는 단계와, 그리고 상기 메모리에 저장된 특정 사용자를 식별하는 정보를 추출하는 단계를 포함한다.
Int. CL G06K 9/00 (2006.01.01) G06K 9/00 (2006.01.01) G06K 9/00 (2006.01.01)
CPC G06K 9/00221(2013.01) G06K 9/00221(2013.01) G06K 9/00221(2013.01)
출원번호/일자 1020100111952 (2010.11.11)
출원인 엘지전자 주식회사
등록번호/일자
공개번호/일자 10-2012-0050614 (2012.05.21) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 거절
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2015.11.11)
심사청구항수 16

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 엘지전자 주식회사 대한민국 서울특별시 영등포구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 박성수 대한민국 서울특별시 서초구
2 임경영 대한민국 서울특별시 서초구
3 강민구 대한민국 서울특별시 서초구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 김용인 대한민국 서울특별시 송파구 올림픽로 ** (잠실현대빌딩 *층)(특허법인(유한)케이비케이)
2 방해철 대한민국 서울특별시 송파구 올림픽로 ** (잠실현대빌딩 *층)(특허법인(유한)케이비케이)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2010.11.11 수리 (Accepted) 1-1-2010-0736007-64
2 [대리인선임]대리인(대표자)에 관한 신고서
[Appointment of Agent] Report on Agent (Representative)
2014.12.20 수리 (Accepted) 1-1-2014-1239775-03
3 출원인정보변경(경정)신고서
Notification of change of applicant's information
2015.05.22 수리 (Accepted) 4-1-2015-5068349-97
4 [심사청구]심사청구(우선심사신청)서
[Request for Examination] Request for Examination (Request for Preferential Examination)
2015.11.11 수리 (Accepted) 1-1-2015-1097399-86
5 선행기술조사의뢰서
Request for Prior Art Search
2016.03.11 수리 (Accepted) 9-1-9999-9999999-89
6 선행기술조사보고서
Report of Prior Art Search
2016.05.10 수리 (Accepted) 9-1-2016-0021963-88
7 의견제출통지서
Notification of reason for refusal
2018.08.30 발송처리완료 (Completion of Transmission) 9-5-2018-0590519-82
8 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2018.10.30 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2018-1070788-71
9 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2018.10.30 수리 (Accepted) 1-1-2018-1070789-16
10 거절결정서
Decision to Refuse a Patent
2019.02.15 발송처리완료 (Completion of Transmission) 9-5-2019-0113628-85
11 [명세서등 보정]보정서(재심사)
Amendment to Description, etc(Reexamination)
2019.03.19 보정각하 (Rejection of amendment) 1-1-2019-0281089-79
12 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2019.03.19 수리 (Accepted) 1-1-2019-0281088-23
13 보정각하결정서
Decision of Rejection for Amendment
2019.04.17 발송처리완료 (Completion of Transmission) 9-5-2019-0277025-65
14 거절결정서
Decision to Refuse a Patent
2019.04.17 발송처리완료 (Completion of Transmission) 9-5-2019-0277026-11
15 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.05.28 수리 (Accepted) 4-1-2020-5118228-40
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
복수개의 이종 이미지 센서를 이용하는 멀티미디어 디바이스의 제어 방법에 있어서,제1이미지 센서를 이용하여, 상기 멀티미디어 디바이스의 주변에 위치한 제1영상을 촬영하는 단계;상기 촬영된 제1영상으로부터 depth data 를 추출하는 단계;상기 추출된 depth data 를 이용하여 적어도 하나 이상의 사용자의 얼굴을 디텍트하는 단계;제2이미지 센서를 이용하여, 상기 디텍트된 사용자의 얼굴에 대한 제2영상을 촬영하는 단계;상기 촬영된 제2영상으로부터 특징 정보를 추출하는 단계;상기 추출된 특징 정보에 대응하는 데이터를 저장하고 있는 메모리에 액세스 하는 단계; 그리고상기 메모리에 저장된 특정 사용자를 식별하는 정보를 추출하는 단계를 포함하는 복수개의 이종 이미지 센서를 이용하는 멀티미디어 디바이스의 제어 방법
2 2
제1항에 있어서,상기 디텍트하는 단계는,상기 사용자의 얼굴에 대한 위치 정보인 x, y, z 값들을 계산하는 단계 -상기 x는 상기 촬영된 제1영상에서 상기 얼굴의 가로축에 대한 위치, 상기 y는 상기 촬영된 제1영상에서 상기 얼굴의 세로축에 대한 위치, 그리고 상기 z는 상기 사용자의 얼굴과 제1이미지 센서 사이의 거리를 의미-를 더 포함하는 복수개의 이종 이미지 센서를 이용하는 멀티미디어 디바이스의 제어 방법
3 3
제2항에 있어서,상기 제2영상을 촬영하는 단계는,상기 계산된 x, y, z 값들에 기초하여, 상기 사용자의 얼굴에 대한 영역을 줌인하여 촬영하는 단계를 더 포함하는 복수개의 이종 이미지 센서를 이용하는 멀티미디어 디바이스의 제어 방법
4 4
제1항에 있어서,상기 제어 방법은,상기 제1이미지 센서의 위치와 상기 제2이미지 센서의 위치 사이의 물리적 거리에 기초하여, 상기 촬영된 제2영상을 보상하는 단계를 더 포함하는 복수개의 이종 이미지 센서를 이용하는 멀티미디어 디바이스의 제어 방법
5 5
제1항에 있어서,상기 메모리에 저장된 특정 사용자를 식별하는 정보를 추출하는 상기 단계는,상기 특정 사용자를 식별하는 정보가 존재하는 경우, 상기 특정 사용자를 위하여 기설정된 서비스를 제공하는 단계를 더 포함하는 복수개의 이종 이미지 센서를 이용하는 멀티미디어 디바이스의 제어 방법
6 6
제1항에 있어서,상기 메모리에 저장된 특정 사용자를 식별하는 정보를 추출하는 상기 단계는,상기 특정 사용자를 식별하는 정보가 존재하지 않는 경우, 상기 인식된 사용자를 상기 메모리에 저장하기 위한 가이드 메시지를 디스플레이 하는 단계를 더 포함하는 복수개의 이종 이미지 센서를 이용하는 멀티미디어 디바이스의 제어 방법
7 7
제1항에 있어서,상기 제1이미지 센서는 depth camera에 대응하고, 상기 제2이미지 센서는 RGB camera에 대응하는복수개의 이종 이미지 센서를 이용하는 멀티미디어 디바이스의 제어 방법
8 8
제1항에 있어서,상기 제1이미지 센서 및 상기 제2이미지 센서는 상기 멀티미디어 디바이스에 임베디드 되거나 또는 상기 멀티미디어 디바이스의 외부에 위치한 모듈로 설계되어 있는복수개의 이종 이미지 센서를 이용하는 멀티미디어 디바이스의 제어 방법
9 9
적어도 하나 이상의 사용자를 인식하는 복수개의 이종 이미지 센서에 있어서,멀티미디어 디바이스 주변에 위치한 적어도 하나 이상의 사용자에게 빛을 발산하는 이미터(emitter);상기 발산된 빛을 이용하여 제1영상을 촬영하고, 상기 촬영된 제1영상으로부터 depth data 를 추출하고, 상기 추출된 depth data 를 이용하여 상기 적어도 하나 이상의 사용자의 얼굴을 디텍트하는 제1이미지 센서; 상기 디텍트된 사용자의 얼굴에 대한 제2영상을 촬영하고, 상기 촬영된 제2영상으로부터 특징 정보를 추출하는 제2이미지 센서; 그리고상기 추출된 특징 정보를 상기 멀티미디어 디바이스에 전송하는 인터페이스를 포함하는 적어도 하나 이상의 사용자를 인식하는 복수개의 이종 이미지 센서
10 10
제9항에 있어서,상기 제1이미지 센서는,상기 사용자의 얼굴에 대한 위치 정보인 x, y, z 값들을 계산하며, 상기 x는 상기 촬영된 제1영상의 가로축을 기준으로에서 상기 사용자의 얼굴의 가로축에 대한 위치, 상기 y는 상기 촬영된 제1영상의 세로축에 대한 위치, 그리고 상기 z는 상기 사용자의 얼굴과 제1이미지 센서 사이의 거리를 의미하는 적어도 하나 이상의 사용자를 인식하는 복수개의 이종 이미지 센서
11 11
제10항에 있어서,상기 제2이미지 센서는,상기 계산된 x, y, z 값들에 기초하여, 상기 사용자의 얼굴에 대한 영역을 줌인하여 촬영하는 적어도 하나 이상의 사용자를 인식하는 복수개의 이종 이미지 센서
12 12
제9항에 있어서,상기 제1이미지 센서의 위치와 상기 제2이미지 센서의 위치 사이의 물리적 거리에 기초하여, 상기 촬영된 제2영상을 보상하는 보상 모듈을 더 포함하는 적어도 하나 이상의 사용자를 인식하는 복수개의 이종 이미지 센서
13 13
제9항에 있어서,상기 이미터는 IR(Infra Red) 이미터에 대응하는적어도 하나 이상의 사용자를 인식하는 복수개의 이종 이미지 센서
14 14
제9항에 있어서,상기 제1이미지 센서는 depth camera에 대응하고, 상기 제2이미지 센서는 RGB camera에 대응하는적어도 하나 이상의 사용자를 인식하는 복수개의 이종 이미지 센서
15 15
제14항에 있어서,상기 이미터는 코드화된 패턴 영상을 상기 사용자에게 연속적으로 투영하고,상기 depth camera 는, 상기 사용자에 의해 투영된 영상의 패턴이 왜곡된 정도를 이용하여, 상기 사용자의 위치를 추정하는적어도 하나 이상의 사용자를 인식하는 복수개의 이종 이미지 센서
16 16
제14항에 있어서,상기 depth camera 는,상기 이미터에 의해 발산된 light 와 상기 사용자에 의해 투영된(reflected) light 간의 시간 차이를 이용하여, 상기 사용자의 위치를 추정하는적어도 하나 이상의 사용자를 인식하는 복수개의 이종 이미지 센서
지정국 정보가 없습니다
순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - 패밀리정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 CN102467661 CN 중국 FAMILY
2 EP02453386 EP 유럽특허청(EPO) FAMILY
3 EP02453386 EP 유럽특허청(EPO) FAMILY
4 KR101629324 KR 대한민국 FAMILY
5 US09025023 US 미국 FAMILY
6 US20120120271 US 미국 FAMILY

DOCDB 패밀리 정보

순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - DOCDB 패밀리 정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 CN102467661 CN 중국 DOCDBFAMILY
2 CN102467661 CN 중국 DOCDBFAMILY
국가 R&D 정보가 없습니다.