맞춤기술찾기

이전대상기술

시력 보조 기구 착용 여부 및 사용자 움직임에 무관한 시선 정보 획득 방법

  • 기술번호 : KST2015092306
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 시력 보조 기구를 착용한 사용자를 위한 시선 추적 장치가 제공된다. 보다 구체적으로, 시선 추적 장치는 제1 적외선 조명 및 제2 적외선 조명으로부터 적외선을 사용자에 대하여 각각 조사하는 조명부, 제1 각막 반사광, 제2 각막 반사광, 제1 렌즈 반사광, 및 제2 렌즈 반사광을 포함하는 사용자의 눈 영상을 획득하는 영상 획득부 및 획득된 눈 영상 내에서, 상기 제1 각막 반사광 및 상기 제2 렌즈 반사광 사이에 간섭이 발생하는 경우, 상기 제2 렌즈 반사광을 제거하고, 상기 제1 각막 반사광의 좌표 및 사용자 캘리브레이션 정보를 이용하여 상기 사용자의 시선 위치를 계산하는 프로세서를 포함할 수 있다.
Int. CL G06T 7/20 (2017.01.01) G06T 5/00 (2019.01.01) H04N 5/217 (2016.01.01)
CPC
출원번호/일자 1020130153262 (2013.12.10)
출원인 한국전자통신연구원, 한양대학교 산학협력단
등록번호/일자
공개번호/일자 10-2015-0067608 (2015.06.18) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 공개
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2018.12.10)
심사청구항수 13

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국전자통신연구원 대한민국 대전광역시 유성구
2 한양대학교 산학협력단 대한민국 서울특별시 성동구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 이희경 대한민국 대전광역시 서구
2 김회율 대한민국 서울특별시 성동구
3 조훈 대한민국 서울특별시 성동구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인 무한 대한민국 서울특별시 강남구 언주로 ***, *층(역삼동,화물재단빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2013.12.10 수리 (Accepted) 1-1-2013-1130313-11
2 출원인정보변경(경정)신고서
Notification of change of applicant's information
2014.06.05 수리 (Accepted) 4-1-2014-5068294-39
3 출원인정보변경(경정)신고서
Notification of change of applicant's information
2015.02.02 수리 (Accepted) 4-1-2015-0006137-44
4 출원인정보변경(경정)신고서
Notification of change of applicant's information
2015.02.16 수리 (Accepted) 4-1-2015-5022074-70
5 [심사청구]심사청구(우선심사신청)서
[Request for Examination] Request for Examination (Request for Preferential Examination)
2018.12.10 수리 (Accepted) 1-1-2018-1234944-00
6 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.08.05 수리 (Accepted) 4-1-2019-5155816-75
7 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.08.06 수리 (Accepted) 4-1-2019-5156285-09
8 선행기술조사의뢰서
Request for Prior Art Search
2019.11.11 수리 (Accepted) 9-1-9999-9999999-89
9 선행기술조사보고서
Report of Prior Art Search
2019.12.10 수리 (Accepted) 9-1-2019-0057468-80
10 의견제출통지서
Notification of reason for refusal
2020.01.21 발송처리완료 (Completion of Transmission) 9-5-2020-0053238-10
11 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2020.03.23 수리 (Accepted) 1-1-2020-0303580-16
12 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2020.03.23 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2020-0303579-69
13 거절결정서
Decision to Refuse a Patent
2020.04.14 발송처리완료 (Completion of Transmission) 9-5-2020-0266880-31
14 [명세서등 보정]보정서(재심사)
Amendment to Description, etc(Reexamination)
2020.05.06 보정각하 (Rejection of amendment) 1-1-2020-0455993-23
15 [거절이유 등 통지에 따른 의견]의견서·답변서·소명서
2020.05.06 수리 (Accepted) 1-1-2020-0455994-79
16 거절결정서
Decision to Refuse a Patent
2020.05.15 발송처리완료 (Completion of Transmission) 9-5-2020-0336794-88
17 보정각하결정서
Decision of Rejection for Amendment
2020.05.15 발송처리완료 (Completion of Transmission) 9-5-2020-0336793-32
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
제1 적외선 조명 및 제2 적외선 조명을 포함하고, 상기 제1 적외선 조명 및 상기 제2 적외선 조명으로부터 적외선을 사용자에 대하여 각각 조사하는 조명부;상기 사용자의 눈 영상을 획득하고, 상기 눈 영상은 상기 제1 적외선 조명으로부터 조사된 적외선이 상기 사용자의 동공에 반사되어 생성된 제1 각막 반사광, 상기 제2 적외선 조명으로부터 조사된 적외선이 상기 사용자의 동공에 반사되어 생성된 제2 각막 반사광, 상기 제1 적외선 조명으로부터 조사된 적외선이 상기 사용자의 시력 보조 기구에 반사되어 생성된 제1 렌즈 반사광, 및 상기 제2 적외선 조명으로부터 조사된 적외선이 상기 사용자의 시력 보조 기구에 반사되어 생성된 제2 렌즈 반사광을 포함하는 영상 획득부; 및상기 획득된 눈 영상 내에서, 상기 제1 각막 반사광 또는 제2 각막 반사광과 상기 제2 렌즈 반사광 사이에 간섭이 발생하는 경우, 상기 제2 렌즈 반사광을 제거하고, 상기 제1 각막 반사광의 좌표, 사용자 캘리브레이션 정보 및 상기 사용자의 움직임 정보를 이용하여 상기 사용자의 시선 위치를 계산하는 프로세서를 포함하는 시선 추적 장치
2 2
제1항에 있어서,상기 사용자 캘리브레이션 정보는,상기 사용자가 사용자 캘리브레이션을 수행한 위치인, 사용자 캘리브레이션 위치에서 측정된 제1 캘리브레이션 각막 반사광의 좌표로부터, 상기 제1 캘리브레이션 각막 반사광과 제2 캘리브레이션 각막 반사광 사이의 캘리브레이션 중심 좌표로의 벡터 관계를 포함하는시선 추적 장치
3 3
제2항에 있어서,상기 시선 추적 장치는,상기 사용자가 상기 사용자 캘리브레이션 위치에 있을 때, 상기 제1 캘리브레이션 각막 반사광의 좌표, 제2 캘리브레이션 각막 반사광의 좌표 및 상기 제1 캘리브레이션 각막 반사광과 상기 제2 캘리브레이션 각막 반사광의 캘리브레이션 중심 좌표를 미리 측정하여 저장하는 저장부를 더 포함하는 시선 추적 장치
4 4
제2항에 있어서,상기 영상 획득부는,복수 개의 광각 카메라를 포함하고,상기 프로세서는,상기 복수 개의 광각 카메라 간의 스테레오 켈리브레이션을 수행하여 상기 광각 카메라를 통해 획득한 영상에서 눈 영상의 위치 좌표를 획득하는시선 추적 장치
5 5
제4항에 있어서,상기 영상 획득부는,협각 카메라와 상기 협각 카메라를 제어하는 패닝(Panning), 틸팅(Tilting) 및 포커싱(Focusing) 모터를 더 포함하고,상기 프로세서는,PTZ(Pan-Tilt-Zoom) 캘리브레이션을 수행하여 상기 협각 카메라가 상기 획득한 눈 영상에 대향하도록 상기 패닝(Panning), 틸팅(Tilting) 및 포커싱(Focusing) 모터를 제어하기 위해 필요한 정보를 추출하는시선 추적 장치
6 6
제5항에 있어서,상기 프로세서는,상기 복수 개의 광각 카메라, 상기 협각 카메라, 영상 재생 장치 및 상기 사용자 간의 캘리브레이션을 수행하여 상기 사용자의 위치 정보를 계산하는시선 추적 장치
7 7
제2항에 있어서,상기 프로세서는,수학식에 따라 상기 사용자의 시선 위치를 계산하고,은 현재 위치에서 카메라의 이미지 평면 상에 맺히는, 상기 제1 각막 반사광의 좌표와 예측되는 중심 좌표 사이의 거리이고, 은 상기 협각 카메라의 광학 중심으로부터 사용자 캘리브레이션 위치에 있는 사용자의 눈의 중심 위치 사이의 거리이고, 은 적외선 조명으로부터 현재 위치에 있는 사용자의 눈을 향한 협각 카메라의 광축까지의 거리이고, 은 적외선 조명으로부터 사용자 캘리브레이션 위치에 있는 사용자의 눈의 중심 위치 사이의 거리이고, 은 상기 협각 카메라의 광학 중심으로부터 현재 위치에 있는 사용자의 눈의 중심 위치 사이의 거리이고, 은 적외선 조명으로부터 사용자 캘리브레이션 위치에 있는 사용자의 눈을 향한 협각 카메라의 광축까지의 거리이고, 은 적외선 조명으로부터 현재 위치에 있는 사용자의 눈의 중심 위치 사이의 거리이고, 은 카메라의 이미지 평면 상에 맺히는, 사용자 캘리브레이션 위치에 있는 사용자의 상기 제1 캘리브레이션 각막 반사광의 좌표와 제1 캘리브레이션 각막 반사광 및 제2 캘리브레이션 각막 반사광의 중심 좌표 사이의 거리인 시선 추적 장치
8 8
제1 적외선 조명 및 제2 적외선 조명으로부터 사용자에 대하여 적외선을 각각 조사하는 단계;상기 조사된 적외선으로부터 상기 제1 적외선 조명으로부터 조사된 적외선이 상기 사용자의 동공에 반사되어 생성된 제1 각막 반사광, 상기 제2 적외선 조명으로부터 조사된 적외선이 상기 사용자의 동공에 반사되어 생성된 제2 각막 반사광, 상기 제1 적외선 조명으로부터 조사된 적외선이 상기 사용자의 시력 보조 기구에 반사되어 생성된 제1 렌즈 반사광, 및 상기 제2 적외선 조명으로부터 조사된 적외선이 상기 사용자의 시력 보조 기구에 반사되어 생성된 제2 렌즈 반사광을 포함하는, 상기 사용자의 눈 영상을 획득하는 단계;상기 획득된 눈 영상 내에서, 상기 제1 각막 반사광 또는 제2 각막 반사광과 상기 제2 렌즈 반사광 사이에 간섭이 발생하는 경우, 상기 제2 렌즈 반사광을 제거하는 단계; 및상기 제1 각막 반사광의 좌표, 사용자 캘리브레이션 정보 및 상기 사용자의 움직임 정보를 이용하여 상기 사용자의 시선 위치를 계산하는 단계를 포함하는 시선 추적 방법
9 9
제8항에 있어서,상기 사용자 캘리브레이션 정보는,상기 사용자가 사용자 캘리브레이션을 수행한 위치인, 사용자 캘리브레이션 위치에서 측정된 제1 캘리브레이션 각막 반사광의 좌표로부터, 상기 제1 캘리브레이션 각막 반사광과 제2 캘리브레이션 각막 반사광 사이의 캘리브레이션 중심 좌표로의 벡터 관계를 포함하는시선 추적 방법
10 10
제9항에 있어서,상기 시선 추적 방법은,상기 사용자가 상기 사용자 캘리브레이션 위치에 있을 때, 상기 제1 적외선 조명에 의해 유발된 제1 캘리브레이션 각막 반사광의 좌표, 상기 제2 적외선 조명에 의해 유발된 제2 캘리브레이션 각막 반사광의 좌표 및 상기 제1 캘리브레이션 각막 반사광과 상기 제2 각막 캘리브레이션 반사광의 중심 좌표를 미리 측정하여 저장하는 단계를 더 포함하는시선 추적 방법
11 11
제9항에 있어서,상기 시선 추적 방법은,복수 개의 광각 카메라 간의 스테레오 켈리브레이션을 수행하여 상기 복수 개의 광각 카메라를 통해 획득한 영상에서 눈 영상의 위치 좌표를 획득하는 단계;PTZ(Pan-Tilt-Zoom) 캘리브레이션을 수행하여 협각 카메라의 패닝(Panning), 틸팅(Tilting) 및 포커싱(Focusing) 정도를 제어하기 위해 필요한 정보를 추출하는 단계; 및상기 복수 개의 광각 카메라, 상기 협각 카메라 및 영상 재생 장치의 상호 간의 캘리브레이션을 수행하여 상기 사용자의 위치 정보를 계산하는 단계를 포함하는 시선 추적 방법
12 12
제9항에 있어서,상기 사용자의 시선 위치를 계산하는 단계는,사용자의 사용자 캘리브레이션 위치에서 현재 위치로의 움직임 정보를 획득하는 단계상기 벡터 관계에 상기 획득한 움직임 정보를 반영하여 계산하는 단계;를 포함하는 시선 추적 방법
13 13
제12항에 있어서,상기 움직임 정보를 획득하는 단계는,상기 사용자 캘리브레이션 위치에서 복수 개의 광각 카메라, 협각 카메라, 영상 재생 장치 및 사용자 간의 캘리브레이션을 수행하여 상기 사용자의 사용자 캘리브레이션 위치 정보를 계산하는 단계,상기 현재 위치에서 복수 개의 광각 카메라, 협각 카메라, 영상 재생 장치 및 사용자 간의 캘리브레이션을 수행하여 상기 사용자의 현재 위치 정보를 계산하는 단계; 및상기 사용자 캘리브레이션 위치 정보와 상기 현재 위치 정보로부터 상기 움직임 정보를 획득하는 단계;를 포함하는 시선 추적 방법
지정국 정보가 없습니다
순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - 패밀리정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 US09857870 US 미국 FAMILY
2 US20150160725 US 미국 FAMILY

DOCDB 패밀리 정보

순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - DOCDB 패밀리 정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 US2015160725 US 미국 DOCDBFAMILY
2 US9857870 US 미국 DOCDBFAMILY
국가 R&D 정보가 없습니다.