맞춤기술찾기

홈으로 가기
맞춤기술찾기
이전대상기술
프린트하기

이전대상기술

시선 추적 장치 및 방법

  • 기술번호 : KST2015161655
  • 담당센터 : 대구기술혁신센터
  • 전화번호 : 053-550-1450
상담신청 PDF 받기
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 시선 추적 장치 및 방법에 관한 것으로서, 본 발명의 실시예에 따른 시선 추적 장치는 사용자가 주시하는 방향의 대상을 촬영하여 영상을 획득하는 제1 촬상부, 대상을 주시하는 사용자의 양안에 대한 양안 영상을 획득하는 제2 촬상부, 및 제2 촬상부에서 제공되는 양안 영상을 이용하여 양안의 동공 영역을 검출하고, 검출한 동공 영역과 제1 촬상부에서 제공되는 대상의 영상을 매핑시켜 사용자가 응시하는 대상의 관심영역을 추출하는 영상처리부를 포함하는 것을 특징으로 한다.
Int. CL H04N 13/02 (2006.01) H04N 5/262 (2006.01)
CPC G06K 9/00604(2013.01) G06K 9/00604(2013.01)
출원번호/일자 1020120030209 (2012.03.23)
출원인 경북대학교 산학협력단
등록번호/일자 10-1471488-0000 (2014.12.04)
공개번호/일자 10-2013-0107981 (2013.10.02) 문서열기
공고번호/일자 (20141210) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2012.03.23)
심사청구항수 10

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 경북대학교 산학협력단 대한민국 대구광역시 북구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 김민영 대한민국 대구 수성구
2 양승호 대한민국 대구 수성구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 이현수 대한민국 서울특별시 마포구 백범로 ***(신공덕동) 메트로디오빌빌딩 ****호(이현수상표특허법률사무소)
2 정홍식 대한민국 서울시 서초구 강남대로 *** 신덕빌딩 *층(나우특허법률사무소)
3 김태헌 대한민국 서울시 서초구 강남대로 *** 신덕빌딩 *층(나우특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 경북대학교 산학협력단 대한민국 대구광역시 북구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application		 2012.03.23 수리 (Accepted) 1-1-2012-0237306-64
2 선행기술조사의뢰서
Request for Prior Art Search		 2013.03.13 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search		 2013.04.09 수리 (Accepted) 9-1-2013-0028913-10
4 의견제출통지서
Notification of reason for refusal		 2013.05.28 발송처리완료 (Completion of Transmission) 9-5-2013-0368023-68
5 [지정기간연장]기간연장(단축, 경과구제)신청서
[Designated Period Extension] Application of Period Extension(Reduction, Progress relief)		 2013.07.29 수리 (Accepted) 1-1-2013-0686969-57
6 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment		 2013.08.28 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2013-0787476-41
7 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)		 2013.08.28 수리 (Accepted) 1-1-2013-0787475-06
8 의견제출통지서
Notification of reason for refusal		 2013.12.26 발송처리완료 (Completion of Transmission) 9-5-2013-0896015-98
9 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)		 2014.02.26 수리 (Accepted) 1-1-2014-0190823-91
10 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment		 2014.02.26 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2014-0190829-64
11 의견제출통지서
Notification of reason for refusal		 2014.07.23 발송처리완료 (Completion of Transmission) 9-5-2014-0502121-80
12 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)		 2014.09.18 수리 (Accepted) 1-1-2014-0884104-15
13 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment		 2014.09.18 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2014-0884105-61
14 등록결정서
Decision to grant		 2014.11.28 발송처리완료 (Completion of Transmission) 9-5-2014-0821324-90
15 출원인정보변경(경정)신고서
Notification of change of applicant's information		 2018.03.26 수리 (Accepted) 4-1-2018-5051994-32
16 출원인정보변경(경정)신고서
Notification of change of applicant's information		 2020.06.23 수리 (Accepted) 4-1-2020-5136893-04
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
사용자가 주시하는 방향의 대상을 촬영하여 영상을 획득하는 제1 촬상부;복수의 카메라를 포함하고, 상기 대상을 주시하는 상기 사용자의 양안을 각각 촬영하여 양안 영상을 모두 획득하는 제2 촬상부; 및상기 획득한 양안 영상으로부터 상기 사용자의 양안의 동공 영역을 각각 검출하고, 상기 검출된 동공 영역의 중심이 되는 동공 중심 좌표를 추출하고,상기 사용자가 주시하는 방향의 제1 위치에 복수의 보정점이 표시된 시선 보정판을 위치시켜, 상기 제1 촬상부가 상기 시선 보정판을 촬영한 영상으로부터 상기 시선 보정판의 복수의 보정점에 대응하는 전방 영상의 좌표를 추출하고, 상기 제2 촬상부로부터 상기 시선 보정판의 복수의 보정점을 차례로 응시한 양안 영상을 획득하여 상기 시선 보정판의 복수의 보정점에 대응하는 동공 중심 좌표를 추출하고, 상기 복수의 보정점 각각에 대응하는 상기 추출된 전방 영상의 좌표와 상기 추출된 동공 중심 좌표를 매핑시켜, 상기 시선 보정판이 위치한 제1 위치의 평면공간상의 좌표와 상기 양안의 동공 중심 좌표를 선형으로 매핑시킨 제1 매핑점을 구하고,상기 사용자가 주시하는 방향의 제2 위치에 상기 시선 보정판을 위치시켜 상기 시선 보정판이 위치한 상기 제2 위치의 평면공간상의 좌표와 상기 양안의 동공 중심 좌표를 선형으로 매핑시킨 제2 매핑점을 구하고,상기 대상을 주시하는 상기 사용자의 양안 각각의 동공 중심 좌표로부터 상기 제1 매핑점에서의 상기 대상을 주시하는 상기 양안의 두 응시점과 상기 제2 매핑점에서의 상기 대상을 주시하는 상기 양안의 두 응시점을 구하고,상기 제1 매핑점에서의 두 응시점의 거리와 상기 제2 매핑점에서의 두 응시점의 거리 중 더 짧은 응시점의 거리를 갖는 매핑점에서의 두 응시점을 선택하고,상기 선택된 매핑점에서의 두 응시점의 중점을 상기 사용자가 상기 대상을 응시하고 있는 관심영역으로 산출하는 영상처리부;를 포함하는 시선 추적 장치
2 2
삭제
3 3
제1항에 있어서,상기 제2 촬상부는,상기 사용자의 양안 영상을 형성하는 반사부;를 더 포함하고,상기 복수의 카메라는,상기 반사부에서 반사된 적외선의 상기 양안 영상을 촬영하는 적외선 카메라인 것을 특징으로 하는 시선 추적 장치
4 4
제3항에 있어서,상기 반사부는 가시광선을 투과시키고 적외선을 반사시키는 핫미러(Hot Mirror)인 것을 특징으로 하는 시선 추적 장치
5 5
제3항에 있어서,상기 제2 촬상부는 상기 양안 영상의 획득시 적외선 조명을 생성하는 조명부;를 더 포함하는 것을 특징으로 하는 시선 추적 장치
6 6
제1항에 있어서,상기 영상처리부는,상기 양안 영상을 이용하여 상기 양안의 동공 영역을 검출하는 영역 추출부;상기 대상의 영상에 상기 양안의 동공 영역을 매핑하는 매핑부; 및상기 매핑의 결과를 이용하여 상기 관심영역을 추출하는 관심영역 추출부;를 포함하는 것을 특징으로 하는 시선 추적 장치
7 7
제1항에 있어서,상기 영상처리부는 사람마다 동공의 특징이 다른 것을 감안하여 상기 대상에 대한 영상의 좌표와 상기 사용자의 동공 중심 좌표를 보정하는 보정부;를 더 포함하는 것을 특징으로 하는 시선 추적 장치
8 8
사용자가 주시하는 방향의 대상을 촬영하여 영상을 획득하는 단계;상기 대상을 주시하는 상기 사용자의 양안을 각각 촬영하는 복수의 카메라를 이용하여 양안 영상을 모두 획득하는 단계;상기 획득한 양안 영상으로부터 상기 사용자의 양안의 동공 영역을 각각 검출하고, 상기 검출된 동공 영역의 중심이 되는 동공 중심 좌표를 추출하는 단계;상기 사용자가 주시하는 방향의 제1 위치에 복수의 보정점이 표시된 시선 보정판을 위치시켜, 상기 시선 보정판을 촬영한 영상으로부터 상기 시선 보정판의 복수의 보정점에 대응하는 전방 영상의 좌표를 추출하고, 상기 시선 보정판의 복수의 보정점을 차례로 응시한 양안 영상을 획득하여 상기 시선 보정판의 복수의 보정점에 대응하는 동공 중심 좌표를 추출하고, 상기 복수의 보정점 각각에 대응하는 상기 추출된 전방 영상의 좌표와 상기 추출된 동공 중심 좌표를 매핑시켜, 상기 시선 보정판이 위치한 상기 제1 위치의 평면공간상의 좌표와 상기 양안의 동공 중심 좌표를 선형으로 매핑시킨 제1 매핑점을 구하는 단계;상기 시선 보정판을 제2 위치에 위치시켜 상기 시선 보정판이 위치한 상기 제2 위치의 평면공간상의 좌표와 상기 양안의 동공 중심 좌표를 선형으로 매핑시킨 제2 매핑점을 구하는 단계;상기 대상을 주시하는 상기 사용자의 양안 각각의 동공 중심 좌표로부터 상기 제1 매핑점에서의 상기 대상을 주시하는 상기 양안의 두 응시점과 상기 제2 매핑점에서의 상기 대상을 주시하는 상기 양안의 두 응시점을 구하는 단계;상기 제1 매핑점에서의 두 응시점의 거리와 상기 제2 매핑점에서의 두 응시점의 거리 중 더 짧은 응시점의 거리를 갖는 매핑점에서의 두 응시점을 선택하는 단계; 및상기 선택된 매핑점에서의 두 응시점의 중점을 상기 사용자가 상기 대상을 응시하고 있는 관심영역으로 산출하는 단계;를 포함하는 시선 추적 방법
9 9
제8항에 있어서,상기 양안 영상을 획득하는 단계는,상기 사용자의 양안 영상을 반사부에 형성하는 단계; 및상기 반사부에서 반사된 상기 양안 영상을 촬영하는 단계;를 포함하는 것을 특징으로 하는 시선 추적 방법
10 10
제8항에 있어서,상기 시선 추적 방법은, 상기 양안 영상의 획득시 조명을 생성하는 단계;를 더 포함하는 것을 특징으로 하는 시선 추적 방법
11 11
제8항에 있어서,상기 시선 추적 방법은, 사람마다 동공의 특징이 다른 것을 감안하여 상기 대상에 대한 영상의 좌표와 상기 사용자의 동공 중심 좌표를 보정하는 단계;를 더 포함하는 것을 특징으로 하는 시선 추적 방법
12 12
삭제
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 교육과학기술부 경북대학교 산학협력단 신기술 융합형 성장 동력 사업 다중감각추론 일반 모델 및 인지 향상 기술 개발