맞춤기술찾기

홈으로 가기
맞춤기술찾기
이전대상기술
프린트하기

이전대상기술

시선 추적 시스템 및 그 방법

  • 기술번호 : KST2014042971
  • 담당센터 :
  • 전화번호 :
상담신청 PDF 받기
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 인간의 동공의 중심 위치 정보와 인간의 3차원적 눈 모델이 반영된 퍼킨제 이미지를 이용하여 3차원적으로 인간의 시선을 추적하는 시스템에 관한 것이다. 아울러 본 발명은 3차원적 시선 추적을 하기 위한 전제인 양 눈의 영상 획득을 경량 및 저가의 착용형 장치를 이용하여 실현하고, 3차원의 의미를 보다 더 제고시키기 위해 인간의 움직임을 제약할 필요가 없는 3차원적 시선 추적 시스템에 관한 것이다.본 명세서에서 개시하는 시선 추적 시스템은 눈 영상을 획득하는 눈 영상 획득부: 상기 획득된 눈 영상으로부터 동공(pupil)의 무게 중심과 상기 동공의 크기를 도출하는 도출부; 상기 도출된 무게 중심으로부터의 일정 영역에서 제1 퍼킨제 이미지(Purkinje image)와 제4 퍼킨제 이미지를 검출하는 퍼킨제 이미지 검출부; 및 상기 동공의 크기와 상기 제1, 제4 퍼킨제 이미지에 근거하여 3차원 공간에서의 시선의 위치를 산출하는 시선 위치 산출부를 포함하여 본 발명의 과제를 해결한다.
Int. CL G06T 7/00 (2006.01)
CPC G06T 7/70(2013.01) G06T 7/70(2013.01) G06T 7/70(2013.01) G06T 7/70(2013.01) G06T 7/70(2013.01)
출원번호/일자 1020100105306 (2010.10.27)
출원인 동국대학교 산학협력단
등록번호/일자 10-1200096-0000 (2012.11.05)
공개번호/일자 10-2012-0043980 (2012.05.07) 문서열기
공고번호/일자 (20121112) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2010.10.27)
심사청구항수 11

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 동국대학교 산학협력단 대한민국 서울특별시 중구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 박강령 대한민국 서울특별시 송파구
2 이지우 대한민국 전라남도 목포시 산
3 조철우 대한민국 제주특별자치도 제주시 정존
4 이의철 대한민국 서울특별시 강북구
5 신광용 대한민국 서울특별시 동작구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인충현 대한민국 서울특별시 서초구 동산로 **, *층(양재동, 베델회관)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 어질인소프트 주식회사 대전광역시 서구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application		 2010.10.27 수리 (Accepted) 1-1-2010-0697343-30
2 [출원서등 보정]보정서
[Amendment to Patent Application, etc.] Amendment		 2010.10.28 수리 (Accepted) 1-1-2010-0701633-16
3 출원인정보변경(경정)신고서
Notification of change of applicant's information		 2010.11.05 수리 (Accepted) 4-1-2010-5206478-99
4 의견제출통지서
Notification of reason for refusal		 2011.10.31 발송처리완료 (Completion of Transmission) 9-5-2011-0635706-50
5 출원인정보변경(경정)신고서
Notification of change of applicant's information		 2011.12.06 수리 (Accepted) 4-1-2011-5243351-46
6 [지정기간연장]기간연장(단축, 경과구제)신청서
[Designated Period Extension] Application of Period Extension(Reduction, Progress relief)		 2011.12.28 수리 (Accepted) 1-1-2011-1043225-14
7 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)		 2012.01.30 수리 (Accepted) 1-1-2012-0075165-67
8 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment		 2012.01.30 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2012-0075166-13
9 최후의견제출통지서
Notification of reason for final refusal		 2012.05.30 발송처리완료 (Completion of Transmission) 9-5-2012-0313257-22
10 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)		 2012.06.15 수리 (Accepted) 1-1-2012-0477993-62
11 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment		 2012.06.15 보정승인 (Acceptance of amendment) 1-1-2012-0477994-18
12 등록결정서
Decision to grant		 2012.10.31 발송처리완료 (Completion of Transmission) 9-5-2012-0656466-68
13 출원인정보변경(경정)신고서
Notification of change of applicant's information		 2014.01.10 수리 (Accepted) 4-1-2014-0002002-62
14 출원인정보변경(경정)신고서
Notification of change of applicant's information		 2019.08.16 수리 (Accepted) 4-1-2019-5163486-33
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
눈 영상을 획득하는 눈 영상 획득부:상기 획득된 눈 영상으로부터 동공(pupil)의 무게 중심과 상기 동공의 크기를 도출하는 도출부;상기 도출된 무게 중심으로부터의 일정 영역에서 제1 퍼킨제 이미지(Purkinje image)와 제4 퍼킨제 이미지를 검출하는 퍼킨제 이미지 검출부; 및상기 동공의 크기와 상기 제1, 제4 퍼킨제 이미지에 근거하여 3차원 공간에서의 시선의 위치를 산출하는 시선 위치 산출부를 포함하고,상기 시선 위치 산출부는상기 획득된 눈 영상의 상기 제1 퍼킨제 이미지의 2차원 평면상에서의 위치(X1, Y1), 상기 제4 퍼킨제 이미지의 상기 평면상의 위치(X4, Y4), 상기 무게 중심의 상기 평면상에서의 위치(Cx, Cy), 상기 두 퍼킨제 이미지 간 상기 평면상에서의 유클리디안 거리 및 상기 동공의 크기에 근거하여 상기 2차원 평면과 수직한 방향의 거리를 산출하는 것을 특징으로 하는 시선 추적 시스템
2 2
제 1 항에 있어서, 상기 눈 영상 획득부는눈에 적외선을 조사하는 적외선 광원; 및상기 적외선이 조사된 눈을 촬영하는 카메라를 포함하고,상기 카메라는 적외선 투과 필터를 채용하여 상기 조사된 적외선 성분만이 반영된 눈 영상을 출력하고,상기 적외선 광원과 상기 카메라는 인간의 시야를 방해하지 아니하도록 한쪽 눈의 하부에 위치시키며 일체형 모듈로 구현되는 것을 특징으로 하는 시선 추적 시스템
3 3
제 2 항에 있어서, 상기 적외선 광원과 상기 카메라는안경 형태의 프레임에 구비되는 것을 특징으로 하는 시선 추적 시스템
4 4
제 2 항에 있어서, 상기 도출부는상기 출력된 눈 영상에서 동공 영역을 검출하는 동공 영역 검출부;상기 검출된 동공 영역과 상기 동공 영역으로부터의 일정 영역을 이진화하는 이진화부; 및상기 이진화된 영역에서 상기 조사된 적외선이 상기 눈으로부터 반사된 광을 제거한 후, 상기 무게 중심과 상기 크기(직경)를 산출하는 산출부를 포함하는 것을 특징으로 하는 시선 추적 시스템
5 5
삭제
6 6
삭제
7 7
제 1 항에 있어서, 상기 시선 위치 산출부는상기 X1과 상기 Cx의 차(X1-Cx), 상기 Y1과 상기 Cy의 차(Y1-Cy), 상기 X4와 상기 Cx의 차(X4-Cx), 상기 Y4와 상기 Cy의 차(Y4-Cy), 상기 유클리디안 거리 및 상기 동공의 크기를 입력으로 하여 다층 신경망 역전파 알고리즘에 의해 상기 동공의 무게 중심으로부터 상기 2차원 평면과 수직한 방향의 거리를 산출하는 것을 특징으로 하는 시선 추적 시스템
8 8
(a)눈 영상을 획득하는 단계:(b)상기 획득된 눈 영상으로부터 동공(pupil)의 무게 중심과 상기 동공의 크기를 도출하는 단계;(c)상기 도출된 무게 중심으로부터의 일정 영역에서 제1 퍼킨제 이미지(Purkinje image)와 제4 퍼킨제 이미지를 검출하는 단계; 및(d)상기 동공의 크기와 상기 제1, 제4 퍼킨제 이미지에 근거하여 3차원 공간에서의 시선의 위치를 산출하는 단계를 포함하고,상기 (d)단계는상기 제1 퍼킨제 이미지의 상기 획득된 눈 영상의 2차원 평면상에서의 위치(X1, Y1), 상기 제4 퍼킨제 이미지의 상기 평면상의 위치(X4, Y4), 상기 무게 중심의 상기 평면상에서의 위치(Cx, Cy), 상기 두 퍼킨제 이미지 간 상기 평면상에서의 유클리디안 거리 및 상기 동공의 크기에 근거하여 상기 2차원 평면과 수직한 방향의 거리를 산출하는 단계인 것을 특징으로 하는 시선 추적 방법
9 9
제 8 항에 있어서, 상기 눈 영상은눈에 적외선을 조사하는 적외선 광원 및 상기 적외선이 조사된 눈을 촬영하는 카메라를 포함하는 눈 영상 획득 장치에 의해 획득되며,상기 카메라는 적외선 투과 필터를 채용하여 상기 조사된 적외선 성분만이 반영된 눈 영상을 출력하고,상기 적외선 광원과 상기 카메라는 인간의 시야를 방해하지 아니하도록 한쪽 눈의 하부에 위치시키며 일체형 모듈로 구현되는 것을 특징으로 하는 시선 추적 방법
10 10
제 9 항에 있어서, 상기 적외선 광원과 상기 카메라는안경 형태의 프레임에 구비되는 것을 특징으로 하는 시선 추적 방법
11 11
제 9 항에 있어서, 상기 (b)단계는(b1)상기 출력된 눈 영상에서 동공 영역을 검출하는 단계;(b2)상기 검출된 동공 영역과 상기 동공 영역으로부터의 일정 영역을 이진화하는 단계; 및(b3)상기 이진화된 영역에서 상기 조사된 적외선이 상기 눈으로부터 반사된 광을 제거한 후, 상기 무게 중심과 상기 동공의 크기(직경)를 산출하는 단계를 포함하는 것을 특징으로 하는 시선 추적 방법
12 12
삭제
13 13
삭제
14 14
제 8 항에 있어서, 상기 (d)단계는상기 X1과 상기 Cx의 차(X1-Cx), 상기 Y1과 상기 Cy의 차(Y1-Cy), 상기 X4와 상기 Cx의 차(X4-Cx), 상기 Y4와 상기 Cy의 차(Y4-Cy), 상기 유클리디안 거리 및 상기 동공의 크기를 입력으로 하여 다층 신경망 역전파 알고리즘에 의해 상기 동공의 무게 중심으로부터 상기 2차원 평면과 수직한 방향의 거리를 산출하는 단계인 것을 특징으로 하는 시선 추적 방법
15 15
제 8 항 내지 제 11항, 또는 제 14 항 중 어느 한 항의 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 판독 가능한 기록 매체
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 한국연구재단 동국대학교 산학협력단 일반연구자지원사업 시선 및 뇌파 융합 차세대 휴먼 컴퓨터 인터페이스 연구 [1/3]