요약 | 본 발명은 시선 추적 장치 및 방법에 관한 것으로, 더욱 상세하게는 사용자와 제품 간의 거리 정보 및 방향 정보를 추정하여 사용자의 시선의 위치를 정확하게 추적하는 시적 추적 장치 및 방법에 관한 것이다. |
---|---|
Int. CL | G06K 9/00 (2006.01.01) G06F 3/01 (2006.01.01) A61B 3/113 (2006.01.01) |
CPC | G06K 9/00604(2013.01) G06K 9/00604(2013.01) G06K 9/00604(2013.01) G06K 9/00604(2013.01) |
출원번호/일자 | 1020160013095 (2016.02.02) |
출원인 | 동국대학교 산학협력단 |
등록번호/일자 | 10-1732618-0000 (2017.04.26) |
공개번호/일자 | |
공고번호/일자 | (20170508) 문서열기 |
국제출원번호/일자 | |
국제공개번호/일자 | |
우선권정보 | |
법적상태 | 등록 |
심사진행상태 | 수리 |
심판사항 | |
구분 | 신규 |
원출원번호/일자 | |
관련 출원번호 | |
심사청구여부/일자 | Y (2016.02.02) |
심사청구항수 | 13 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 동국대학교 산학협력단 | 대한민국 | 서울특별시 중구 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 박강령 | 대한민국 | 서울특별시 강남구 |
2 | 홍형길 | 대한민국 | 서울특별시 양천구 |
3 | 방재원 | 대한민국 | 서울특별시 중구 |
4 | 장제웅 | 대한민국 | 서울특별시 성북구 |
5 | 허환 | 대한민국 | 서울특별시 마포구 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 특허법인이지 | 대한민국 | 서울특별시 금천구 가산디지털*로 ***(가산동, KCC웰츠밸리) ***-*** |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 동국대학교 산학협력단 | 서울특별시 중구 |
번호 | 서류명 | 접수/발송일자 | 처리상태 | 접수/발송번호 |
---|---|---|---|---|
1 | [특허출원]특허출원서 [Patent Application] Patent Application |
2016.02.02 | 수리 (Accepted) | 1-1-2016-0113648-37 |
2 | [출원서등 보정]보정서 [Amendment to Patent Application, etc.] Amendment |
2016.07.28 | 수리 (Accepted) | 1-1-2016-0733532-15 |
3 | 선행기술조사의뢰서 Request for Prior Art Search |
2016.11.10 | 수리 (Accepted) | 9-1-9999-9999999-89 |
4 | 선행기술조사보고서 Report of Prior Art Search |
2017.01.10 | 수리 (Accepted) | 9-1-2017-0001107-09 |
5 | 의견제출통지서 Notification of reason for refusal |
2017.01.12 | 발송처리완료 (Completion of Transmission) | 9-5-2017-0029135-15 |
6 | [거절이유 등 통지에 따른 의견]의견(답변, 소명)서 [Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation) |
2017.01.23 | 수리 (Accepted) | 1-1-2017-0080429-16 |
7 | [명세서등 보정]보정서 [Amendment to Description, etc.] Amendment |
2017.01.23 | 보정승인간주 (Regarded as an acceptance of amendment) | 1-1-2017-0080453-13 |
8 | 등록결정서 Decision to grant |
2017.04.24 | 발송처리완료 (Completion of Transmission) | 9-5-2017-0290971-13 |
9 | 출원인정보변경(경정)신고서 Notification of change of applicant's information |
2019.08.16 | 수리 (Accepted) | 4-1-2019-5163486-33 |
번호 | 청구항 |
---|---|
1 |
1 시선 추적 장치에 있어서,입력된 제품 영상의 특징 형태를 이용해 사용자의 눈과 제품 사이의 거리 특징 정보 및 방향 특징 정보를 산출하는 거리 및 방향 특징 정보 산출부;산출한 거리 특징 정보 및 방향 특징 정보를 입력 값으로 하여 퍼지시스템을 기반으로 사용자의 눈과 제품 사이의 거리와 방향을 추정하여 추정 거리 정보 및 추정 방향 정보를 산출하는 거리 및 방향 정보 추정부; 입력된 눈 영상을 분석하여 시선 추적 정보를 산출하는 시선 추적 정보 산출부; 및상기 시선 추적 정보와 상기 추정 거리 정보 및 상기 추정 방향 정보를 이용하여 제품 위의 시선 위치를 결정하는 시선 위치 결정부를 포함하는 시선 추적 장치 |
2 |
2 제1 항에 있어서, 상기 특징 형태는 네 모서리 지점을 포함하는 사각형 형태인 시선 추적 장치 |
3 |
3 제1 항에 있어서, 상기 거리 특징 정보는상기 특징 형태의 넓이로 정의되는 제1 거리 특징 정보; 및 상기 특징 형태의 모든 선분의 길이의 합으로 정의되는 제2 거리 특징 정보를 포함하는 시선 추적 장치 |
4 |
4 제1 항에 있어서, 상기 방향 특징 정보는 상기 특징 형태에서 좌측 최상 단 모서리와 우측 최상 단 모서리의 높이의 차이 값으로 정의되는 제1 방향 특징 정보; 및 상기 특징 형태의 내각 중 둔각의 합과 예각의 합의 차이 값으로 정의되는 제2 방향 특징 정보를 포함하는 시선 추적 장치 |
5 |
5 제1항에 있어서,상기 거리 및 방향 정보 추정부는산출한 거리 특징 정보들 및 방향 특징 정보들을 0부터 1사이의 값으로 정규화하는 특징 정보 정규화부;거리 특징 정보들 및 방향 특징 정보들을 각각 이용하여 거리 특징 퍼지 룰 테이블 및 방향 특징 퍼지 룰 테이블을 각각 설정하는 퍼지 룰 테이블 설정부;거리 특징 정보들 및 방향 특징 정보들에 대한 각각의 퍼지 멤버십 함수를 이용하여 각각의 퍼지 룰 테이블 출력 값에 대한 추론 값을 산출하는 퍼지 멤버십 함수 추론부; 및산출한 각각의 추론 값을 역퍼지화하여 추정 거리정보 및 추정 방향 정보를 계산하는 역퍼지화 출력부를 포함하는 시선 추적 장치 |
6 |
6 제1 항에 있어서,상기 시선 추적 정보 산출부는 입력된 눈 영상의 동공 영역 및 반사광 영역을 검출하는 동공 검출부; 및검출한 동공 영역 및 반사광 영역을 기초로 사용자의 시선 추적정보를 산출하는 시선 추적부를 포함하는 시선 추적 장치 |
7 |
7 제6항에 있어서,상기 시선추적부는 사용자 캘리브레이션을 통해 사용자가 응시하는 시선 추적 정보를 계산하는 시선 추적 장치 |
8 |
8 시선 추적 방법에 있어서,입력된 제품 영상의 특징 형태를 이용해 사용자의 눈과 제품 사이의 거리 특징 정보 및 방향 특징 정보를 산출하는 단계;산출한 거리 특징 정보 및 방향 특징 정보를 입력 값으로 하여 퍼지시스템을 기반으로 사용자의 눈과 제품 사이의 거리와 방향을 추정하여 추정 거리 정보 및 추정 방향 정보를 산출하는 단계; 입력된 눈 영상을 분석하여 시선 추적 정보를 산출하는 단계; 및상기 시선 추적 정보와 상기 추정 거리 정보 및 상기 추정 방향 정보를 이용하여 제품 위의 시선 위치를 결정하는 단계를 포함하는 시선 추적 방법 |
9 |
9 제8항에 있어서,산출한 거리 특징 정보 및 방향 특징 정보를 입력 값으로 하여 퍼지시스템을 기반으로 사용자의 눈과 제품 사이의 거리와 방향을 추정하여 추정 거리 정보 및 추정 방향 정보를 산출하는 단계는산출한 거리 특징 정보들 및 방향 특징 정보들을 0부터 1사이의 값으로 정규화하는 단계;거리 특징 정보들 및 방향 특징 정보들을 각각 이용하여 거리 특징 퍼지 룰 테이블 및 방향 특징 퍼지 룰 테이블을 각각 설정하는 단계;거리 특징 정보들 및 방향 특징 정보들에 대한 각각의 퍼지 멤버십 함수를 이용하여 각각의 퍼지 룰 테이블 출력 값에 대한 추론 값을 산출하는 단계; 및산출한 각각의 추론 값을 역퍼지화하여 추정 거리정보 및 추정 방향 정보를 계산하는 단계를 포함하는 시선 추적 방법 |
10 |
10 제9항에 있어서,상기 거리 특징 정보는특징 형태의 넓이로 정의되는 제1 거리 특징 정보; 및 특징 형태의 모든 선분의 길이의 합으로 정의되는 제2 거리 특징 정보를 포함하고,상기 방향 특징 정보는 특징 형태에서 좌측 최상 단 모서리와 우측 최상 단 모서리의 높이의 차이 값으로 정의되는 제1 방향 특징 정보; 및 특징 형태의 내각 중 둔각의 합과 예각의 합의 차이 값으로 정의되는 제2 방향 특징 정보를 포함하는 시선 추적 방법 |
11 |
11 제10항에 있어서,상기 거리 특징 정보들 및 방향 특징 정보들을 각각 이용하여 거리 특징 퍼지 룰 테이블 및 방향 특징 퍼지 룰 테이블을 각각 설정하는 단계는상기 제1 거리 특징 정보가 낮고, 상기 제2 거리 특징 정보가 낮은 경우는 더 먼 거리를 나타낸다고 가정하여 제1 거리 특징 정보가 L(Low)이고, 제2 거리 특징 정보가 L(Low)일 경우에 출력 값이 H(High)로 될 수 있도록 거리 특징 퍼지 룰을 설정하는 단계; 및제1 방향 특징 정보가 작다 할지라도, 제2 방향 특징 정보가 큰 경우는 더 치우쳐진 방향이라고 가정하여 제1 방향 특징 정보가 L(Low)이고, 제2 방향 특징 정보가 H(High)일 경우에 출력 값이 H(High)로 될 수 있도록 방향 특징 퍼지 룰을 설정하는 단계를 포함하는 시선 추적 방법 |
12 |
12 제8항에 있어서, 상기 입력된 눈 영상을 분석하여 시선 추적 정보를 산출하는 단계는입력된 눈 영상의 동공 영역 및 반사광 영역을 검출하는 단계; 및검출한 동공 영역 및 반사광 영역을 기초로 사용자의 시선 추적정보를 산출하는 단계를 포함하는 시선 추적 방법 |
13 |
13 제8항 내지 제12항 중 어느 한 항의 시선 추적 방법을 실행하기 위하여 컴퓨터가 판독 가능한 기록매체에 기록된 컴퓨터 프로그램 |
지정국 정보가 없습니다 |
---|
패밀리정보가 없습니다 |
---|
순번 | 연구부처 | 주관기관 | 연구사업 | 연구과제 |
---|---|---|---|---|
1 | 교육부 | 동국대학교 산학협력단 | 이공학개인기초연구지원사업(기본) | 시선 위치, 눈 반응, 감정 및 행태 분석 기반 운전자 감성 인지 자동차 기술 개발 |
2 | 중소기업청 | 동국대학교 산학협력단 | 이공계창업꿈나무과제 | GTS (Gaze Tracking System) |
공개전문 정보가 없습니다 |
---|
특허 등록번호 | 10-1732618-0000 |
---|
표시번호 | 사항 |
---|---|
1 |
출원 연월일 : 20160202 출원 번호 : 1020160013095 공고 연월일 : 20170508 공고 번호 : 특허결정(심결)연월일 : 20170424 청구범위의 항수 : 13 유별 : G06K 9/00 발명의 명칭 : 시선 추적 장치 및 방법 존속기간(예정)만료일 : |
순위번호 | 사항 |
---|---|
1 |
(권리자) 동국대학교 산학협력단 서울특별시 중구... |
제 1 - 3 년분 | 금 액 | 276,000 원 | 2017년 04월 27일 | 납입 |
제 4 년분 | 금 액 | 163,000 원 | 2020년 03월 31일 | 납입 |
번호 | 서류명 | 접수/발송일자 | 처리상태 | 접수/발송번호 |
---|---|---|---|---|
1 | [특허출원]특허출원서 | 2016.02.02 | 수리 (Accepted) | 1-1-2016-0113648-37 |
2 | [출원서등 보정]보정서 | 2016.07.28 | 수리 (Accepted) | 1-1-2016-0733532-15 |
3 | 선행기술조사의뢰서 | 2016.11.10 | 수리 (Accepted) | 9-1-9999-9999999-89 |
4 | 선행기술조사보고서 | 2017.01.10 | 수리 (Accepted) | 9-1-2017-0001107-09 |
5 | 의견제출통지서 | 2017.01.12 | 발송처리완료 (Completion of Transmission) | 9-5-2017-0029135-15 |
6 | [거절이유 등 통지에 따른 의견]의견(답변, 소명)서 | 2017.01.23 | 수리 (Accepted) | 1-1-2017-0080429-16 |
7 | [명세서등 보정]보정서 | 2017.01.23 | 보정승인간주 (Regarded as an acceptance of amendment) | 1-1-2017-0080453-13 |
8 | 등록결정서 | 2017.04.24 | 발송처리완료 (Completion of Transmission) | 9-5-2017-0290971-13 |
9 | 출원인정보변경(경정)신고서 | 2019.08.16 | 수리 (Accepted) | 4-1-2019-5163486-33 |
기술정보가 없습니다 |
---|
과제고유번호 | 1345254867 |
---|---|
세부과제번호 | 2015R1D1A1A01056761 |
연구과제명 | 시선 위치, 눈 반응, 감정 및 행태 분석 기반 운전자 감성 인지 자동차 기술 개발 |
성과구분 | 출원 |
부처명 | 교육부 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2016 |
연구기간 | 201611~201710 |
기여율 | 0.33333334 |
연구개발단계명 | 기초연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1425100209 |
---|---|
세부과제번호 | S2320066 |
연구과제명 | GTS (Gaze Tracking System) |
성과구분 | 출원 |
부처명 | 중소기업청 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2015 |
연구기간 | 201507~201605 |
기여율 | 0.33333334 |
연구개발단계명 | 개발연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1711029774 |
---|---|
세부과제번호 | R0101-15-0190 |
연구과제명 | 범죄 발생환경, 행동패턴 및 심리정보등 융합정보 적용형 엔트로피 필터링 예측분석기반의 실시간 범죄 예측·예방 시스템 개발 |
성과구분 | 출원 |
부처명 | 미래창조과학부 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2015 |
연구기간 | 201309~201608 |
기여율 | 0.33333334 |
연구개발단계명 | 응용연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1345254867 |
---|---|
세부과제번호 | 2015R1D1A1A01056761 |
연구과제명 | 시선 위치, 눈 반응, 감정 및 행태 분석 기반 운전자 감성 인지 자동차 기술 개발 |
성과구분 | 등록 |
부처명 | 교육부 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2016 |
연구기간 | 201611~201710 |
기여율 | 0.33333334 |
연구개발단계명 | 기초연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1425100209 |
---|---|
세부과제번호 | S2320066 |
연구과제명 | GTS (Gaze Tracking System) |
성과구분 | 등록 |
부처명 | 중소기업청 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2015 |
연구기간 | 201507~201605 |
기여율 | 0.33333334 |
연구개발단계명 | 개발연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1711029774 |
---|---|
세부과제번호 | R0101-15-0190 |
연구과제명 | 범죄 발생환경, 행동패턴 및 심리정보등 융합정보 적용형 엔트로피 필터링 예측분석기반의 실시간 범죄 예측·예방 시스템 개발 |
성과구분 | 등록 |
부처명 | 미래창조과학부 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2015 |
연구기간 | 201309~201608 |
기여율 | 0.33333334 |
연구개발단계명 | 응용연구 |
6T분류명 | IT(정보기술) |
[1020160181518] | 성별 인식 장치 및 방법 | 새창보기 |
---|---|---|
[1020160167635] | 회선 신경망 기반 눈 개폐 분류 장치 및 방법 | 새창보기 |
[1020160164627] | 도로 표지 인식 장치 및 방법 | 새창보기 |
[1020160149842] | 공포심리 평가 장치 및 방법 | 새창보기 |
[1020160141360] | 행위 인식 장치 및 방법 | 새창보기 |
[1020160104769] | 도로의 차선을 재도색하는 장치 및 방법(LANE REPAINTING APPARATUS AND METHOD) | 새창보기 |
[1020160013095] | 시선 추적 장치 및 방법 | 새창보기 |
[1020160013087] | 행위 인식 장치 및 방법 | 새창보기 |
[1020150115593] | 위성 사진을 이용한 CCTV 화면에서의 거리 측정 방법 | 새창보기 |
[KST2017015027][동국대학교] | 다방향 인식을 이용한 태권도 동작 평가 장치 및 방법(Apparatus and method for evaluating Taekwondo motion using multi-directional recognition) | 새창보기 |
---|---|---|
[KST2015188579][동국대학교] | 영상 인식 기반의 주차장의 빈 주차면 인식 장치 및 방법 | 새창보기 |
[KST2017012895][동국대학교] | 헤드램프(Head lamp) | 새창보기 |
[KST2018010994][동국대학교] | 뇌파를 이용한 게임 장치 및 방법 | 새창보기 |
[KST2018012446][동국대학교] | 환자 참여형 실시간 전자의무기록 방법 및 시스템 | 새창보기 |
[KST2018016172][동국대학교] | CNN 기반 지정맥 인식 장치 및 인식 방법 | 새창보기 |
[KST2019016828][동국대학교] | 드론의 제어 신호 생성 방법 및 제어 장치 | 새창보기 |
[KST2015188169][동국대학교] | 지문 및 정맥 정보 검출 장치 | 새창보기 |
[KST2015188229][동국대학교] | 눈 위치를 추적하는 의료용 헤드램프 | 새창보기 |
[KST2015188604][동국대학교] | 시선 추적 장치 및 방법 | 새창보기 |
[KST2015231050][동국대학교] | 얼굴 인식 장치 및 방법(DEVICE AND METHOD FOR FACE RECOGNITION) | 새창보기 |
[KST2019018488][동국대학교] | 디지털 영상 이미지를 이용한 위급상황 분석장치 및 방법 | 새창보기 |
[KST2021005897][동국대학교] | 수정된 사이클 생성적 적대 신경망을 이용하는 나이 추정 장치 및 방법 | 새창보기 |
[KST2016017878][동국대학교] | 얼굴 영상 기반 성별 인식 방법 및 장치(METHOD AND COMPUTING DEVICE FOR GENDER RECOGNITION BASED ON FACIAL IMAGE) | 새창보기 |
[KST2015188525][동국대학교] | 인터페이스 시스템 및 방법 | 새창보기 |
[KST2015188461][동국대학교] | 가상화 환경에서 NUI 및 NUX를 시뮬레이션하는 방법 및 장치 | 새창보기 |
[KST2019017179][동국대학교] | 딥 러닝 기반의 차량 운전자 시선 추적 장치 및 방법 | 새창보기 |
[KST2015188592][동국대학교] | 대화형 로봇 장치 및 그 제어방법 | 새창보기 |
[KST2015188512][동국대학교] | NUI 기반의 실감형 가상공간 디스플레이 제어장치 및 제어방법 | 새창보기 |
[KST2018005016][동국대학교] | 스마트 테이블(SMART TABLE) | 새창보기 |
[KST2019019648][동국대학교] | 보행자 검출 장치 및 방법 | 새창보기 |
[KST2019014144][동국대학교] | 번들 조정 알고리즘을 이용한 립모션과 HMD 사이의 캘리브레이션 방법 및 장치 | 새창보기 |
[KST2014029558][동국대학교] | 두 개의 측면 카메라를 이용한 눈이 바라보는 방향 탐지 방법 | 새창보기 |
[KST2016016912][동국대학교] | 나이 추정 장치 및 방법(DEVICE AND METHOD FOR HUMAN AGE ESTIMATION) | 새창보기 |
[KST2016017879][동국대학교] | 원거리 가시광선 영상과 열 영상에 기반한 성별 인식 방법 및 장치(METHOD AND COMPUTING DEVICE FOR GENDER RECOGNITION BASED ON LONG DISTANCE VISIBLE LIGHT IMAGE AND THERMAL IMAGE) | 새창보기 |
[KST2018008236][동국대학교] | 문자 입력 방법 및 이를 수행하기 위한 장치 | 새창보기 |
[KST2014029176][동국대학교] | 지정맥 인식을 이용한 바이오 인식 방법 | 새창보기 |
[KST2018005017][동국대학교] | 저가형 관성센서를 이용한 모션 인식 시스템 및 그 방법(THE SYSTEM AND METHOD FOR DETECTING MOTION USING LOW-COST INERTIAL SENSOR) | 새창보기 |
[KST2016016609][동국대학교] | 눈 개폐 분류 장치 및 방법(DEVICE AND METHOD FOR CLASSIFYING OPEN AND CLOSE EYES) | 새창보기 |
[KST2015188657][동국대학교] | 시스루 디스플레이를 이용한 동작인식 장치 및 그 방법 | 새창보기 |
심판사항 정보가 없습니다 |
---|