맞춤기술찾기

이전대상기술

IMU 센서를 이용한 손가락 동작 기반 인터페이스 제어 시스템

  • 기술번호 : KST2020000540
  • 담당센터 : 서울동부기술혁신센터
  • 전화번호 : 02-2155-3662
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 명세서의 실시예에 따른 IMU 센서를 이용한 손가락 동작 기반 인터페이스 제어 시스템은, 사용자의 손가락(손톱)에 부착되며 IMU 센서를 구비하는 웨어러블 장치; 상기 웨어러블 장치로부터 수신한 데이터를 처리하는 프로세서; 및 상기 프로세서에 의해 처리된 데이터를 출력하는 디스플레이 장치를 포함하되, 상기 프로세서는, 손가락에 부착된 IMU 센서를 이용하여 제1 동작을 인식함으로써, 손가락과 접촉면의 접촉을 인식하는 단계; 상기 IMU 센서를 이용하여 제2 동작을 인식함으로써, 손가락이 접촉한 접촉면의 경사 값을 계산하는 단계; 상기 IMU 센서를 이용하여 제3 동작을 인식함으로써, 손가락 동작 범위를 계산하는 단계; 상기 접촉면의 경사 값과 손가락 동작 범위에 기초하여, 손가락이 동작하는 실제 좌표계를 가상 좌표계에 매칭하는 단계; 및 상기 IMU 센서를 이용하여 미리 정의된 동작들을 인식함으로써 인터페이스를 제어하는 단계를 수행하도록 구성된다. 이에 따르면, 손가락을 움직이는 것만으로 가상객체를 선택, 이동, 회전시키는 조작을 수행할 수 있으므로, 장기간 이용에도 피로가 없고 좁은 공간이나 공공장소에서도 용이하게 이용할 수 있다.
Int. CL G06F 3/01 (2006.01.01) G06F 3/0346 (2013.01.01) G06F 3/038 (2006.01.01) G02B 27/01 (2006.01.01)
CPC G06F 3/014(2013.01) G06F 3/014(2013.01) G06F 3/014(2013.01) G06F 3/014(2013.01) G06F 3/014(2013.01) G06F 3/014(2013.01) G06F 3/014(2013.01) G06F 3/014(2013.01)
출원번호/일자 1020180078734 (2018.07.06)
출원인 한국과학기술연구원, 재단법인 실감교류인체감응솔루션연구단
등록번호/일자 10-2184243-0000 (2020.11.24)
공개번호/일자 10-2020-0005243 (2020.01.15) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2018.07.06)
심사청구항수 16

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국과학기술연구원 대한민국 서울특별시 성북구
2 재단법인 실감교류인체감응솔루션연구단 대한민국 서울특별시 성북구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 박지형 서울특별시 성북구
2 오주영 서울특별시 성북구
3 유범재 서울특별시 성북구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 김영철 대한민국 서울특별시 종로구 종로*길 **, **층 케이씨엘특허법률사무소 (수송동, 석탄회관빌딩)
2 김 순 영 대한민국 서울특별시 종로구 종로*길 **, **층 케이씨엘특허법률사무소 (수송동, 석탄회관빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2018.07.06 수리 (Accepted) 1-1-2018-0667262-80
2 의견제출통지서
Notification of reason for refusal
2019.08.21 발송처리완료 (Completion of Transmission) 9-5-2019-0604576-82
3 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2019.10.15 수리 (Accepted) 1-1-2019-1050195-83
4 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2019.10.15 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2019-1050196-28
5 최후의견제출통지서
Notification of reason for final refusal
2020.02.04 발송처리완료 (Completion of Transmission) 9-5-2020-0083973-97
6 [거절이유 등 통지에 따른 의견]의견서·답변서·소명서
2020.04.02 수리 (Accepted) 1-1-2020-0346593-40
7 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2020.04.02 보정승인 (Acceptance of amendment) 1-1-2020-0346592-05
8 등록결정서
Decision to grant
2020.09.01 발송처리완료 (Completion of Transmission) 9-5-2020-0605545-69
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
IMU 센서를 이용한 손가락 동작 기반 인터페이스 제어 시스템으로서,상기 시스템은, 사용자의 손가락에 부착되며 IMU 센서를 구비하는 웨어러블 장치;상기 웨어러블 장치로부터 수신한 데이터를 처리하는 프로세서; 및상기 프로세서에 의해 처리된 데이터를 출력하는 디스플레이 장치를 포함하되,상기 프로세서는,상기 IMU 센서가 측정한 회전 값을 수신하는 단계;상기 회전 값에 기초하여 손가락 위치를 계산하는 단계; 및상기 손가락 위치에 기초하여 손가락이 동작하는 실제 좌표계를 가상 좌표계에 매칭하는 단계를 수행함으로써, 손가락 위치를 추적하는 것을 특징으로 하는, IMU 센서를 이용한 손가락 동작 기반 인터페이스 제어 시스템
2 2
제1항에 있어서,상기 프로세서는,손가락에 부착된 IMU 센서를 이용하여 제1 동작을 인식함으로써, 손가락과 접촉면의 접촉을 인식하는 단계;상기 IMU 센서를 이용하여 제2 동작을 인식함으로써, 손가락이 접촉한 접촉면의 경사 값을 계산하는 단계; 및상기 IMU 센서를 이용하여 제3 동작을 인식함으로써, 손가락 동작 범위를 계산하는 단계를 더 수행하는 것을 특징으로 하는, IMU 센서를 이용한 손가락 동작 기반 인터페이스 제어 시스템
3 3
제1항에 있어서,상기 프로세서는, 상기 손가락 위치를 추적하여 미리 정의된 동작들을 인식하는 단계; 및상기 인식된 동작들에 기초하여 가상현실의 인터페이스를 제어하는 단계를 더 수행하는 것을 특징으로 하는, IMU 센서를 이용한 손가락 동작 기반 인터페이스 제어 시스템
4 4
제3항에 있어서,상기 인식된 동작들에 기초하여 가상현실의 인터페이스를 제어하는 단계는,상기 손가락의 실제 좌표계 상의 움직임을 인식하여, 대응되는 커서(cursor)를 가상 좌표계에서 이동시키는 단계;제4 동작을 인식하여 상기 커서가 위치한 가상객체를 선택하는 단계;이동모드에서 상기 손가락의 실제 좌표계 상의 움직임을 인식하여, 상기 선택된 가상객체를 가상 좌표계에서 이동시키거나, 회전모드에서 상기 손가락의 실제 좌표계 상의 움직임을 인식하여, 상기 선택된 가상객체를 가상 좌표계에서 회전시키는 단계; 및제5 동작을 인식하여 상기 가상객체를 현재위치에 고정시키는 단계를 포함하되,상기 이동모드 및 회전모드는 제6 동작을 인식함으로써 전환되는 것을 특징으로 하는, IMU 센서를 이용한 손가락 동작 기반 인터페이스 제어 시스템
5 5
제4항에 있어서,손가락의 수평방향 움직임을 인식하여, 상기 커서를 가상 좌표계에서 가로방향으로 이동시키고,손가락의 수직방향 움직임을 인식하여, 상기 커서를 가상 좌표계에서 세로방향으로 이동시키는 것을 특징으로 하는, IMU 센서를 이용한 손가락 동작 기반 인터페이스 제어 시스템
6 6
제4항에 있어서,상기 이동모드에서, 손가락의 수평방향 움직임을 인식하여 상기 가상객체를 가상 좌표계에서 가로방향으로 이동시키고, 손가락의 수직방향 움직임을 인식하여 상기 가상객체를 가상 좌표계에서 세로방향으로 이동시키며,손가락의 전후방향 구부림을 인식하여 상기 가상객체를 가상 좌표계에서 깊이방향으로 이동시키는 것을 특징으로 하는, IMU 센서를 이용한 손가락 동작 기반 인터페이스 제어 시스템
7 7
제6항에 있어서,상기 회전모드에서, 손가락의 움직임을 인식하여 이에 대응되는 방향으로 상기 가상객체를 회전시키는 것을 특징으로 하는, IMU 센서를 이용한 손가락 동작 기반 인터페이스 제어 시스템
8 8
제4항에 있어서,상기 시스템은, 상기 프로세서 및 상기 디스플레이 장치를 구비한 HMD(Head Mounted Display) 장치를 더 포함하고, 상기 HMD 장치는 사용자의 머리 움직임을 인식하기 위한 제2 IMU 센서를 포함하며,상기 프로세서는, 상기 제2 IMU 센서를 이용하여 사용자의 머리 움직임을 인식함으로써 상기 가상객체의 이동 또는 회전을 조작하는 것을 특징으로 하는, IMU 센서를 이용한 손가락 동작 기반 인터페이스 제어 시스템
9 9
제8항에 있어서,상기 이동모드에서, 손가락의 수평방향 움직임을 인식하여 상기 가상객체를 가상 좌표계에서 가로방향으로 이동시키고, 손가락의 전후방향 구부림을 인식하여 상기 가상객체를 가상 좌표계에서 깊이방향으로 이동시키고,상기 HMD 장치가 장착된 머리의 수직방향 움직임을 인식하여 상기 가상객체를 가상 좌표계에서 세로방향으로 이동시키는 것을 특징으로 하는, IMU 센서를 이용한 손가락 동작 기반 인터페이스 제어 시스템
10 10
제9항에 있어서,상기 회전모드에서, 손가락의 움직임과 머리의 움직임 중 적어도 하나를 인식하여 이에 대응되는 방향으로 상기 가상객체를 회전시키는 것을 특징으로 하는, IMU 센서를 이용한 손가락 동작 기반 인터페이스 제어 시스템
11 11
제4항에 있어서, 상기 프로세서는,제1 조건 하에서는 상기 커서 또는 가상객체의 이동 또는 회전 명령으로 인식하여 상기 커서 또는 가상객체를 이동 또는 회전시키고,제2 조건 하에서는 상기 제4 동작, 제5 동작, 또는 제6 동작으로 인식하여 이에 대응되는 명령을 실행하고,상기 제1 조건 및 제2 조건은, 상기 IMU 센서가 측정한 각 축 방향의 가속도 값에 기초하여 결정되는 것을 특징으로 하는, IMU 센서를 이용한 손가락 동작 기반 인터페이스 제어 시스템
12 12
IMU 센서를 이용한 손가락 동작 기반 인터페이스 제어 방법으로서,손가락에 부착된 IMU 센서가 측정한 회전 값을 수신하는 단계;상기 회전 값에 기초하여 손가락 위치를 계산하는 단계; 및상기 손가락 위치에 기초하여 손가락이 동작하는 실제 좌표계를 가상 좌표계에 매칭함으로써 손가락 위치를 추적하는 단계를 포함하는 것을 특징으로 하는, IMU 센서를 이용한 손가락 동작 기반 인터페이스 제어 방법
13 13
제12항에 있어서,손가락에 부착된 IMU 센서를 이용하여 제1 동작을 인식함으로써, 손가락과 접촉면의 접촉을 인식하는 단계;상기 IMU 센서를 이용하여 제2 동작을 인식함으로써, 손가락이 접촉한 접촉면의 경사 값을 계산하는 단계; 및상기 IMU 센서를 이용하여 제3 동작을 인식함으로써, 손가락 동작 범위를 계산하는 단계를 더 포함하는 것을 특징으로 하는, IMU 센서를 이용한 손가락 동작 기반 인터페이스 제어 방법
14 14
제12항에 있어서,상기 손가락 위치를 추적하여 미리 정의된 동작들을 인식하는 단계; 및상기 인식된 동작들에 기초하여 가상현실의 인터페이스를 제어하는 단계를 더 포함하는 것을 특징으로 하는, IMU 센서를 이용한 손가락 동작 기반 인터페이스 제어 방법
15 15
제14항에 있어서,상기 인식된 동작들에 기초하여 가상현실의 인터페이스를 제어하는 단계는,상기 손가락의 실제 좌표계 상의 움직임을 인식하여, 대응되는 커서(cursor)를 가상 좌표계에서 이동시키는 단계;제4 동작을 인식하여 상기 커서가 위치한 가상객체를 선택하는 단계;이동모드에서 상기 손가락의 실제 좌표계 상의 움직임을 인식하여, 상기 선택된 가상객체를 가상 좌표계에서 이동시키는 단계;회전모드에서 상기 손가락의 실제 좌표계 상의 움직임을 인식하여, 상기 선택된 가상객체를 가상 좌표계에서 회전시키는 단계; 및제5동작을 인식하여 상기 가상객체를 현재위치에 고정시키는 단계를 포함하되,상기 이동모드 및 회전모드는 제6 동작을 인식함으로써 전환되는 것을 특징으로 하는, IMU 센서를 이용한 손가락 동작 기반 인터페이스 제어 방법
16 16
제12항 내지 15항 중 어느 한 항에 따른 IMU 센서를 이용한 손가락 동작 기반 인터페이스 제어 방법을 수행하기 위한, 컴퓨터로 판독 가능한 기록매체에 저장되는 컴퓨터 프로그램
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 과학기술정보통신부 한국과학기술연구원 글로벌프론티어지원 몰입형 VST Glasses 기반 공존현실 UI/UX 및 Human Factor 연구개발