맞춤기술찾기

이전대상기술

근전도 센서와 관성센서를 사용한 제스처 인식 기반의 모바일 로봇 제어 시스템 및 방법(SYSTEM AND METHOD OF CONTROLLING MOBILE ROBOT USING INERTIA MEASUREMENT UNIT AND ELECTROMYOGRAM SENSOR-BASED GESTURE RECOGNITION)

  • 기술번호 : KST2017005931
  • 담당센터 : 서울동부기술혁신센터
  • 전화번호 : 02-2155-3662
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 관성센서(IMU, Inertia Measurement Unit)와 근전도 센서(EMG, Electromyogram)의 센서퓨전을 사용한 사용자의 제스처 인식에 기반하여 모바일 로봇을 제어하는 기술로서, 일실시예에 따른 로봇 제어 시스템은 근전도 센서(EMG, Electromyogram)로부터 수신되는 제1 센싱값과 관성센서(IMU, Inertia Measurement Unit)로부터 수신되는 제2 센싱값을 수집하는 수집부, 상기 제1 센싱값 및 상기 제2 센싱값에 기초하여 제스처를 인식하는 인식부, 및 상기 인식된 제스처에 상응하는 로봇 제어 신호를 생성하는 제어부를 포함한다.
Int. CL B25J 13/08 (2006.01.01) B25J 19/02 (2006.01.01) B25J 9/16 (2006.01.01) G06F 3/01 (2006.01.01) G06F 3/0346 (2013.01.01) G06K 9/00 (2006.01.01)
CPC B25J 13/08(2013.01) B25J 13/08(2013.01) B25J 13/08(2013.01) B25J 13/08(2013.01) B25J 13/08(2013.01) B25J 13/08(2013.01) B25J 13/08(2013.01)
출원번호/일자 1020150127144 (2015.09.08)
출원인 경희대학교 산학협력단
등록번호/일자
공개번호/일자 10-2017-0030139 (2017.03.17) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2015.09.08)
심사청구항수 12

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 경희대학교 산학협력단 대한민국 경기도 용인시 기흥구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 김동한 대한민국 서울특별시 강남구
2 정훤재 대한민국 경기도 화성시
3 신성옥 대한민국 경기도 성남시 분당구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 김등용 대한민국 서울특별시 구로구 디지털로**길 *** *층-***(구로동,제이엔케이디지털타워)(동진국제특허법률사무소)
2 김홍석 대한민국 서울특별시 구로구 디지털로 **길 ***, ***호(구로동,JnK 디지털타워)(동진국제특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 경희대학교 산학협력단 경기도 용인시 기흥구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2015.09.08 수리 (Accepted) 1-1-2015-0873616-67
2 선행기술조사의뢰서
Request for Prior Art Search
2016.10.11 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2017.01.18 발송처리완료 (Completion of Transmission) 9-6-2017-0013222-38
4 의견제출통지서
Notification of reason for refusal
2017.01.25 발송처리완료 (Completion of Transmission) 9-5-2017-0065609-88
5 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2017.03.21 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2017-0280516-26
6 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2017.03.21 수리 (Accepted) 1-1-2017-0280495-55
7 의견제출통지서
Notification of reason for refusal
2017.07.28 발송처리완료 (Completion of Transmission) 9-5-2017-0530562-16
8 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2017.09.28 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2017-0951023-80
9 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2017.09.28 수리 (Accepted) 1-1-2017-0950983-17
10 등록결정서
Decision to grant
2018.03.22 발송처리완료 (Completion of Transmission) 9-5-2018-0201100-43
11 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.08.19 수리 (Accepted) 4-1-2019-5164254-26
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
적어도 하나의 프로세서를 포함하는 로봇 제어 시스템에 있어서,근전도 센서(EMG, Electromyogram)로부터 수신되는 제1 센싱값과 관성센서(IMU, Inertia Measurement Unit)로부터 수신되는 제2 센싱값을 수집하는 수집부;상기 제1 센싱값 및 상기 제2 센싱값에 기초하여 제스처를 인식하는 인식부; 및상기 인식된 제스처에 상응하는 로봇 제어 신호를 생성하는 제어부를 포함하며,상기 수집부는,상기 제1 센싱값이 활성화 신호인 경우, 상기 제2 센싱값으로부터 제스처 특징을 추출하는 특징 추출부; 상기 추출된 제스처 특징을 전처리하는 전처리부;상기 전처리된 제스처 특징을 이용하는 1단계 HMM(Hidden Ma-rkoff Model) 및 상기 1단계 HMM에서 인식된 제스처를 이용하는 2단계 HMM(Hidden Ma-rkoff Model)을 수행하는 HMM(Hidden Ma-rkoff Model) 처리부를 포함하는 로봇 제어 시스템
2 2
제1항에 있어서,상기 제1 센싱값은 활성화 신호 및 비활성화 신호 중에서 어느 하나의 신호이고, 상기 수집부는 상기 제1 센싱값이 활성화 신호인 경우에 상기 제2 센싱값을 더 수집하는 로봇 제어 시스템
3 3
삭제
4 4
삭제
5 5
제1항에 있어서,상기 HMM(Hidden Ma-rkoff Model) 처리부는,상기 1단계 HMM(Hidden Ma-rkoff Model) 이후, 판별된 연속된 제스처들의 시퀀스를 입력 데이터로서 받아 2단계 HMM(Hidden Ma-rkoff Model)에서 트레이닝 하도록 제어하는 로봇 제어 시스템
6 6
제1항에 있어서,상기 1단계 HMM(Hidden Ma-rkoff Model) 및 상기 2단계 HMM(Hidden Ma-rkoff Model) 중에서 적어도 하나에 대한 트레이닝 데이터는 각 제스처들 마다 미리 지정된 개수의 샘플 제스처를 포함하는 로봇 제어 시스템
7 7
제1항에 있어서,상기 HMM(Hidden Ma-rkoff Model) 처리부는,상기 1단계 HMM(Hidden Ma-rkoff Model)에서 제스처별 트레이닝 데이터를 수집하여 메인 제스처를 판별하는 로봇 제어 시스템
8 8
제7항에 있어서,상기 HMM(Hidden Ma-rkoff Model) 처리부는,상기 2단계 HMM(Hidden Ma-rkoff Model)에서, 상기 메인 제스처의 시퀀스를 기반으로 로봇 제어 신호를 판별하는 로봇 제어 시스템
9 9
적어도 하나의 프로세서를 포함하는 로봇 제어 시스템에 있어서,근전도 센서(EMG, Electromyogram)로부터의 제1 센싱값이 활성화 신호인지 여부를 판단하는 판단부;상기 판단 결과, 상기 제1 센싱값이 활성화 신호인 경우에 제2 센싱값을 수집하는 수집부; 및상기 수집된 제2 센싱값에 HMM(Hidden Ma-rkoff Model)을 적용하여 식별되는 제스처에 상응하는 로봇 제어 신호를 생성하는 제어부를 포함하며,상기 제어부는,상기 수집된 제2 센싱값을 이용하는 1단계 HMM(Hidden Ma-rkoff Model) 및 상기 1단계 HMM에서 인식된 제스처를 이용하는 2단계 HMM(Hidden Ma-rkoff Model)를 순차적으로 적용하여 상기 로봇 제어 신호를 생성하는 로봇 제어 시스템
10 10
삭제
11 11
제9항에 있어서,상기 제어부는,상기 1단계 HMM(Hidden Ma-rkoff Model)에서 제스처별 트레이닝 데이터를 수집하여 메인 제스처를 판별하는 로봇 제어 시스템
12 12
제11항에 있어서,상기 제어부는,상기 2단계 HMM(Hidden Ma-rkoff Model)에서, 상기 메인 제스처의 시퀀스를 기반으로 로봇 제어 신호를 판별하는 로봇 제어 시스템
13 13
근전도 센서(EMG, Electromyogram)로부터 수신되는 제1 센싱값과 관성센서(IMU, Inertia Measurement Unit)로부터 수신되는 제2 센싱값을 수집하는 단계;상기 제1 센싱값 및 상기 제2 센싱값에 기초하여 제스처를 인식하는 단계; 상기 인식된 제스처에 상응하는 로봇 제어 신호를 생성하는 단계;상기 제1 센싱값이 활성화 신호인 경우, 상기 제2 센싱값으로부터 제스처 특징을 추출하는 단계;상기 추출된 제스처 특징을 전처리하는 단계; 및상기 전처리된 제스처 특징을 이용하는 1단계 HMM(Hidden Ma-rkoff Model) 및 상기 1단계 HMM에서 인식된 제스처를 이용하는 2단계 HMM(Hidden Ma-rkoff Model)을 수행하는 HMM(Hidden Ma-rkoff Model) HMM(Hidden Ma-rkoff Model) 처리 단계를 포함하는 로봇 제어 방법
14 14
삭제
15 15
삭제
16 16
제13항에 있어서,상기 HMM(Hidden Ma-rkoff Model) 처리 단계는,상기 1단계 HMM(Hidden Ma-rkoff Model) 이후, 판별된 연속된 제스처들의 시퀀스를 입력 데이터로서 받아 2단계 HMM(Hidden Ma-rkoff Model)에서 트레이닝 하도록 제어하는 단계를 포함하는 로봇 제어 방법
17 17
제13항에 있어서,상기 HMM(Hidden Ma-rkoff Model) 처리 단계는,상기 1단계 HMM(Hidden Ma-rkoff Model)에서 제스처별 트레이닝 데이터를 수집하여 메인 제스처를 판별하는 단계; 및상기 2단계 HMM(Hidden Ma-rkoff Model)에서, 상기 메인 제스처의 시퀀스를 기반으로 로봇 제어 신호를 판별하는 단계를 포함하는 로봇 제어 방법
18 18
삭제
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 산업통상자원부 (주)유진로봇 지식서비스산업핵심기술개발사업 완구산업 활성화를 위한 스마트 ToyWeb 서비스 기술 개발
2 산업통상자원부 한국로봇산업진흥원 로봇산업융합핵심기술개발사업 이동/조작/HRI/통신성능 등 서비스로봇성능평가 및 표준화 기술 개발
3 교육부(교육과학기술부) 경희대학교 산학협력단 학제간융합연구사업 인간과 실시간 협연을 위한 바이올린 연주 로봇 개발
4 교육부(교육과학기술부) 경희대학교 산학협력단 기본연구지원사업 실시간 Auditory Feedback 기반 HRI 시스템 연구
5 미래창조과학부 및 정보통신기술진흥센터 경희대학교 산학협력단 2014년도 글로벌IT인재활용지원사업 실시간 Auditory Feedback을 활용한 음악로봇의 추가로 향상된 로봇 뮤지컬 기술 개발