맞춤기술찾기

이전대상기술

실시간 손 포즈 인식을 통한 비접촉식 입력 인터페이스 방법 및 기록 매체

  • 기술번호 : KST2015221110
  • 담당센터 :
  • 전화번호 :
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 카메라만을 통해 실시간으로 손 포즈를 인식할 수 있고, 더 나아가 사용자의 손 위에 가상 키보드를 정합시켜 손가락으로 가상 키보드를 클릭하여 목적하는 정보의 입력이 가능한 비접촉식 입력 인터페이스 방법 및 그 기록 매체에 관한 것이다.본 발명에 따른 실시간 손 포즈 인식을 통한 비접촉식 입력 인터페이스 방법은, 카메라로부터 손을 포함하는 영상을 입력받는 단계와; 현재 프레임에서 깊이 값 미분을 통해 상기 손의 외곽선 정보를 검출하는 단계와; 상기 현재 프레임에서 임의의 두 개의 점을 잡아 상기 손의 회전각 정보를 산출하는 단계와; 상기 현재 프레임에서 거리 맵(Distance Map)을 이용하여 상기 손의 중심점 정보를 추출하는 단계와; 상기 현재 프레임에서 상기 중심점을 기준으로 확장하는 원을 이용하여, 상기 손의 손가락에 대응되며 상호 이격 배열된 복수의 점 성분 정보를 추출하는 단계; 및 상기 현재 프레임에서 획득된 적어도 상기 복수의 점 성분 정보를 포함한 손 정보를 이용하여, 이전 프레임에서 획득된 손 정보와 매칭을 수행함으로써 상기 현재 프레임의 손 포즈를 인식하는 단계를 포함하는 것을 특징으로 한다.
Int. CL G06K 9/46 (2006.01) G06T 7/00 (2006.01) G06F 3/01 (2006.01)
CPC G06T 7/00(2013.01) G06T 7/00(2013.01) G06T 7/00(2013.01)
출원번호/일자 1020130163827 (2013.12.26)
출원인 서경대학교 산학협력단
등록번호/일자 10-1559502-0000 (2015.10.05)
공개번호/일자 10-2015-0075648 (2015.07.06) 문서열기
공고번호/일자 (20151014) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2013.12.26)
심사청구항수 11

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 서경대학교 산학협력단 대한민국 서울특별시 성북구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 김태영 대한민국 서울특별시 성북구
2 나민영 대한민국 경기도 평택시

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인다울 대한민국 서울 강남구 봉은사로 ***, ***호(역삼동, 혜전빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 서경대학교 산학협력단 대한민국 서울특별시 성북구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2013.12.26 수리 (Accepted) 1-1-2013-1188996-66
2 출원인정보변경(경정)신고서
Notification of change of applicant's information
2014.05.02 수리 (Accepted) 4-1-2014-5054418-32
3 출원인정보변경(경정)신고서
Notification of change of applicant's information
2014.05.29 수리 (Accepted) 4-1-2014-5065900-96
4 선행기술조사의뢰서
Request for Prior Art Search
2014.12.05 수리 (Accepted) 9-1-9999-9999999-89
5 선행기술조사보고서
Report of Prior Art Search
2015.01.09 수리 (Accepted) 9-1-2015-0004550-57
6 의견제출통지서
Notification of reason for refusal
2015.01.16 발송처리완료 (Completion of Transmission) 9-5-2015-0035736-51
7 [지정기간연장]기간연장(단축, 경과구제)신청서
[Designated Period Extension] Application of Period Extension(Reduction, Progress relief)
2015.03.16 수리 (Accepted) 1-1-2015-0251945-51
8 [지정기간연장]기간연장(단축, 경과구제)신청서
[Designated Period Extension] Application of Period Extension(Reduction, Progress relief)
2015.04.16 수리 (Accepted) 1-1-2015-0372801-45
9 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2015.05.18 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2015-0475294-23
10 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2015.05.18 수리 (Accepted) 1-1-2015-0475295-79
11 등록결정서
Decision to grant
2015.09.23 발송처리완료 (Completion of Transmission) 9-5-2015-0656515-11
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
삭제
2 2
삭제
3 3
삭제
4 4
삭제
5 5
카메라로부터 왼손 또는 오른손을 포함하는 손 영상을 입력받는 제1 단계;현재 프레임에서 깊이 값 미분을 통해 상기 손의 외곽선 정보를 검출하는 제2 단계;상기 외곽선 정보와 오츠 알고리즘(Otsu Algorithm)을 이용하여 상기 손이 오른손인지 왼손인지를 구분하는 제2-1 단계;상기 현재 프레임에서 임의의 두 개의 점을 잡아 상기 손의 회전각 정보를 산출하는 제3 단계;상기 현재 프레임에서 상기 손의 거리 맵(Distance Map)을 이용하여 상기 손의 중심점 정보를 추출하는 제4 단계;상기 현재 프레임에서 상기 중심점을 기준으로 확장하는 원을 이용하여, 상기 손의 손가락에 대응되며 상호 이격 배열된 복수의 점 성분 정보를 추출하고, 상기 복수의 점 성분 정보에는 상기 손의 손가락의 관절에 대응하는 적어도 하나의 관절점 정보와 상기 복수의 점 성분에는 상기 손의 손가락의 종단에 대응하는 끝점 정보가 포함되도록 추출하는 제5 단계;상기 현재 프레임에서 획득된 적어도 상기 복수의 점 성분 정보를 포함한 손 정보를 이용하여, 이전 프레임에서 획득된 손 정보와 매칭을 수행함으로써 상기 현재 프레임의 손 포즈를 인식하는 제6 단계;상기 관절점 정보를 포함한 손 정보를 이용하여 상기 손의 오른손(또는 왼손)에 가상 키보드를 매핑하는 제7 단계; 및상기 오른손(또는 왼손)에 매핑된 가상 키보드에 왼손(또는 오른손)이 클릭시, 상기 끝점 정보를 이용하여 상기 클릭 여부를 감지하는 제8 단계를 포함하는 것을 특징으로 하고,상기 제8 단계는,상기 가상 키보드에 클릭된 손가락 끝점 주변의 복수 개 픽셀들의 깊이 값에 임계값을 가감한 값과 상기 손가락 끝점의 깊이 값을 비교하여 상기 클릭 여부를 감지하도록 구성되는 것을 특징으로 하는 실시간 손 포즈 인식을 통한 비접촉식 입력 인터페이스 방법
6 6
삭제
7 7
제5 항에 있어서,상기 제1 단계 내지 제6 단계 중 어느 하나의 단계 이전에 가상 키보드를 호출하는 단계를 더 포함하는 것을 특징으로 하는 실시간 손 포즈 인식을 통한 비접촉식 입력 인터페이스 방법
8 8
제5 항에 있어서,상기 제2-1 단계는 상기 외곽선 정보를 히스토그램화 한 뒤, 상기 오츠 알고리즘(Otsu Algorithm)을 통해 변곡점을 구함으로써 상기 손의 오른손과 왼손을 구분하도록 구성되는 것을 특징으로 하는 실시간 손 포즈 인식을 통한 비접촉식 입력 인터페이스 방법
9 9
제5 항에 있어서,상기 제3 단계는 랜삭 알고리즘(RANSAC Algorithm)을 통한 선 근사화(Line Fitting)를 이용하여 상기 손의 회전각 정보를 산출하도록 구성되는 것을 특징으로 하는 실시간 손 포즈 인식을 통한 비접촉식 입력 인터페이스 방법
10 10
제5 항에 있어서,상기 제4 단계는 상기 거리맵에 저장된 값 중 가장 큰 값을 가지는 픽셀을 상기 손의 중심점으로 추출하도록 구성되는 것을 특징으로 하는 실시간 손 포즈 인식을 통한 비접촉식 입력 인터페이스 방법
11 11
제5 항에 있어서,상기 제5 단계는,상기 손의 중심점에서 원을 확장하는 제5a 단계;상기 확장하는 원을 이용하여 손 경계 교차지점을 탐색하여 중간지점들을 검출하는 제5b 단계;상기 손의 손목에 대응하는 중간지점을 제거하는 제5c 단계;상기 손의 손가락에 대응하는 중간지점을 추출하는 제5d 단계; 및상기 제5d 단계에서 추출된 중간지점으로부터 상기 복수의 점 성분 정보를 추출하는 제5e 단계를 포함하고,상기 제5e 단계에서 추출되는 상기 복수의 점 성분 정보는, 상기 손의 손가락의 관절에 각각 대응하는 적어도 하나의 관절점 정보 및 상기 손의 손가락의 종단에 각각 대응하는 하나의 끝점 정보를 포함하는 것을 특징으로 하는 실시간 손 포즈 인식을 통한 비접촉식 입력 인터페이스 방법
12 12
제5 항에 있어서,상기 제6 단계는,상기 이전 프레임의 손이 상기 현재 프레임의 손과 일치하도록 상기 이전 프레임의 손을 회전시키는 제6a 단계;상기 이전 프레임의 손이 상기 현재 프레임의 손과 일치하도록 상기 이전 프레임의 손의 크기를 변환하는 제6b 단계;상기 제6a 및 제6b 단계를 통해 변환된 상기 이전 프레임의 손에 대한 손 정보와 상기 현재 프레임에서 획득된 손 정보를 상호 비교하며 매칭을 수행하는 제6c 단계; 및상기 제6c 단계의 매칭을 통해 상기 현재 프레임의 손 포즈를 인식하는 제6d 단계를 포함하는 것을 특징으로 하는 실시간 손 포즈 인식을 통한 비접촉식 입력 인터페이스 방법
13 13
제5 항에 있어서,상기 제1 단계의 입력 영상의 첫 프레임은 손의 다섯 손가락이 모두 펴진 상태에서 상기 제2 단계 내지 상기 제5 단계를 수행하여, 두 번째 프레임의 손 포즈 인식을 위한 최초 손 정보로 사용되는 것을 특징으로 하는 실시간 손 포즈 인식을 통한 비접촉식 입력 인터페이스 방법
14 14
제5 항에 있어서,상기 현재 프레임에서 획득된 상기 제6 단계의 상기 손 정보는 다음 프레임에서의 손 포즈 인식시, 상기 이전 프레임에서 획득된 손 정보로 전용되는 것을 특징으로 하는 실시간 손 포즈 인식을 통한 비접촉식 입력 인터페이스 방법
15 15
삭제
16 16
삭제
17 17
삭제
18 18
삭제
19 19
전자기기에,카메라로부터 촬상된 손을 포함하는 영상을 입력받는 기능;현재 프레임에서 깊이 값 미분을 통해 상기 손의 외곽선 정보를 검출하는 기능;상기 외곽선 정보와 오츠 알고리즘(Otsu Algorithm)을 이용하여 상기 손의 오른손과 왼손을 구분하는 기능;상기 현재 프레임에서 임의의 두 개의 점을 잡아 상기 손의 회전각 정보를 산출하는 기능;상기 현재 프레임에서 상기 손의 거리 맵(Distance Map)을 이용하여 상기 손의 중심점 정보를 추출하는 기능;상기 현재 프레임에서 상기 중심점을 기준으로 확장하는 원을 이용하여, 상기 손의 손가락에 대응되며 상호 이격 배열된 복수의 점 성분 정보를 추출하고, 상기 복수의 점 성분 정보에는 상기 손의 손가락의 관절에 대응하는 적어도 하나의 관절점 정보와 상기 복수의 점 성분에는 상기 손의 손가락의 종단에 대응하는 적어도 하나의 끝점 정보가 포함되도록 복수의 점 성분 정보를 추출하는 기능; 상기 현재 프레임에서 획득된 적어도 상기 복수의 점 성분 정보를 포함한 손 정보를 이용하여, 이전 프레임에서 획득된 손 정보와 매칭을 수행함으로써 상기 현재 프레임의 손 포즈를 인식하는 기능;상기 관절점 정보를 포함한 손 정보를 이용하여 상기 손의 오른손(또는 왼손)에 가상 키보드를 매핑시키는 기능;상기 오른손(또는 왼손)에 매핑된 가상 키보드에 왼손(또는 오른손)이 클릭시, 상기 관절점 정보 또는 끝점 정보를 이용하여 상기 클릭 여부를 감지하는 기능; 및상기 가상 키보드에 클릭된 손가락 끝점 주변의 복수 개의 픽셀들의 깊이 값에 임계값을 가감한 값과 상기 손가락 끝점의 깊이 값을 비교하여 상기 클릭 여부를 감지하는 기능을 실현시키기 위한 프로그램을 기록한 전자기기로 읽을 수 있는 매체
20 20
제19 항에 있어서,상기 가상 키보드를 호출하는 기능을 더 실현시키기 위한 프로그램을 기록한 전자기기로 읽을 수 있는 매체
지정국 정보가 없습니다
패밀리정보가 없습니다
국가 R&D 정보가 없습니다.