요약 | 본 발명은 사용자의 자세 또는 포스쳐를 인식하는 장치 및 그 방법에 관한 것이다.본 발명에 따른 사용자 자세 인식 장치는 복수개의 프레임 영상에서 차분 영상을 생성하고, 상기 생성한 차분 영상에 기초하여 상기 프레임 영상에서 움직임이 존재하는 모션 영역을 분할하는 모션 영역 분할부; 상기 프레임 영상에서 사용자의 피부 후보 영역을 분할하는 피부 후보 영역 분할부; 상기 프레임 영상에서 상기 피부 후보 영역과 상기 모션 영역 간에 대응하는 영역을 피부 영역으로 검출하는 피부 영역 검출부; 및 상기 프레임 영상 내 상기 피부 영역을 분석하여 상기 사용자의 자세 또는 제스쳐를 인식하는 사용자 자세 인식부를 포함할 수 있다. |
---|---|
Int. CL | G06K 9/00 (2006.01.01) G06K 9/46 (2006.01.01) G06K 9/62 (2006.01.01) |
CPC | G06K 9/00369(2013.01) G06K 9/00369(2013.01) G06K 9/00369(2013.01) G06K 9/00369(2013.01) G06K 9/00369(2013.01) |
출원번호/일자 | 1020150180709 (2015.12.17) |
출원인 | 연세대학교 산학협력단, 한국전자통신연구원 |
등록번호/일자 | 10-1751417-0000 (2017.06.21) |
공개번호/일자 | |
공고번호/일자 | (20170627) 문서열기 |
국제출원번호/일자 | |
국제공개번호/일자 | |
우선권정보 | |
법적상태 | 등록 |
심사진행상태 | 수리 |
심판사항 | |
구분 | 신규 |
원출원번호/일자 | |
관련 출원번호 | |
심사청구여부/일자 | Y (2015.12.17) |
심사청구항수 | 18 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 연세대학교 산학협력단 | 대한민국 | 서울특별시 서대문구 |
2 | 한국전자통신연구원 | 대한민국 | 대전광역시 유성구 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 변혜란 | 대한민국 | 서울특별시 서대문구 |
2 | 임광용 | 대한민국 | 서울특별시 서대문구 |
3 | 이수웅 | 대한민국 | 세종특별자치시 도움*로 |
4 | 유호영 | 대한민국 | 대전광역시 서구 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 특허법인우인 | 대한민국 | 서울특별시 강남구 역삼로 ***, *층(역삼동, 중평빌딩) |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 연세대학교 산학협력단 | 대한민국 | 서울특별시 서대문구 |
2 | 한국전자통신연구원 | 대한민국 | 대전광역시 유성구 |
번호 | 서류명 | 접수/발송일자 | 처리상태 | 접수/발송번호 |
---|---|---|---|---|
1 | [특허출원]특허출원서 [Patent Application] Patent Application |
2015.12.17 | 수리 (Accepted) | 1-1-2015-1237483-64 |
2 | 선행기술조사의뢰서 Request for Prior Art Search |
2016.09.09 | 수리 (Accepted) | 9-1-9999-9999999-89 |
3 | 선행기술조사보고서 Report of Prior Art Search |
2016.10.25 | 수리 (Accepted) | 9-1-2016-0044737-59 |
4 | 의견제출통지서 Notification of reason for refusal |
2016.10.27 | 발송처리완료 (Completion of Transmission) | 9-5-2016-0774749-67 |
5 | [명세서등 보정]보정서 [Amendment to Description, etc.] Amendment |
2016.12.26 | 보정승인간주 (Regarded as an acceptance of amendment) | 1-1-2016-1273336-39 |
6 | [거절이유 등 통지에 따른 의견]의견(답변, 소명)서 [Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation) |
2016.12.26 | 수리 (Accepted) | 1-1-2016-1273335-94 |
7 | 등록결정서 Decision to grant |
2017.05.10 | 발송처리완료 (Completion of Transmission) | 9-5-2017-0329039-88 |
번호 | 청구항 |
---|---|
1 |
1 복수개의 프레임 영상에서 차분 영상을 생성하고, 상기 생성한 차분 영상에 기초하여 상기 프레임 영상에서 움직임이 존재하는 모션 영역을 분할하는 모션 영역 분할부;상기 프레임 영상에서 사용자의 피부 후보 영역을 분할하는 피부 후보 영역 분할부;상기 프레임 영상에서 상기 피부 후보 영역과 상기 모션 영역 간에 대응하는 영역을 피부 영역으로 검출하는 피부 영역 검출부; 및상기 프레임 영상 내 상기 피부 영역을 분석하여 상기 사용자의 자세 또는 제스쳐를 인식하는 사용자 자세 인식부를 포함하며,상기 모션 영역 분할부는,상기 프레임 영상 간에 각 화소에서의 영상 신호 값의 차이에 따라 상기 차분 영상을 생성하는 차분 영상 생성부; 및상기 차분 영상의 영상 신호 값의 크기를 기준으로 상기 모션 영역을 검출하여 분할하는 모션 영역 검출부를 포함하는 것을 특징으로 하는 사용자 자세 인식 장치 |
2 |
2 삭제 |
3 |
3 제1항에 있어서,상기 모션 영역 검출부는 상기 차분 영상의 영상 신호 값을 소정의 임계치와 비교한 비교 결과에 따라 상기 모션 영역을 검출하는 것을 특징으로 하는 사용자 자세 인식 장치 |
4 |
4 제3항에 있어서,상기 모션 영역 검출부는 복수개의 상기 프레임 영상과 기준 프레임 간의 차이의 크기의 평균에 따라 상기 임계치를 설정하는 것을 특징으로 하는 사용자 자세 인식 장치 |
5 |
5 제3항에 있어서,상기 차분 영상 생성부는 적어도 세 개 이상의 상기 프레임 영상 간에 적어도 두 개 이상의 상기 차분 영상을 생성하고,상기 모션 영역 검출부는 상기 차분 영상의 영상 신호 값을 각 화소 별로 상기 임계치와 비교하여 그 비교 결과에 따라 각 화소 별 모션 발생 판단 값을 설정하고, 복수개의 상기 차분 영상 별로 설정한 상기 모션 발생 판단 값에 기초하여 상기 모션 영역을 검출하는 것을 특징으로 하는 사용자 자세 인식 장치 |
6 |
6 제5항에 있어서,상기 모션 영역 검출부는 상기 복수개의 상기 차분 영상 별로 설정한 상기 모션 발생 판단 값의 평균 값을 산출하고, 상기 산출한 평균 값이 소정의 크기 이상을 가지는 영역을 상기 모션 영역으로 검출하는 것을 특징으로 하는 사용자 자세 인식 장치 |
7 |
7 제1항에 있어서,상기 피부 후보 영역 분할부는 상기 프레임 영상에서 상기 사용자의 피부 색상을 추출하고, 상기 추출한 피부 색상에 기초하여 상기 프레임 영상에서 상기 피부 후보 영역을 분할하는 것을 특징으로 하는 사용자 자세 인식 장치 |
8 |
8 제1항에 있어서, 상기 피부 후보 영역 분할부는,상기 프레임 영상에서 상기 사용자의 얼굴을 검출하는 얼굴 검출부;상기 검출한 얼굴에서 상기 사용자의 피부 색상을 추출하는 피부 색상 추출부; 및상기 프레임 영상에서 상기 추출한 피부 색상에 대응하는 피부 색상 영역을 분할하여 상기 피부 후보 영역으로 설정하는 피부 색상 영역 분할부를 포함하는 것을 특징으로 하는 사용자 자세 인식 장치 |
9 |
9 제8항에서,상기 얼굴 검출부는 Haar-like 특징 또는 LBP(Local Binary Pattern) 특징에 기반한 얼굴 검출 알고리즘을 이용하여 상기 사용자의 얼굴을 검출하는 것을 특징으로 하는 사용자 자세 인식 장치 |
10 |
10 제8항에 있어서,상기 피부 색상 추출부는 상기 프레임 영상에서 검출된 상기 얼굴에 대응하는 영상 블록에서 영상 세그멘테이션을 수행하고, 상기 영상 세그멘테이션에 따라 상기 사용자의 안면으로 분할된 영역의 영상 신호에 따라 상기 피부 색상을 결정하는 것을 특징으로 하는 사용자 자세 인식 장치 |
11 |
11 제8항에 있어서,상기 피부 색상 영역 분할부는 상기 피부 색상에 기초하여 상기 프레임 영상에서 영상 세그멘테이션을 수행하고, 상기 영상 세그멘테이션의 수행 결과 상기 피부 색상에 대응하는 영역으로 분할된 영역을 상기 피부 색상 영역으로 결정하는 것을 특징으로 하는 사용자 자세 인식 장치 |
12 |
12 제10항 또는 제11항에 있어서,상기 영상 세그멘테이션은 Mean-Shift 기법을 이용한 세그멘테이션인 것을 특징으로 하는 사용자 자세 인식 장치 |
13 |
13 제1항에 있어서, 상기 피부 후보 영역 분할부는 미리 설정된 피부색 임계치에 기초하여, 상기 프레임 영상에서 상기 피부색 임계치 내의 영상 신호 값을 가지는 영역을 상기 피부 후보 영역으로 분할하는 것을 특징으로 하는 사용자 자세 인식 장치 |
14 |
14 제1항에 있어서,상기 피부 영역 검출부는 상기 피부 후보 영역과 상기 모션 영역 간의 거리가 소정의 거리 이내인 영역을 상기 피부 영역으로 검출하는 것을 특징으로 하는 사용자 자세 인식 장치 |
15 |
15 제1항에 있어서,상기 피부 영역 검출부는 상기 피부 후보 영역과 상기 모션 영역 간에 오버레이 되는 영역을 상기 피부 영역으로 검출하는 것을 특징으로 하는 사용자 자세 인식 장치 |
16 |
16 제1항에 있어서,상기 사용자 자세 인식부는 상기 프레임 영상 내에서 상기 피부 영역이 존재하는 위치에 따라 상기 사용자의 자세를 인식하는 것을 특징으로 하는 사용자 자세 인식 장치 |
17 |
17 제1항에 있어서,상기 사용자 자세 인식부는 상기 피부 영역의 영상 신호를 분석하여 상기 사용자의 제스쳐를 인식하는 것을 특징으로 하는 사용자 자세 인식 장치 |
18 |
18 복수개의 프레임 영상에서 차분 영상을 생성하고, 상기 생성한 차분 영상에 기초하여 상기 프레임 영상에서 움직임이 존재하는 모션 영역을 분할하는 모션 영역 분할 단계;상기 프레임 영상에서 사용자의 피부 후보 영역을 분할하는 피부 후보 영역 분할 단계;상기 프레임 영상에서 상기 피부 후보 영역과 상기 모션 영역 간에 대응하는 영역을 피부 영역으로 검출하는 피부 영역 검출 단계; 및상기 프레임 영상 내 상기 피부 영역을 분석하여 상기 사용자의 자세 또는 제스쳐를 인식하는 사용자 자세 인식 단계를 포함하며,상기 모션 영역 분할 단계는,상기 프레임 영상 간에 각 화소에서의 영상 신호 값의 차이에 따라 상기 차분 영상을 생성하는 차분 영상 생성 단계; 및상기 차분 영상의 영상 신호 값의 크기를 기준으로 상기 모션 영역을 검출하여 분할하는 모션 영역 검출 단계를 포함하는 것을 특징으로 하는 사용자 자세 인식 방법 |
19 |
19 삭제 |
20 |
20 제18항에 있어서, 상기 피부 후보 영역 분할 단계는,상기 프레임 영상에서 상기 사용자의 얼굴을 검출하는 얼굴 검출 단계;상기 검출한 얼굴에서 상기 사용자의 피부 색상을 추출하는 피부 색상 추출 단계; 및상기 프레임 영상에서 상기 추출한 피부 색상에 대응하는 피부 색상 영역을 분할하여 상기 피부 후보 영역으로 설정하는 피부 색상 영역 분할 단계를 포함하는 것을 특징으로 하는 사용자 자세 인식 방법 |
지정국 정보가 없습니다 |
---|
패밀리정보가 없습니다 |
---|
순번 | 연구부처 | 주관기관 | 연구사업 | 연구과제 |
---|---|---|---|---|
1 | 미래창조과학부 | 연세대학교 산학협력단 | 중견연구자지원사업 | 장면 요소 정보 간 관련성 분석을 통한 영상 장면 해석 기술 연구(3/3)(2013.6.1~2016.5.31) |
2 | 미래창조과학부 | 한국전자통신연구원 | ICT산업융합진흥사업 | 학습자 콘텐츠 참여지원 기술 개발(4/4) |
공개전문 정보가 없습니다 |
---|
특허 등록번호 | 10-1751417-0000 |
---|
표시번호 | 사항 |
---|---|
1 |
출원 연월일 : 20151217 출원 번호 : 1020150180709 공고 연월일 : 20170627 공고 번호 : 특허결정(심결)연월일 : 20170510 청구범위의 항수 : 18 유별 : G06K 9/00 발명의 명칭 : 사용자 자세 인식 장치 및 그 방법 존속기간(예정)만료일 : |
순위번호 | 사항 |
---|---|
1 |
(권리자) 한국전자통신연구원 대전광역시 유성구... |
1 |
(권리자) 연세대학교 산학협력단 서울특별시 서대문구... |
제 1 - 3 년분 | 금 액 | 373,500 원 | 2017년 06월 21일 | 납입 |
제 4 년분 | 금 액 | 218,000 원 | 2020년 03월 05일 | 납입 |
번호 | 서류명 | 접수/발송일자 | 처리상태 | 접수/발송번호 |
---|---|---|---|---|
1 | [특허출원]특허출원서 | 2015.12.17 | 수리 (Accepted) | 1-1-2015-1237483-64 |
2 | 선행기술조사의뢰서 | 2016.09.09 | 수리 (Accepted) | 9-1-9999-9999999-89 |
3 | 선행기술조사보고서 | 2016.10.25 | 수리 (Accepted) | 9-1-2016-0044737-59 |
4 | 의견제출통지서 | 2016.10.27 | 발송처리완료 (Completion of Transmission) | 9-5-2016-0774749-67 |
5 | [명세서등 보정]보정서 | 2016.12.26 | 보정승인간주 (Regarded as an acceptance of amendment) | 1-1-2016-1273336-39 |
6 | [거절이유 등 통지에 따른 의견]의견(답변, 소명)서 | 2016.12.26 | 수리 (Accepted) | 1-1-2016-1273335-94 |
7 | 등록결정서 | 2017.05.10 | 발송처리완료 (Completion of Transmission) | 9-5-2017-0329039-88 |
기술정보가 없습니다 |
---|
과제고유번호 | 1711024308 |
---|---|
세부과제번호 | 2013R1A2A1A01015870 |
연구과제명 | 장면 요소 정보 간 관련성 분석을 통한 영상 장면 해석 기술 연구 |
성과구분 | 출원 |
부처명 | 미래창조과학부 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2015 |
연구기간 | 201306~201605 |
기여율 | 0.5 |
연구개발단계명 | 기초연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1711026697 |
---|---|
세부과제번호 | B0101-15-0223 |
연구과제명 | 참여형 양방향 콘텐츠 및 협력 학습환경 기반 학습자 맞춤형 상호작용 창의학습 튜터링 기술 개발 |
성과구분 | 출원 |
부처명 | 미래창조과학부 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2015 |
연구기간 | 201404~201802 |
기여율 | 0.5 |
연구개발단계명 | 개발연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1711024308 |
---|---|
세부과제번호 | 2013R1A2A1A01015870 |
연구과제명 | 장면 요소 정보 간 관련성 분석을 통한 영상 장면 해석 기술 연구 |
성과구분 | 등록 |
부처명 | 미래창조과학부 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2015 |
연구기간 | 201306~201605 |
기여율 | 0.5 |
연구개발단계명 | 기초연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1711026697 |
---|---|
세부과제번호 | B0101-15-0223 |
연구과제명 | 참여형 양방향 콘텐츠 및 협력 학습환경 기반 학습자 맞춤형 상호작용 창의학습 튜터링 기술 개발 |
성과구분 | 등록 |
부처명 | 미래창조과학부 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2015 |
연구기간 | 201404~201802 |
기여율 | 0.5 |
연구개발단계명 | 개발연구 |
6T분류명 | IT(정보기술) |
[1020160006419] | 이동 물체 검출 장치 및 그 방법 | 새창보기 |
---|---|---|
[1020150181270] | 당구 점수 계산 장치 및 그 방법(Method and Apparatus of Scoring Pool) | 새창보기 |
[1020150180709] | 사용자 자세 인식 장치 및 그 방법 | 새창보기 |
[1020150176637] | 물체-행동 관계 모델에 기반한 행동 인식 방법 및 그 장치(Apparatus and Method of Behavior Recognition based on Object-Behavior Relation Model) | 새창보기 |
[1020150167923] | 공간-물체 관계 그래프에 기반한 객체 인식 방법 및 그 장치(Apparatus and Method of Object Recognition based on Space-Object Relation Graph) | 새창보기 |
[1020150167871] | 보안 전화 장치 및 기밀 유출 방지 방법(Secure phone and Method of preventing leakage of confidential information thereof) | 새창보기 |
[1020150127809] | 음식 영상의 시각적 풍미 강조 장치 및 그 방법(Apparatus and Method of Enhancing Visual Flavor of Food Image) | 새창보기 |
[1020150125417] | RGB-D 영상 기반 사람 영역 추출 장치 및 그 방법(Apparatus and method for extracting person domain based on RGB-Depth image) | 새창보기 |
[1020150125393] | 컨볼루션 신경망을 이용한 객체 인식 장치 및 방법(Apparatus and method for object recognition with convolution neural network) | 새창보기 |
[1020150084216] | 영상정보를 이용한 증강현실 기반 손 인터랙션 장치 및 방법(THE BARE HAND INTERACTION APPARATUS AND METHOD FOR AUGMENTED REARITY USING RGB-D IMAGES) | 새창보기 |
[KST2015127672][연세대학교] | 비접촉식 5지 지문 영상 획득 장치 | 새창보기 |
---|---|---|
[KST2015012879][연세대학교] | 객체 인식 방법 및 그 장치 | 새창보기 |
[KST2017016096][연세대학교] | 바이오 정보를 이용하는 사용자 인증 방법 및 사용자 인증을 위한 인증 서버, 바이오 인식 장치(Method for User Authentication Using Biometirc Information, Authentication Server and Biometric Device for User Authentication) | 새창보기 |
[KST2018003316][연세대학교] | 실시간 영상을 이용하여 위험 상황을 예측하기 위한 영상 처리 방법, 장치 및 그를 이용하여 위험 상황을 예측하는 방법, 서버(IMAGE PROCESSING METHOD, APPARATUS FOR PREDICTING DANGEROUS SITUATION AND METHOD, SERVER FOR PREDICTING DANGEROUS SITUATION USING THEREOF) | 새창보기 |
[KST2018010110][연세대학교] | 실험동물 시력 측정 방법 및 장치 | 새창보기 |
[KST2020012204][연세대학교] | 시멘틱 매칭 장치 및 방법 | 새창보기 |
[KST2017009522][연세대학교] | 공간-물체 관계 그래프에 기반한 객체 인식 방법 및 그 장치(Apparatus and Method of Object Recognition based on Space-Object Relation Graph) | 새창보기 |
[KST2015127202][연세대학교] | 이미지 선명도 측정 장치 및 방법 | 새창보기 |
[KST2015127243][연세대학교] | 스마트 3차원 제스처 인식 장치 및 방법 | 새창보기 |
[KST2014020599][연세대학교] | 객체 인식 장치 및 방법 | 새창보기 |
[KST2016008811][연세대학교] | 웨어러블 디바이스를 이용한 심리안정 서비스 제공방법, 심리안정 서비스 제공방법을 실행시키기 위하여 매체에 저장된 컴퓨터프로그램 및 웨어러블 디바이스를 이용한 심리안정 서비스 제공시스템(METHOD FOR PROVINING PSYCHOLOGICAL STABILITY USING WEARABLE DEVICE, COMPUTER PROGRAM THEREOF AND SYSTEM FOR PROVINING PSYCHOLOGICAL TABILITY USING WEARABLE DEVICE) | 새창보기 |
[KST2015125024][연세대학교] | 비접촉식 연속 지문 영상 획득 장치 | 새창보기 |
[KST2015126049][연세대학교] | 생체정보 변환 방법 및 이를 이용한 검증시스템 | 새창보기 |
[KST2015127580][연세대학교] | 배경확산 및 영역확장을 이용한 물체 검출 방법 및 장치, 이를 이용한 물체 추적 방법 및 장치 | 새창보기 |
[KST2014008632][연세대학교] | 고해상도 홍채 영상 복원 방법 | 새창보기 |
[KST2015125210][연세대학교] | 얼굴인식 장치와 그 방법 | 새창보기 |
[KST2017012197][연세대학교] | 스캔도서 식별을 위한 특징벡터 클러스터링 및 데이터베이스 생성 방법(Feature Vector Clustering and Database Generating Method for Scanning Books Identification) | 새창보기 |
[KST2017010213][연세대학교] | 물체-행동 관계 모델에 기반한 행동 인식 방법 및 그 장치(Apparatus and Method of Behavior Recognition based on Object-Behavior Relation Model) | 새창보기 |
[KST2015127469][연세대학교] | 시각 내비게이션 방법 및 장치 | 새창보기 |
[KST2015126421][연세대학교] | 휴대폰 카메라를 이용한 비접촉식 지문 영상 촬영방법 | 새창보기 |
[KST2015013034][연세대학교] | 특징 벡터 생성 방법 및 그 장치, 이를 이용한 영상 인식 방법 및 장치 | 새창보기 |
[KST2017012365][연세대학교] | 다중 카메라를 이용한 이륜차 검출 방법 및 그 장치(Method and Apparatus for Cyclist Detection using Multi Camera) | 새창보기 |
[KST2017010739][연세대학교] | 3D 모델을 활용한 2D 영상 학습 데이터 생성 시스템 및 그 생성방법(2D IMAGE DATA GENERATION SYSTEM USING OF 3D MODEL, AND THEREOF METHOD) | 새창보기 |
[KST2015125786][연세대학교] | 거울을 이용한 비접촉식 지문 영상 획득 장치 | 새창보기 |
[KST2017010211][연세대학교] | 얼굴 검출 기반 신체 부위 분할 방법(Method of Body Part Segmentation based on Face Detection) | 새창보기 |
[KST2015125850][연세대학교] | 증강 현실을 이용한 사용자 설명서 제공 단말기, 서버 및 방법 | 새창보기 |
[KST2015124888][연세대학교] | 홍채 인식 성능 향상을 위한 눈꺼풀 검출과 속눈썹 보간방법 | 새창보기 |
[KST2015125562][연세대학교] | 다시점 지문영상의 결합방법 | 새창보기 |
[KST2019033812][연세대학교] | 이진 분류기를 이용한 클래스 분류기 설계 방법 및 장치 | 새창보기 |
[KST2017009962][연세대학교] | 영상에서의 신체 부위 검출 방법 및 그 장치(Apparatus and Method of Body Part Detection in Image) | 새창보기 |
심판사항 정보가 없습니다 |
---|