맞춤기술찾기

이전대상기술

행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 방법

  • 기술번호 : KST2015206457
  • 담당센터 : 대구기술혁신센터
  • 전화번호 : 053-550-1450
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 방법에 관한 것으로서, 보다 구체적으로는 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 방법으로서, (1) 포즈렛 검출부가 입력된 학습 정지 영상으로부터 특징 벡터로 이루어진 포즈렛(Poselet)들을 추출하여 획득하는 단계; (2) 행동 인식 학습부가 상기 단계 (1)에서 획득한 각 포즈렛에 대해 해당 포즈렛의 위치를 찾기 위해 1단계 랜덤 포레스트 분류기를 이용하여 훈련되도록 하고, 공간적 포즈렛 활성화 벡터(Spatial Poselet Activation Vector; 이하 ‘SPAV’라 칭함)를 생성하는 단계; (3) 행동 인식 학습부가 2단계 랜덤 포레스트 분류기를 이용하여 상기 단계 (2)에서 생성한 SPAV들을 하나의 벡터로 연결한 CSPAV(Concatenated SPAV)를 생성하고, 그 CSPAV를 2단계 랜덤 포레스트 분류기로 훈련하는 단계; 및 (4) 사람 영역이 포함된 테스트 입력 정지 영상이 입력되면, 행동 인식 판단부가 상기 단계 (1) 내지 단계 (3)의 과정을 통해 CSPAV를 추출한 후 2단계 랜덤 포레스트 분류기에 매칭하여 가장 큰 스코어 값을 가지는 행동 클래스를 최종 예측된 행동 클래스로 선택 결정하는 단계를 포함하는 것을 그 구성상의 특징으로 한다.본 발명에서 제안하고 있는 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 시스템 및 방법에 따르면, OCS-LBP 특징을 이용하여 포즈렛을 학습하고, 입력 영상으로부터 포즈렛을 탐색하고 확률 값을 누적하여 생성한 CSPAV를 랜덤 포레스트에 학습시켜 인식하도록 하는 2단계 분류 모델을 사용한 포즈렛 기반의 행동 인식이 가능하도록 할 수 있다.또한, 본 발명에 따르면, 이진 분류 기능의 1단계 랜덤 포레스트 분류기와 다중 클래스 분류 기능의 2단계 랜덤 포레스트 분류기를 훈련된 검출기로 적용함으로써, 입력되는 테스트 정지 영상의 행동 인식의 선택 결정 시에 계산 량을 줄이고, 정확도가 향상될 수 있도록 할 수 있다.
Int. CL G06K 9/46 (2006.01) G06T 7/20 (2006.01)
CPC G06K 9/00335(2013.01) G06K 9/00335(2013.01) G06K 9/00335(2013.01) G06K 9/00335(2013.01)
출원번호/일자 1020140014470 (2014.02.07)
출원인 계명대학교 산학협력단
등록번호/일자 10-1482970-0000 (2015.01.09)
공개번호/일자
공고번호/일자 (20150116) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 소멸
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2014.02.07)
심사청구항수 21

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 계명대학교 산학협력단 대한민국 대구광역시 달서구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 고병철 대한민국 대구광역시 수성구
2 홍준혁 대한민국 경상북도 경
3 남재열 대한민국 대구광역시 수성구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 김건우 대한민국 서울특별시 금천구 가산디지털*로 ***, 에이동 ***호 특허그룹덕원 (가산동, 우림 라이온스밸리)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 계명대학교 산학협력단 대한민국 대구광역시 달서구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2014.02.07 수리 (Accepted) 1-1-2014-0124431-15
2 등록결정서
Decision to grant
2014.12.30 발송처리완료 (Completion of Transmission) 9-5-2014-0895772-98
3 출원인정보변경(경정)신고서
Notification of change of applicant's information
2018.03.21 수리 (Accepted) 4-1-2018-5049338-19
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 시스템으로서,입력된 학습 정지 영상으로부터 특징 벡터로 이루어진 포즈렛(Poselet)들을 추출하여 획득하기 위한 포즈렛 검출부(110);상기 포즈렛 검출부(110)에서 획득한 각 포즈렛에 대해 해당 포즈렛의 위치를 찾기 위해 1단계 랜덤 포레스트 분류기(121)를 이용하여 훈련하고, 공간적 포즈렛 활성화 벡터(Spatial Poselet Activation Vector; 이하 ‘SPAV’라 칭함)를 생성하며, 2단계 랜덤 포레스트 분류기(122)를 이용하여 상기 1단계 랜덤 포레스트 분류기(121)에서 생성한 SPAV들을 하나의 벡터로 연결한 CSPAV(Concatenated SPAV)를 생성하고, 그 CSPAV를 2단계 랜덤 포레스트 분류기(122)로 훈련하는 행동 인식 학습부(120); 및사람 영역이 포함된 테스트 입력 정지 영상이 입력되면, 상기 행동 인식 학습부(120)의 1단계 랜덤 포레스트 분류기(121)와 2단계 랜덤 포레스트 분류기(122)에 순차로 적용하여 CSPAV를 추출한 후 2단계 랜덤 포레스트 분류기(122)에 매칭하여 가장 큰 스코어 값을 가지는 행동 클래스를 최종 예측된 행동 클래스로 선택 결정하는 행동 인식 판단부(130)를 포함하는 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 시스템
2 2
제1항에 있어서, 상기 포즈렛 검출부(110)는,상기 포즈렛들을 추출 획득하기 위해 주석 정보와 하우스도르프 거리(Hausdorff distance)를 이용한 행동 특정 포즈렛 선택(Action Specific Poselet Selection; 이하 ‘ASPS’라 칭함) 알고리즘(111)을 적용하는 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 시스템
3 3
제2항에 있어서, 상기 주석 정보는,사람의 주요 관절 위치를 표기한 정보인 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 시스템
4 4
제1항에 있어서, 상기 포즈렛 검출부(110)는,학습 정지 영상에 포함된 사람의 키포인트들과 위치가 주석 처리된 데이터 집합으로부터 사람 영역에 한해 램덤하게 예제 패치들을 생성하고, 랜덤하게 추출하여 생성한 예제 패치들을 행동 특정 포즈렛 선택(Action Specific Poselet Selection) 알고리즘(111)을 적용하여 포즈렛으로 군집화하는 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 시스템
5 5
제4항에 있어서, 상기 포즈렛 검출부(110)는,상기 학습 정지 영상으로부터 사람 영역을 탐색하여 검출하는 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 시스템
6 6
제4항에 있어서, 상기 포즈렛 검출부(110)는,상기 포즈렛을 ASPS 알고리즘(111)을 적용하여 군집화할 때, 해당 포즈렛 예제 패치들에 대한 분포를 구하는 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 시스템
7 7
제1항에 있어서, 상기 행동 인식 학습부(120)는,상기 1단계 랜덤 포레스트 분류기(121)를 이용한 OCS-LBP(Oriented Center-symmetric Local Binary Patterns) 특징으로 상기 포즈렛들을 학습하여 훈련시키는 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 시스템
8 8
제7항에 있어서, 상기 행동 인식 학습부(120)는,상기 검출된 포즈렛들의 스코어 값을 합하여 누적시키는 방식으로 상기 SPAV를 생성하는 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 시스템
9 9
제7항에 있어서, 상기 행동 인식 학습부(120)는,상기 1단계 랜덤 포레스트 분류기(121)를 이진 분류기로 사용하고, 상기 2단계 랜덤 포레스트 분류기(122)를 최종 다중 클래스 분류기(Final multi-class classifier)로 사용하는 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 시스템
10 10
행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 방법으로서,(1) 포즈렛 검출부(110)가 입력된 학습 정지 영상으로부터 특징 벡터로 이루어진 포즈렛(Poselet)들을 추출하여 획득하는 단계;(2) 행동 인식 학습부(120)가 상기 단계 (1)에서 획득한 각 포즈렛에 대해 해당 포즈렛의 위치를 찾기 위해 1단계 랜덤 포레스트 분류기(121)를 이용하여 훈련되도록 하고, 공간적 포즈렛 활성화 벡터(Spatial Poselet Activation Vector; 이하 ‘SPAV’라 칭함)를 생성하는 단계;(3) 행동 인식 학습부(120)가 2단계 랜덤 포레스트 분류기(122)를 이용하여 상기 단계 (2)에서 생성한 SPAV들을 하나의 벡터로 연결한 CSPAV(Concatenated SPAV)를 생성하고, 그 CSPAV를 2단계 랜덤 포레스트 분류기(122)로 훈련하는 단계; 및(4) 사람 영역이 포함된 테스트 입력 정지 영상이 입력되면, 행동 인식 판단부(130)가 상기 단계 (1) 내지 단계 (3)의 과정을 통해 CSPAV를 추출한 후 2단계 랜덤 포레스트 분류기(122)에 매칭하여 가장 큰 스코어 값을 가지는 행동 클래스를 최종 예측된 행동 클래스로 선택 결정하는 단계를 포함하는 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 방법
11 11
제10항에 있어서, 상기 단계 (1)에서는,상기 포즈렛들을 추출 획득하기 위해 주석 정보와 하우스도르프 거리(Hausdorff distance)를 이용한 행동 특정 포즈렛 선택(Action Specific Poselet Selection; 이하 ‘ASPS’라 칭함) 알고리즘(111)을 사용하는 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 방법
12 12
제11항에 있어서, 상기 주석 정보는,사람의 주요 관절 위치를 표기한 정보인 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 방법
13 13
제10항에 있어서, 상기 단계 (1)에서는,(1-1) 학습 정지 영상에 포함된 사람의 키포인트들과 위치가 주석 처리된 데이터 집합으로부터 사람 영역에 한해 램덤하게 예제 패치들을 생성하는 단계; 및(1-2) 상기 단계 (1-1)에서 랜덤하게 추출하여 생성한 예제 패치들을 행동 특정 포즈렛 선택(Action Specific Poselet Selection) 알고리즘(111)을 통해 포즈렛으로 군집화하는 단계로 이루어지는 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 방법
14 14
제13항에 있어서, 상기 단계 (1-1)에서는,상기 학습 정지 영상으로부터 사람 영역을 탐색하여 검출하는 과정을 더 포함하여 이루어지는 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 방법
15 15
제13항에 있어서, 상기 단계 (1-2)에서는,상기 포즈렛을 ASPS 알고리즘(111)을 통해 군집화할 때, 해당 포즈렛 예제 패치들에 대한 분포를 구하는 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 방법
16 16
제10항에 있어서, 상기 단계 (2)에서는,상기 행동 인식 학습부(120)가 1단계 랜덤 포레스트 분류기(121)를 이용한 OCS-LBP(Oriented Center-symmetric Local Binary Patterns) 특징으로 포즈렛들을 학습하여 훈련하는 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 방법
17 17
제16항에 있어서, 상기 단계 (2)에서는,상기 SPAV를 생성하는 과정으로 검출된 포즈렛들의 스코어 값을 합하여 누적시키는 방식으로 구하는 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 방법
18 18
제16항에 있어서, 상기 단계 (2)에서는,모든 학습 정지 영상에 대한 SPAV를 생성하는 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 방법
19 19
제10항 내지 제18항 중 어느 한 항에 있어서, 상기 단계 (3)에서는,상기 행동 인식 학습부(120)가 2단계 랜덤 포레스트 분류기(122)를 이용하여 모든 학습 정지 영상에 대한 행동 클래스별로 모든 포즈렛을 탐색하여 추출한 SPAV들을 하나의 CSPAV로 연결시키는 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 방법
20 20
제19항에 있어서, 상기 1단계 랜덤 포레스트 분류기(121)는,이진 분류기로 기능하는 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 방법
21 21
제19항에 있어서, 상기 2단계 랜덤 포레스트 분류기(122)는,최종 다중 클래스 분류기(Final multi-class classifier)로 기능하는 것을 특징으로 하는, 행동 포즈렛과 2단계 분류 모델을 이용한 정지 영상에서의 사람 행동 인식 방법
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 교육과학기술부 계명대학교 지역 혁신 인력 양성 산업 시각장애인을 위한 비전 장면 해석 기술 개발