맞춤기술찾기

이전대상기술

행동 패턴 인식 장치, 행동 패턴 인식 방법 및 행동 패턴 분류기 생성 방법(APPARATUS AND METHOD FOR ACTION PATTERN RECOGNITION, AND METHOD FOR GENERATING OF ACTION PATTERN CLASSIFIER)

  • 기술번호 : KST2018002202
  • 담당센터 : 서울동부기술혁신센터
  • 전화번호 : 02-2155-3662
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 객체에 대한 행동 패턴 인식 장치는 객체의 행동 패턴 인식 프로그램이 저장된 메모리 및 메모리에 저장된 프로그램을 실행하는 프로세서를 포함하고, 프로세서는 프로그램의 실행에 따라, 객체에 대한 영상 데이터로부터 밀도 궤적 특징을 추출하고, 밀도 궤적 특징에 기초하여 객체에 대한 밀도 궤적 공분산 행렬을 산출하고, 행동 패턴 분류기 및 객체에 대한 밀도 궤적 공분산 행렬에 기초하여 객체에 대한 행동 패턴을 분류한다. 이때, 영상 데이터는 객체에 대응하는 하나 이상의 시점의 영상 데이터이며, 행동 패턴 분류기는 학습 영상 데이터에 기초하여 생성된 것으로, 밀도 궤적 공분산 행렬을 통과시켜 하나 이상의 행동 패턴으로 분류하는 것이며, 학습 영상 데이터는 복수의 행동 패턴에 대하여 각각 수집된 하나 이상의 시점의 영상 데이터이다.
Int. CL G06F 15/18 (2016.09.21) G06K 9/00 (2016.09.21) G06K 9/46 (2016.09.21) G06F 17/16 (2016.09.21)
CPC G06K 9/00335(2013.01) G06K 9/00335(2013.01) G06K 9/00335(2013.01) G06K 9/00335(2013.01) G06K 9/00335(2013.01)
출원번호/일자 1020160104595 (2016.08.18)
출원인 고려대학교 산학협력단
등록번호/일자
공개번호/일자 10-2018-0020376 (2018.02.28) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2016.08.18)
심사청구항수 15

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 고려대학교 산학협력단 대한민국 서울특별시 성북구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 이성환 서울특별시 강남구
2 이상준 서울특별시 노원구
3 이동규 서울특별시 성북구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인엠에이피에스 대한민국 서울특별시 강남구 테헤란로*길 **, *층 (역삼동, 한동빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 고려대학교 산학협력단 서울특별시 성북구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2016.08.18 수리 (Accepted) 1-1-2016-0799902-30
2 선행기술조사의뢰서
Request for Prior Art Search
2017.07.11 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2017.09.06 발송처리완료 (Completion of Transmission) 9-6-2017-0135464-08
4 의견제출통지서
Notification of reason for refusal
2017.09.12 발송처리완료 (Completion of Transmission) 9-5-2017-0640616-85
5 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2017.11.13 수리 (Accepted) 1-1-2017-1123764-73
6 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2017.11.13 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2017-1123796-23
7 [출원서등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2017.11.13 수리 (Accepted) 1-1-2017-1123823-79
8 최후의견제출통지서
Notification of reason for final refusal
2018.03.22 발송처리완료 (Completion of Transmission) 9-5-2018-0202631-43
9 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2018.03.30 수리 (Accepted) 1-1-2018-0320031-57
10 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2018.03.30 보정승인 (Acceptance of amendment) 1-1-2018-0320032-03
11 등록결정서
Decision to grant
2018.06.11 발송처리완료 (Completion of Transmission) 9-5-2018-0392442-76
12 [출원서등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2018.12.24 수리 (Accepted) 1-1-2018-1296691-85
13 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.10.10 수리 (Accepted) 4-1-2019-5210941-09
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
객체에 대한 행동 패턴 인식 장치에 있어서, 객체의 행동 패턴 인식 프로그램이 저장된 메모리; 및상기 메모리에 저장된 프로그램을 실행하는 프로세서를 포함하고, 상기 프로세서는 상기 프로그램의 실행에 따라, 상기 객체에 대해 서로 다른 방향에서 촬영된 복수의 시점의 영상 데이터 별로 밀도 궤적 특징을 추출하고, 상기 밀도 궤적 특징에 기초하여 상기 객체로부터 추출된 HOG(histogram of oriented gradient) 특징을 포함하는 주변 외형 정보를 추출하고, 상기 주변 외형 정보에 기초하여 상기 객체에 대한 밀도 궤적 공분산 행렬을 산출하고, 밀도 궤적 공분산 행렬에 기초하여 기설정된 복수의 행동 패턴 중 어느 하나로 분류하는 행동 패턴 분류기를 통해 상기 객체에 대한 밀도 궤적 공분산 행렬에 따른 행동 패턴을 분류하되, 상기 행동 패턴 분류기는 상기 복수의 행동 패턴에 대하여 각각 수집된 하나 이상의 시점의 영상 데이터를 학습 영상 데이터로서 사용하여 생성된 것이고,상기 밀도 궤적 특징은 상기 영상 데이터에 포함된 기설정된 개수의 프레임 또는 정지 영상 데이터에 대해 추출된 것인, 객체에 대한 행동 패턴 인식 장치
2 2
제 1 항에 있어서, 상기 프로세서는 상기 밀도 궤적 특징에 기초하여 상기 객체에 대한 주변 움직임 정보를 더 추출하고, 상기 주변 외형 정보 및 상기 주변 움직임 정보에 기초하여 상기 객체에 대한 밀도 궤적 공분산 행렬을 산출하는 것인, 객체에 대한 행동 패턴 인식 장치
3 3
제 2 항에 있어서, 상기 주변 움직임 정보는 상기 객체로부터 추출된 HOF(histogram of optical flow) 특징 및 MBH(motion boundary histogram) 특징 중 적어도 하나 이상을 포함하는, 객체에 대한 행동 패턴 인식 장치
4 4
제 1 항에 있어서, 상기 프로세서는 상기 객체에 대한 영상 데이터로부터 전경 영상을 추출하고, 상기 전경 영상을 이용하여 상기 밀도 궤적 특징으로부터 잡음을 제거하는 전처리를 수행하는 것인, 객체에 대한 행동 패턴 인식 장치
5 5
제 1 항에 있어서, 상기 프로세서는 상기 객체에 대한 밀도 궤적 공분산 행렬에 기초하여 행동 기술자를 추출하고, 상기 행동 기술자 및 상기 행동 패턴 분류기에 기초하여 상기 객체에 대한 행동 패턴을 분류하는 것인, 객체에 대한 행동 패턴 인식 장치
6 6
제 5 항에 있어서, 상기 프로세서는 상기 객체에 대한 밀도 궤적 공분산 행렬에 기초하여 밀도 궤적 로그 공분산 행렬을 산출하고, 상기 밀도 궤적 로그 공분산 행렬에 기초하여 상기 행동 기술자를 추출하는 것인, 객체에 대한 행동 패턴 인식 장치
7 7
제 1 항에 있어서, 상기 프로세서는 상기 학습 영상 데이터로부터 밀도 궤적 특징을 추출하고, 상기 학습 영상 데이터로부터 추출된 밀도 궤적 특징에 기초하여 상기 학습 영상 데이터에 대한 밀도 궤적 공분산 행렬을 산출하고, 상기 영상 데이터에 대한 밀도 궤적 공분산 행렬에 기초하여 상기 행동 패턴 분류기를 생성하는 것인, 객체에 대한 행동 패턴 인식 장치
8 8
제 7 항에 있어서, 상기 프로세서는 상기 학습 영상 데이터에 대한 밀도 궤적 공분산 행렬 및 지지 벡터 머신 알고리즘에 기초하여 상기 행동 패턴 분류기를 생성하는 것인, 객체에 대한 행동 패턴 인식 장치
9 9
제 1 항에 있어서,각각 서로 다른 방향에서 상기 객체를 동시에 촬영하도록 배치되어 복수의 시점에서 상기 객체에 대한 영상 데이터를 수집하는 복수의 카메라, 또는 일정 시간 간격을 두고 서로 다른 방향에서 연속적으로 촬영하여 복수의 시점에서 상기 객체에 대한 영상 데이터를 수집하는 단일 카메라를 더 포함하되,상기 프로세서는 상기 카메라로부터 수집된 복수의 시점의 영상 데이터에 기초하여 상기 밀도 궤적 특징을 추출하는, 객체에 대한 행동 패턴 인식 장치
10 10
행동 패턴 인식 장치의 객체에 대한 행동 패턴 인식 방법에 있어서, 객체에 대해 서로 다른 방향에서 촬영된 복수의 시점의 영상 데이터 별로 밀도 궤적 특징을 추출하는 단계;상기 밀도 궤적 특징에 기초하여 상기 객체로부터 추출된 HOG(histogram of oriented gradient) 특징을 포함하는 주변 외형 정보를 추출하는 단계;상기 주변 외형 정보에 기초하여 상기 객체에 대한 밀도 궤적 공분산 행렬을 산출하는 단계; 및 밀도 궤적 공분산 행렬에 기초하여 기설정된 복수의 행동 패턴 중 어느 하나로 분류하는 행동 패턴 분류기를 통해 상기 객체에 대한 밀도 궤적 공분산 행렬에 따른 행동 패턴을 분류하는 단계를 포함하되, 상기 행동 패턴 분류기는 상기 복수의 행동 패턴에 대하여 각각 수집된 하나 이상의 시점의 영상 데이터를 학습 영상 데이터로서 사용하여 생성된 것이고,상기 밀도 궤적 특징은 상기 영상 데이터에 포함된 기설정된 개수의 프레임 또는 정지 영상 데이터에 대해 추출된 것인, 객체에 대한 행동 패턴 인식 방법
11 11
제 10 항에 있어서, 상기 객체에 대한 밀도 궤적 공분산 행렬을 산출하는 단계 이전에, 상기 복수의 시점의 영상 데이터 별로 추출된 밀도 궤적 특징에 기초하여 상기 객체에 대한 주변 움직임 정보를 추출하는 단계를 더 포함하며,상기 주변 외형 정보 및 상기 주변 움직임 정보에 기초하여 상기 객체에 대한 밀도 궤적 공분산 행렬을 산출하는, 객체에 대한 행동 패턴 인식 방법
12 12
제 11 항에 있어서, 상기 주변 움직임 정보는 상기 객체로부터 추출된 HOF(histogram of optical flow) 특징 및 MBH(motion boundary histogram) 특징 중 적어도 하나를 포함하는, 객체에 대한 행동 패턴 인식 방법
13 13
제 10 항에 있어서,상기 밀도 궤적 특징을 추출하는 단계는, 각각 서로 다른 방향에서 상기 객체를 촬영하도록 배치되어 복수의 시점에서 상기 객체에 대한 영상 데이터를 수집하는 복수의 카메라, 또는 일정 시간 간격을 두고 서로 다른 방향에서 연속적으로 촬영하여 복수의 시점에서 상기 객체에 대한 영상 데이터를 수집하는 단일 카메라로부터 상기 객체에 대한 복수의 시점의 영상 데이터를 획득하는 단계; 및상기 객체에 대한 복수의 시점의 영상 데이터로부터 상기 밀도 궤적 특징을 추출하는 단계를 포함하는, 객체에 대한 행동 패턴 인식 방법
14 14
행동 패턴 인식 장치의 행동 패턴 분류기 생성 방법에 있어서, 기설정된 복수의 행동 패턴이 레이블링된 학습 영상 데이터로부터 밀도 궤적 특징을 추출하는 단계;상기 학습 영상 데이터로부터 추출된 밀도 궤적 특징에 기초하여, 임의의 객체를 복수의 시점에서 촬영한 영상 데이터에서 상기 객체로부터 추출된 HOG(histogram of oriented gradient) 특징을 포함하는 주변 외형 정보를 추출하는 단계;상기 주변 외형 정보에 기초하여 상기 학습 영상 데이터에 대한 밀도 궤적 공분산 행렬을 산출하는 단계; 및 상기 학습 영상 데이터에 대한 밀도 궤적 공분산 행렬에 기초하여 상기 복수의 행동 패턴 중 어느 하나로 분류하는 행동 패턴 분류기를 생성하는 단계를 포함하되, 상기 밀도 궤적 특징은 상기 영상 데이터에 포함된 기설정된 개수의 프레임 또는 정지 영상 데이터에 대해 추출된 것이고,상기 학습 영상 데이터는 상기 복수의 행동 패턴에 대하여 각각 수집된 하나 이상의 시점의 영상 데이터인, 행동 패턴 분류기 생성 방법
15 15
제 10 항 내지 제 14 항 중 어느 한 항에 기재된 방법을 컴퓨터 상에서 수행하기 위한 프로그램을 기록한 컴퓨터 판독 가능한 기록 매체
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 산업통상자원부 한국과학기술연구원 로봇산업융합핵심기술개발사업 인식센서융합 기반 실환경하에서 임의의 사용자 30명에 대해 인식률 99%에 근접하는 사용자의 신원과 행위 및 위치 정보 인식 기술 개발
2 과학기술정보통신부 고려대학교 산학협력단 ICT융합산업원천기술개발 Deep Learning 기반의 보행자 안전 지원 스마트카 비전 기술의 개발