맞춤기술찾기

이전대상기술

스켈레톤 자세 데이터세트를 이용한 비디오 기반 상호 활동 모델링 방법(METHOD OF MODELING A VIDEO-BASED INTERACTIVE ACTIVITY USING THE SKELETON POSTURE DATSET)

  • 기술번호 : KST2017005400
  • 담당센터 : 서울동부기술혁신센터
  • 전화번호 : 02-2155-3662
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 스켈레톤 자세 데이터세트를 이용한 비디오 기반 상호 활동 모델링 방법에 관한 것으로서, 일실시예에 따른 상호 활동 모델링 방법은 비디오로부터 추출한 2차원 스켈레톤 위치의 데이터 세트를 입력받는 단계, 상기 입력된 데이터 세트로부터 오브젝트의 위치 좌표들을 연산하는 단계, 상기 연산된 오브젝트의 위치 좌표들로부터 상기 오브젝트의 움직임 속도 및 움직임 방향을 포함하는 트래킹 특징들을 계산하는 단계, 상기 오브젝트에 대응되는 상호 존과 상기 계산된 트래킹 특징들에 기초하여 상호 오브젝트를 결정하는 단계, 상기 결정된 상호 오브젝트에 대한 스켈레톤의 데이터 세트로부터 특징들을 계산하는 단계, 및 상기 계산된 특징들을 싱글 휴먼 액션들의 토픽들과 상호 그룹 활동들에 모델링하는 단계를 포함한다.
Int. CL G06K 9/00 (2006.01.01)
CPC G06K 9/00342(2013.01) G06K 9/00342(2013.01)
출원번호/일자 1020150122086 (2015.08.28)
출원인 경희대학교 산학협력단, 숙명여자대학교산학협력단
등록번호/일자
공개번호/일자 10-2017-0025535 (2017.03.08) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2015.08.28)
심사청구항수 18

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 경희대학교 산학협력단 대한민국 경기도 용인시 기흥구
2 숙명여자대학교산학협력단 대한민국 서울특별시 용산구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 이승룡 대한민국 경기도 성남시 분당구
2 윤용익 대한민국 서울특별시 강남구
3 티엔현더 베트남 경기도 용인시 기흥구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 김연권 대한민국 서울특별시 송파구 법원로 ***, ****/****호(문정동, 문정대명벨리온)(시안특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 경희대학교 산학협력단 대한민국 경기도 용인시 기흥구
2 숙명여자대학교산학협력단 대한민국 서울특별시 용산구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2015.08.28 수리 (Accepted) 1-1-2015-0839647-85
2 [출원서등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2015.09.01 수리 (Accepted) 1-1-2015-0849302-28
3 [출원서등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2015.09.02 수리 (Accepted) 1-1-2015-0853051-13
4 선행기술조사의뢰서
Request for Prior Art Search
2016.08.09 수리 (Accepted) 9-1-9999-9999999-89
5 선행기술조사보고서
Report of Prior Art Search
2016.09.08 수리 (Accepted) 9-1-2016-0037964-42
6 의견제출통지서
Notification of reason for refusal
2016.11.17 발송처리완료 (Completion of Transmission) 9-5-2016-0828405-77
7 [지정기간연장]기간연장(단축, 경과구제)신청서
[Designated Period Extension] Application of Period Extension(Reduction, Progress relief)
2017.01.17 수리 (Accepted) 1-1-2017-0058790-12
8 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2017.02.13 수리 (Accepted) 1-1-2017-0144176-49
9 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2017.02.13 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2017-0144193-15
10 등록결정서
Decision to grant
2017.06.09 발송처리완료 (Completion of Transmission) 9-5-2017-0403580-82
11 출원인정보변경(경정)신고서
Notification of change of applicant's information
2018.06.27 수리 (Accepted) 4-1-2018-5117847-65
12 [출원서등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2019.01.25 수리 (Accepted) 1-1-2019-0089353-79
13 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.08.19 수리 (Accepted) 4-1-2019-5164254-26
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
컴퓨터에 의해 적어도 일시적으로 구현되는 상호 활동 모델링 방법에 있어서,비디오로부터 추출한 2차원 스켈레톤 위치의 데이터 세트를 입력받는 단계;상기 입력된 데이터 세트로부터 오브젝트의 위치 좌표들을 연산하는 단계;상기 연산된 오브젝트의 위치 좌표들로부터 상기 오브젝트의 움직임 속도 및 움직임 방향을 포함하는 트래킹 특징들을 계산하는 단계;상기 오브젝트에 대응되는 상호 존과 상기 계산된 트래킹 특징들에 기초하여 상호 오브젝트를 결정하는 단계;상기 결정된 상호 오브젝트에 대한 스켈레톤의 데이터 세트로부터 특징들을 계산하는 단계; 및상기 계산된 특징들을 싱글 휴먼 액션들의 토픽들과 상호 그룹 활동들에 모델링하는 단계를 포함하는 상호 활동 모델링 방법
2 2
제1항에 있어서,상기 오브젝트의 위치 좌표들을 연산하는 단계는,상기 입력된 데이터 세트로부터 몸통의 4조인트를 이용해서 상기 오브젝트에 대한 위치 좌표들을 검출하는 단계를 포함하는 상호 활동 모델링 방법
3 3
제1항에 있어서,상기 상호 오브젝트 및 상기 상호 오브젝트에 상응하는 비상호 오브젝트들은 상호 포텐셜 존과 상기 트래킹 특징들을 통해 결정되는 상호 활동 모델링 방법
4 4
제1항에 있어서,상기 오브젝트의 움직임 속도 및 움직임 방향을 포함하는 트래킹 특징들을 계산하는 단계는,상기 오브젝트의 공간적-시간적 조인트 거리와 휴먼 오브젝트들 간에 상기 움직임 방향을 추출하되, 상기 스켈레톤의 위치 데이터세트로부터 추출하는 단계를 포함하는 상호 활동 모델링 방법
5 5
제1항에 있어서,상기 모델링하는 단계는,모델링 알고리즘을 이용해서 상기 싱글 휴먼 액션들을 위한 확률 모델 및 상기 상호 그룹 활동들을 생성하는 단계를 포함하는 상호 활동 모델링 방법
6 6
컴퓨터에 의해 적어도 일시적으로 구현되는 상호 오브젝트 식별 방법에 있어서,오브젝트의 위치 좌표들을 입력받는 단계;상기 입력된 오브젝트의 위치 좌표들에 기초하여 상기 오브젝트로부터 미리 지정된 범위 내에 위치하는 싱글 상호 포텐셜 존들을 결정하는 단계;상기 결정된 싱글 상호 포텐셜 존들에 기초하여 각 오브젝트에 대한 중첩 영역의 비율을 계산하는 단계; 및각 오브젝트에 대한 그룹 아이디에 할당된 임계값과 상기 계산된 비율을 비교하여 상기 오브젝트를 식별하는 단계를 포함하는 상호 오브젝트 식별 방법
7 7
제6항에 있어서,상기 싱글 상호 포텐셜 존들을 결정하는 단계는,상기 오브젝트의 위치 좌표와 원의 반지름에 기초하여 상기 싱글 상호 포텐셜 존들을 결정하는 단계를 포함하는 상호 오브젝트 식별 방법
8 8
제6항에 있어서,상기 싱글 상호 포텐셜 존들과 상기 중첩 영역의 비율은, 각각의 오브젝트에 대해서 식별되는 상호 오브젝트 식별 방법
9 9
삭제
10 10
컴퓨터에 의해 적어도 일시적으로 구현되는 특징 데이터 세트의 구성 방법에 있어서,그룹 아이디를 입력 받는 단계;상기 그룹 아이디에 해당하는 각 그룹에 대한 오브젝트의 수를 비교하는 단계;상기 비교된 오브젝트의 수를 고려하여 및 중에서 적어도 하나 이상의 좌표에 대한 특징들을 추출하는 단계;상기 추출된 특징들에 상응하는 데이터세트를 인식하는 단계; 및상기 인식된 데이터세트에 기초하여 인트라 오브젝트 데이터 세트와 인터 오브젝트 특징 데이터세트를 획득하는 단계를 포함하는 특징 데이터 세트의 구성 방법
11 11
제10항에 있어서,상기 특징들을 추출하는 단계는,상기 그룹 내에 하나의 오브젝트가 있는 경우, x=y 좌표에 대한 특징들을 추출하는 단계를 포함하는 특징 데이터 세트의 구성 방법
12 12
제10항에 있어서,상기 특징들을 추출하는 단계는,상기 그룹 내에 한 개 이상이 오브젝트가 있다면, 및 의 좌표에 대한 특징들을 추출하는 단계를 포함하는 특징 데이터 세트의 구성 방법
13 13
제10항에 있어서,상기 오브젝트의 수의 비교 결과를 고려하여, 상기 오브젝트를 비상호 오브젝트와 상호 오브젝트의 두 그룹으로 분류하는 단계를 더 포함하는 특징 데이터 세트의 구성 방법
14 14
제13항에 있어서,상기 오브젝트를 비상호 오브젝트와 상호 오브젝트의 두 그룹으로 분류하는 단계는,상기 오브젝트에 대한 공간적-시간적 조인트 거리와 움직임 방향 특징들은 추출하는 단계를 포함하는 특징 데이터 세트의 구성 방법
15 15
제10항에 있어서,상기 특징들을 추출하는 단계는,싱글 액션 인식을 위한 인트라 오브젝트 특징 및 상호 활동 인식을 위한 데이터 세트와 인터 오브젝트 특징 중에서 적어도 하나 이상의 특징을 추출하는 단계를 포함하는 특징 데이터 세트의 구성 방법
16 16
컴퓨터에 의해 적어도 일시적으로 구현되는 확률 모델 생성 방법에 있어서,특징 데이터세트를 입력받는 단계;K-평균 클러스터링 알고리즘을 적용하여 상기 특징 데이터세트들 내의 특징들을 코드워드들로 클러스터링하는 단계;상기 클러스터링에 따른 인트라 오브젝트 특징들과 인터 오브젝트 특징들을 액션들과 활동들의 코드워드 히스토그램들로 맵핑하는 단계;상기 맵핑된 히스토그램에 기반하는 계층 모델(hierarchical model)을 이용해서 워드들을 인코딩하는 단계; 및상기 인코딩된 워드들을 이용해서 확률 모델을 출력하는 단계를 포함하는 확률 모델 생성 방법
17 17
제16항에 있어서,상기 확률 모델을 출력하는 단계는,계측 모델을 기반으로 하는 토픽 모델링에 기초하여 상기 확률 모델을 생성하는 단계를 포함하는 확률 모델 생성 방법
18 18
제1항 내지 제8항 및 제10항 내지 제17항 중에서 어느 한 항의 방법을 수행하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체
19 19
기록매체에 저장되는 상호 활동 모델링 프로그램으로서, 상기 프로그램은 컴퓨팅 시스템에서 실행되는:비디오로부터 추출한 2차원 스켈레톤 위치의 데이터 세트를 입력받는 명령어 세트;상기 입력된 데이터 세트로부터 오브젝트의 위치 좌표들을 연산하는 명령어 세트;상기 연산된 오브젝트의 위치 좌표들로부터 상기 오브젝트의 움직임 속도 및 움직임 방향을 포함하는 트래킹 특징들을 계산하는 명령어 세트;상기 오브젝트에 대응되는 상호 존과 상기 계산된 트래킹 특징들에 기초하여 상호 오브젝트를 결정하는 명령어 세트;상기 결정된 상호 오브젝트에 대한 스켈레톤의 데이터 세트로부터 특징들을 계산하는 명령어 세트; 및상기 계산된 특징들을 싱글 휴먼 액션들의 토픽들과 상호 그룹 활동들에 모델링하는 명령어 세트를 포함하는 상호 활동 모델링 프로그램
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 산업통상자원부 경희대학교산학협력단 지식서비스산업핵심기술개발 퍼스널 빅데이터를 활용한 마이닝마인즈 핵심기술 개발
2 과학기술정보통신부 숙명여자대학교 산학협력단 방송통신융합미디어원천기술개발사업 다수의 고정형 카메라 기반 특정 보행자 추적 기술 개발
3 과학기술정보통신부 경희대학교산학협력단 연구개발고급인력지원 지능형 의료 플랫폼 개발