맞춤기술찾기

이전대상기술

영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 장치 및 방법

  • 기술번호 : KST2019029829
  • 담당센터 :
  • 전화번호 :
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 영상 내의 개인의 위치 정보뿐만 아니라 개인 간의 감정적인 상호 관계를 고려하여 상호 작용하는 그룹을 보다 정확하게 결정할 수 있도록 한 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 장치 및 방법에 관한 것으로, 영상내에서 사람들 사이의 3차원 공간에서의 상대 거리를 추론하여 후보 그룹 집합 생성을 하는 후보 그룹 집합 생성부;후보 그룹 집합에서 실제 3차원 공간에서의 두 얼굴 사이의 거리를 추론하여 기하학적 관계 척도 산출을 하는 기하학적 관계 척도 산출부;사람들의 위치 정보와 함께 사람들의 얼굴 정보를 고려하여 사회적 관계 정보를 분석하여 사회적 관계 척도 산출을 하는 사회적 관계 척도 산출부;생성 될 수 있는 그룹들 중에서 상호 배타적인 그룹들의 집합을 기하학적 관계 척도 값과 사회적 관계 척도 값의 가중치 합이 최대가 되도록 선택하여 상호작용 그룹 결정을 위한 최적화를 수행하는 상호작용 그룹 결정부;를 포함하는 것이다.
Int. CL G06K 9/00 (2006.01.01) G06K 9/62 (2006.01.01) G06T 7/60 (2017.01.01)
CPC G06K 9/00744(2013.01) G06K 9/00744(2013.01) G06K 9/00744(2013.01) G06K 9/00744(2013.01) G06K 9/00744(2013.01)
출원번호/일자 1020180000409 (2018.01.02)
출원인 단국대학교 산학협력단
등록번호/일자 10-1898648-0000 (2018.09.07)
공개번호/일자
공고번호/일자 (20180913) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2018.01.02)
심사청구항수 10

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 단국대학교 산학협력단 대한민국 경기도 용인시 수지구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 최상일 서울특별시 구로구
2 유한주 서울특별시 강남구
3 엄태규 서울특별시 광진구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 정기택 대한민국 서울특별시 서초구 강남대로**길 **, *층 (반포동, 새로나빌딩)(스카이특허법률사무소)
2 오위환 대한민국 서울특별시 서초구 강남대로**길 **, *층 (반포동, 새로나빌딩)(스카이특허법률사무소)
3 나성곤 대한민국 서울특별시 서초구 강남대로**길 **, *층 (반포동, 새로나빌딩)(스카이특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 단국대학교 산학협력단 경기도 용인시 수지구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2018.01.02 수리 (Accepted) 1-1-2018-0005326-65
2 [우선심사신청]심사청구(우선심사신청)서
[Request for Preferential Examination] Request for Examination (Request for Preferential Examination)
2018.04.20 수리 (Accepted) 1-1-2018-0396157-15
3 [출원서등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2018.05.10 수리 (Accepted) 1-1-2018-0460262-36
4 선행기술조사의뢰서
Request for Prior Art Search
2018.05.11 수리 (Accepted) 9-1-9999-9999999-89
5 선행기술조사보고서
Report of Prior Art Search
2018.06.01 수리 (Accepted) 9-1-2018-0025568-18
6 의견제출통지서
Notification of reason for refusal
2018.06.20 발송처리완료 (Completion of Transmission) 9-5-2018-0417979-02
7 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2018.07.17 수리 (Accepted) 1-1-2018-0704698-85
8 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2018.07.17 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2018-0704710-46
9 등록결정서
Decision to grant
2018.09.05 발송처리완료 (Completion of Transmission) 9-5-2018-0606328-88
10 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.10.26 수리 (Accepted) 4-1-2020-5239146-54
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
영상내에서 사람들 사이의 3차원 공간에서의 상대 거리를 추론하여 후보 그룹 집합 생성을 하는 후보 그룹 집합 생성부;후보 그룹 집합에서 실제 3차원 공간에서의 두 얼굴 사이의 거리를 추론하여 기하학적 관계 척도 산출을 하는 기하학적 관계 척도 산출부;사람들의 위치 정보와 함께 사람들의 얼굴 정보를 고려하여 사회적 관계 정보를 분석하여 사회적 관계 척도 산출을 하는 사회적 관계 척도 산출부;생성 될 수 있는 그룹들 중에서 상호 배타적인 그룹들의 집합을 기하학적 관계 척도 값과 사회적 관계 척도 값의 가중치 합이 최대가 되도록 선택하여 상호작용 그룹 결정을 위한 최적화를 수행하는 상호작용 그룹 결정부;를 포함하고,후보 그룹 집합 생성부는 후보 그룹 집합을 생성하기 위하여,영상 내에 존재하는 명의 얼굴 정보를 가지고 있는 집합을 라고 정의하고, 는 각각 번째 사람의 얼굴 정보, 영상에서 얼굴의 중심 좌표 그리고 영상에서 해당 얼굴의 크기를 나타내는 것을 특징으로 하는 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 장치
2 2
삭제
3 3
제 1 항에 있어서, 후보 그룹 집합 생성부는 상호 배타적인 상호작용 하는 사람들의 그룹들을 찾기 위하여,의 부분 집합 를 임의의 그룹들의 집합인 후보 그룹 집합이라고 하면 다음 조건을 만족하고,여기서, 는 에 속하는 그룹을 나타내고 그룹의 수()의 범위는 1부터 사이의 값을 갖고, 상호 작용 척도 를 정의하여 그룹 에 속한 개체들 간의 상호 작용 정도를 수치화하고 상기 식의 목적 함수를 충족하는 최적의 그룹 집합 를 으로 결정하는 것을 특징으로 하는 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 장치
4 4
제 3 항에 있어서, 최적의 상호 작용 그룹 집합 가 결정되면,임의의 그룹()가 상호 작용하는 사람들로 잘 그룹화 되었는지 평가하기 위한 상호 작용 척도를 기하학적 관계 척도 와 사회적 관계 척도 로,으로 계산하고,여기서, 는 두 관계의 균형을 맞추기 위한 설계 매개 변수로서, 0에서 1 사이의 값을 갖는 것을 특징으로 하는 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 장치
5 5
제 1 항에 있어서, 후보 그룹 집합 생성부는 후보 그룹 집합을 생성하기 위하여,두 임의의 얼굴 과 의 얼굴 크기의 비율이 일정 크기보다 크다면, 두 얼굴의 비율 을 으로 정의하여 두 얼굴의 그룹화 여부를 판단하는 것을 특징으로 하는 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 장치
6 6
제 5 항에 있어서, 의 값이 설계 파라미터 보다 작거나 같을 때만 두 얼굴 과 을 그룹화 할 수 있고,은 두 사람의 쌍에 대한 집합으로 각 쌍은 그룹화 될 수 있는 사람들로 구성돠고, 의 원소들을 상호 배타적으로 선택하여 그룹 를 생성하고 생성된 를 통해 후보 그룹 집합을 생성하는 것을 특징으로 하는 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 장치
7 7
제 1 항에 있어서, 기하학적 관계 척도 산출부는,영상에서 실제 3차원 공간에서의 두 얼굴 과 사이의 거리 를 추론하고, 으로 얼굴 사이의 직선거리를 얼굴 크기로 보정하여 얼굴 사이의 거리를 계산하고,추론된 거리 는 으로 임의의 그룹 에 대한 기하학적 척도를 정의하는 데 사용되고,여기서 는 에 있는 모든 쌍의 집합인 것을 특징으로 하는 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 장치
8 8
제 1 항에 있어서, 사회적 관계 척도 산출부는 확장된 Siamese 신경망의 형태의 SRN을 사용하고,SRN은 한 쌍의 얼굴 영상( )을 입력으로 부분 모듈인 DCN을 통해 나이, 성별, 얼굴 표정, 얼굴 방향 정보를 포함한 20 차원 특징 벡터를 추출하고, 추출된 특징 벡터는 Siamese 신경망 형태로 구성된 신경망을 통해 최종적으로 사회적 관계를 나타내는 8차원 벡터 를 출력으로 하며 이때 은 를 만족하는 것을 특징으로 하는 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 장치
9 9
제 8 항에 있어서, 기하학적 제약 조건을 만족하는 의 쌍 에 대한 을 사용하여 으로 그룹 에 대한 사회적 관계 척도 를 정의하는 것을 특징으로 하는 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 장치
10 10
제 1 항에 있어서, 상호작용 그룹 결정부는,에서 생성 할 수 있는 모든 그룹들의 집합 를,으로 정의하고,여기서, 는 의 원소들로 생성되어 그룹화 될 수 있는 얼굴들의 쌍들로 구성되는 그룹을 나타내며, 은 가능한 모든 가능한 유효한 그룹들의 수를 나타내며 최대 의 값을 갖고,의 원소들 중에서 특정 그룹이 최적의 그룹 집합에 포함되는지의 여부를 결정하는 이진 결정 벡터(Binary decision vector)를 로 정의하고, 이진 결정 벡터에 대응하는 그룹의 상호작용 척도 값을 갖는 벡터를 로 정의하는 것을 특징으로 하는 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 장치
11 11
영상내 사람들의 얼굴 크기 정보를 사용하여 사람들 사이의 3차원 공간에서의 상대 거리를 추론하여 후보 그룹 집합 생성을 하는 단계;영상에서 실제 3차원 공간에서의 두 얼굴 사이의 거리를 추론하여 기하학적 관계 척도 산출을 하는 단계;사람들의 위치 정보와 함께 사람들의 얼굴 정보를 고려하여 사회적 관계 정보를 분석하여 사회적 관계 척도 산출을 하는 단계;생성 될 수 있는 그룹들 중에서 상호 배타적인 그룹들의 집합을 기하학적 관계 척도 값과 사회적 관계 척도 값의 가중치 합이 최대가 되도록 선택하여 상호작용 그룹 결정을 위한 최적화를 수행하는 단계;를 포함하고,후보 그룹 집합 생성을 하는 단계에서 후보 그룹 집합을 생성하기 위하여,영상 내에 존재하는 명의 얼굴 정보를 가지고 있는 집합을 라고 정의하고, 는 각각 번째 사람의 얼굴 정보, 영상에서 얼굴의 중심 좌표 그리고 영상에서 해당 얼굴의 크기를 나타내는 것을 특징으로 하는 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 방법
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 미래창조과학부 단국대학교 산학협력단 대학ICT연구센터육성지원사업 세이프 웰빙을 위한 IoT 기반 스마트 웨어러블 SW 기술개발
2 미래창조과학부 단국대학교 신진연구지원사업(후속연구지원) 3D 얼굴 추적 기법을 이용한 머리 제스처 인식 및 표정 추론 방법