1 |
1
영상내에서 사람들 사이의 3차원 공간에서의 상대 거리를 추론하여 후보 그룹 집합 생성을 하는 후보 그룹 집합 생성부;후보 그룹 집합에서 실제 3차원 공간에서의 두 얼굴 사이의 거리를 추론하여 기하학적 관계 척도 산출을 하는 기하학적 관계 척도 산출부;사람들의 위치 정보와 함께 사람들의 얼굴 정보를 고려하여 사회적 관계 정보를 분석하여 사회적 관계 척도 산출을 하는 사회적 관계 척도 산출부;생성 될 수 있는 그룹들 중에서 상호 배타적인 그룹들의 집합을 기하학적 관계 척도 값과 사회적 관계 척도 값의 가중치 합이 최대가 되도록 선택하여 상호작용 그룹 결정을 위한 최적화를 수행하는 상호작용 그룹 결정부;를 포함하고,후보 그룹 집합 생성부는 후보 그룹 집합을 생성하기 위하여,영상 내에 존재하는 명의 얼굴 정보를 가지고 있는 집합을 라고 정의하고, 는 각각 번째 사람의 얼굴 정보, 영상에서 얼굴의 중심 좌표 그리고 영상에서 해당 얼굴의 크기를 나타내는 것을 특징으로 하는 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 장치
|
2 |
2
삭제
|
3 |
3
제 1 항에 있어서, 후보 그룹 집합 생성부는 상호 배타적인 상호작용 하는 사람들의 그룹들을 찾기 위하여,의 부분 집합 를 임의의 그룹들의 집합인 후보 그룹 집합이라고 하면 다음 조건을 만족하고,여기서, 는 에 속하는 그룹을 나타내고 그룹의 수()의 범위는 1부터 사이의 값을 갖고, 상호 작용 척도 를 정의하여 그룹 에 속한 개체들 간의 상호 작용 정도를 수치화하고 상기 식의 목적 함수를 충족하는 최적의 그룹 집합 를 으로 결정하는 것을 특징으로 하는 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 장치
|
4 |
4
제 3 항에 있어서, 최적의 상호 작용 그룹 집합 가 결정되면,임의의 그룹()가 상호 작용하는 사람들로 잘 그룹화 되었는지 평가하기 위한 상호 작용 척도를 기하학적 관계 척도 와 사회적 관계 척도 로,으로 계산하고,여기서, 는 두 관계의 균형을 맞추기 위한 설계 매개 변수로서, 0에서 1 사이의 값을 갖는 것을 특징으로 하는 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 장치
|
5 |
5
제 1 항에 있어서, 후보 그룹 집합 생성부는 후보 그룹 집합을 생성하기 위하여,두 임의의 얼굴 과 의 얼굴 크기의 비율이 일정 크기보다 크다면, 두 얼굴의 비율 을 으로 정의하여 두 얼굴의 그룹화 여부를 판단하는 것을 특징으로 하는 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 장치
|
6 |
6
제 5 항에 있어서, 의 값이 설계 파라미터 보다 작거나 같을 때만 두 얼굴 과 을 그룹화 할 수 있고,은 두 사람의 쌍에 대한 집합으로 각 쌍은 그룹화 될 수 있는 사람들로 구성돠고, 의 원소들을 상호 배타적으로 선택하여 그룹 를 생성하고 생성된 를 통해 후보 그룹 집합을 생성하는 것을 특징으로 하는 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 장치
|
7 |
7
제 1 항에 있어서, 기하학적 관계 척도 산출부는,영상에서 실제 3차원 공간에서의 두 얼굴 과 사이의 거리 를 추론하고, 으로 얼굴 사이의 직선거리를 얼굴 크기로 보정하여 얼굴 사이의 거리를 계산하고,추론된 거리 는 으로 임의의 그룹 에 대한 기하학적 척도를 정의하는 데 사용되고,여기서 는 에 있는 모든 쌍의 집합인 것을 특징으로 하는 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 장치
|
8 |
8
제 1 항에 있어서, 사회적 관계 척도 산출부는 확장된 Siamese 신경망의 형태의 SRN을 사용하고,SRN은 한 쌍의 얼굴 영상( )을 입력으로 부분 모듈인 DCN을 통해 나이, 성별, 얼굴 표정, 얼굴 방향 정보를 포함한 20 차원 특징 벡터를 추출하고, 추출된 특징 벡터는 Siamese 신경망 형태로 구성된 신경망을 통해 최종적으로 사회적 관계를 나타내는 8차원 벡터 를 출력으로 하며 이때 은 를 만족하는 것을 특징으로 하는 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 장치
|
9 |
9
제 8 항에 있어서, 기하학적 제약 조건을 만족하는 의 쌍 에 대한 을 사용하여 으로 그룹 에 대한 사회적 관계 척도 를 정의하는 것을 특징으로 하는 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 장치
|
10 |
10
제 1 항에 있어서, 상호작용 그룹 결정부는,에서 생성 할 수 있는 모든 그룹들의 집합 를,으로 정의하고,여기서, 는 의 원소들로 생성되어 그룹화 될 수 있는 얼굴들의 쌍들로 구성되는 그룹을 나타내며, 은 가능한 모든 가능한 유효한 그룹들의 수를 나타내며 최대 의 값을 갖고,의 원소들 중에서 특정 그룹이 최적의 그룹 집합에 포함되는지의 여부를 결정하는 이진 결정 벡터(Binary decision vector)를 로 정의하고, 이진 결정 벡터에 대응하는 그룹의 상호작용 척도 값을 갖는 벡터를 로 정의하는 것을 특징으로 하는 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 장치
|
11 |
11
영상내 사람들의 얼굴 크기 정보를 사용하여 사람들 사이의 3차원 공간에서의 상대 거리를 추론하여 후보 그룹 집합 생성을 하는 단계;영상에서 실제 3차원 공간에서의 두 얼굴 사이의 거리를 추론하여 기하학적 관계 척도 산출을 하는 단계;사람들의 위치 정보와 함께 사람들의 얼굴 정보를 고려하여 사회적 관계 정보를 분석하여 사회적 관계 척도 산출을 하는 단계;생성 될 수 있는 그룹들 중에서 상호 배타적인 그룹들의 집합을 기하학적 관계 척도 값과 사회적 관계 척도 값의 가중치 합이 최대가 되도록 선택하여 상호작용 그룹 결정을 위한 최적화를 수행하는 단계;를 포함하고,후보 그룹 집합 생성을 하는 단계에서 후보 그룹 집합을 생성하기 위하여,영상 내에 존재하는 명의 얼굴 정보를 가지고 있는 집합을 라고 정의하고, 는 각각 번째 사람의 얼굴 정보, 영상에서 얼굴의 중심 좌표 그리고 영상에서 해당 얼굴의 크기를 나타내는 것을 특징으로 하는 영상 등장 인물들 사이의 상호 작용 그룹 탐지를 위한 방법
|