| 1 |
1
영상 인식을 통한 객체 상호관계 추론 장치에 있어서, 복수의 촬영장치로부터 촬영 영상을 수신하는 통신부; 및입력 영상에서 목표 객체와 일정 거리 간격에서 상호작용한 주요 객체를 선별하거나 또는 주요 객체 및 목표 객체를 포함한 소셜 그래프를 생성하는 상호작용 추론부를 포함하는 영상 인식을 통한 객체 상호관계 추론 장치
|
| 2 |
2
청구항 제1항에 있어서, 상기 상호작용 추론부는, 영상에서 객체의 속성(attributes)을 추출하여 객체 정보를 생성하는 속성 추출부; 촬영된 객체의 동선을 산출하는 동선 산출부 - 상기 동선 산출부는 상기 객체의 촬영 동선 또는 예상 동선을 포함함; 및목표 객체의 동선을 따라서, 목표 객체와 다른 객체 중, 상기 목표 객체로부터 일정 거리 간격 내에서 출연했던 주변 객체를 선별하고 선별된 주변 객체 중 목표 객체와 상호작용하는 주요 객체를 선별하는 주요 객체 선별부를 포함하는 것을 특징으로 하는 영상 인식을 통한 객체 상호관계 추론 장치
|
| 3 |
3
청구항 제2항에 있어서, 상기 주요 객체 선별부는, 선별된 주변 객체와 상기 목표 객체와의 상호작용 속성을 추출하여 주요 객체를 선별하고, 상기 상호작용 속성은 제1 유형의 상호작용 속성, 제2 유형의 상호작용 속성 및 제3 유형의 상호작용 속성 중 하나 이상의 유형을 포함하고, 상기 제1 유형의 상호작용 속성은 주변 객체 자체의 속성이고, 상기 제2 유형의 상호작용 속성은 주변 객체와 목표 객체 간의 거리 간격에 의존하며, 상기 제3 유형의 상호작용 속성은 특정 객체가 구현하는 것으로 인식될 경우 주요 객체로 간주될 수 있는 지정된 행동인 것을 특징으로 하는 영상 인식을 통한 객체 상호관계 추론 장치
|
| 4 |
4
청구항 제3항에 있어서, 상기 제1 유형의 상호작용 속성은,주변 객체로 판단하기 위한 거리 범위 값, 그 객체가 상기 일정 거리 범위 내에 촬영장치의 뷰에 출연했는지 여부, 출연 빈도, 출연 간격별 시간, 및 전체 출연 시간 중 하나 이상을 포함하는 것을 특징으로 하는 영상 인식을 통한 객체 상호관계 추론 장치
|
| 5 |
5
청구항 제3항에 있어서, 상기 제2 유형의 상호작용 속성은, 주변 객체와 목표 객체 간의 거리 간격, 시간에 따른 주변 객체와 목표 객체 간의 거리 간격의 변화량, 및 시간에 따른 주변 객체와 목표 객체 간의 거리 간격의 규칙성 중 하나 이상을 포함하는 것을 특징으로 하는 영상 인식을 통한 객체 상호관계 추론 장치
|
| 6 |
6
청구항 제3항에 있어서, 상기 제3 유형의 상호작용 속성은, 주요 인물의 행동으로 지정된 하나 이상의 이벤트 속성으로서 미리 학습된 행동인식기에 의해 추출되며, 상기 행동인식기는: 속성의 세트에 기초하여 검출된 객체 각각의 행동을 인식하는 분류 네트워크를 포함하며, 분류 네트워크는 트래이닝 데이터 세트를 사용하여 학습된 것으로서, 상기 트레이닝 데이터 세트는 복수의 트래이닝 샘플을 포함하며, 각 트래이닝 샘플은 트래이닝 객체로부터 산출된 속성 중 하나 이상, 이벤트로 지정된 특정 행동을 가리키는 레이블 데이터를 각각 포함하는 것을 특징으로 하는 영상 인식을 통한 객체 상호관계 추론 장치
|
| 7 |
7
청구항 제6항에 있어서, 속성의 세트는 상기 속성 추출부에서 추출된 속성의 일부 또는 전부를 포함하는 것을 특징으로 하는 영상 인식을 통한 객체 상호관계 추론 장치
|
| 8 |
8
청구항 제6항에 있어서, 상기 행동인식기는: 입력 영상에서 검출된 적어도 하나의 객체에 대한 의미론적 속성의 세트를 각각 생성하는 속성 추출 네트워크를 더 포함하고, 상기 의미론적 속성은 객체가 어느 클래스로 분류되는지에 대한 객체 확률 및 객체와 연관된 속성 중 각 속성의 확률을 나타낸 속성확률 중 하나 이상을 포함하는 것을 특징으로 하는 영상 인식을 통한 객체 상호관계 추론 장치
|
| 9 |
9
청구항 제3항에 있어서, 상기 주요 객체 선별부는, 각 주요 객체와 목표 객체 간의 상호작용 정도를 나타낸 상호작용 값을 산출하여 선별된 주요 객체를 등급화하도록 더 구성되는 것을 특징으로 하는 영상 인식을 통한 객체 상호관계 추론 장치
|
| 10 |
10
청구항 제9항에 있어서, 상기 상호작용 값은 상호작용 속성 중 일부 또는 전부 각각에 대한 가중치에 기초하여 산출되는 것을 특징으로 하는 영상 인식을 통한 객체 상호관계 추론 장치
|
| 11 |
11
청구항 제10항에 있어서, 상기 상호작용 값은 이벤트 속성의 값에 더 기초하여 산출되는 것을 특징으로 하는 영상 인식을 통한 객체 상호관계 추론 장치
|
| 12 |
12
청구항 제11항에 있어서, 상기 상호작용 값(S)은 다음의 수학식을 통해 산출되며, [수학식]S 003c#- (λPPij · λTTij · λffij) + eij여기서, P는 상호작용 속성 중 주요 객체와 목표 객체 간의 거리 간격, T는 상기 주요 객체의 출연 시간, f는 상기 주요 객체의 출연 빈도를 나타내고, λ는 속성 각각에 대한 가중치를 나타내며, e는 이벤트 속성의 값을 나타내며, i는 전체 입력 영상에서 목표 객체에 대한 영상 인덱스를 가리키고, j는 주변 객체에 대한 영상 인덱스를 가리키는 것을 특징으로 하는 영상 인식을 통한 객체 상호관계 추론 장치
|
| 13 |
13
청구항 제2항에 있어서, 상기 주요 객체 선별부는, 선별된 주변 객체 각각에 대해서 상호작용 값을 산출하고, 그리고 산출된 각 주변 객체별 상호작용 값이 미리 설정된 추천 임계 값을 초과하는 주변 객체를 주요 객체로 선별하도록 구성된 것을 특징으로 하는 영상 인식을 통한 객체 상호관계 추론 장치
|
| 14 |
14
청구항 제2항에 있어서, 상기 주요 객체 선별부는, 목표 객체로부터 연장된, 상호작용의 관계가 n차인 주요 객체를 선별하도록 더 구성되고(n은 2이상의 정수), 1차 주요 객체를 산출하는데 사용된 추론 과정에서의 목표 객체가 n-1차 주요 객체로 교체되어 n차 주요 객체가 산출되는 것을 특징으로 하는 영상 인식을 통한 객체 상호관계 추론 장치
|
| 15 |
15
청구항 제1항에 있어서, 목표 객체로부터 주요 객체를 링크하여 트리 구조의 소셜 그래프를 생성하는 그래프 생성부를 더 포함하는 영상 인식을 통한 객체 상호관계 추론 장치
|
| 16 |
16
청구항 제15항에 있어서, 상기 그래프 생성부는, 미리 저장된 지도와 연동된 소셜 그래프를 생성하는 것을 특징으로 하는 영상 인식을 통한 객체 상호관계 추론 장치
|
| 17 |
17
프로세서에 의해 수행되는 영상 인식을 통한 객체 상호관계 추론 방법은, 입력 영상에서 객체의 속성(attributes)을 추출해 객체 정보를 생성하는 단계; 목표 객체와 상호작용하는 주요 객체를 추론하는 동작을 개시하는 명령을 입력하여 입력 영상의 객체 중 목표 객체를 검색하는 단계 - 상기 명령은 목표 객체의 속성을 포함함; 목표 객체의 동선을 산출하는 단계; 목표 객체의 동선에서 일정 거리 간격의 주변 객체를 선별하는 단계; 및 주변 객체 중에서 목표 객체와 상호작용한 주요 객체를 선별하는 단계를 포함하는 영상 인식을 통한 객체 상호관계 추론 방법
|
| 18 |
18
청구항 제17항에 있어서, 상기 명령은, 상호작용 속성에 대한 조건, 주요 객체의 범위 조건 및 추천 임계 치의 조건 중 하나 이상을 더 포함하는 것을 특징으로 하는 영상 인식을 통한 객체 상호관계 추론 방법
|
| 19 |
19
청구항 제17항에 있어서, 상기 주변 객체를 선별하는 단계는, 선별된 주변 객체와 상기 목표 객체와의 상호작용 속성을 추출하고 추출된, 각 주변 객체별 상호작용 속성에 기초하여 주요 객체를 선별하는 단계;를 포함하는 것을 특징으로 하는 영상 인식을 통한 객체 상호관계 추론 방법
|
| 20 |
20
청구항 제17항에 있어서, 상기 주변 객체를 선별하는 단계는, 각 주변 객체별 상호작용 값을 산출하는 단계; 및 산출된, 주변 객체별 상호작용 값이 추천 임계 값을 초과할 경우 추천할 최종 주요 객체로 선별하는 단계를 포함하는 것을 특징으로 하는 영상 인식을 통한 객체 상호관계 추론 방법
|
| 21 |
21
청구항 제16항 내지 제20항 중 어느 하나의 항에 따른 영상 인식을 통한 객체 상호관계 추론 방법을 수행하기 위한, 프로그램을 기록한 컴퓨터 판독가능 기록매체
|
