| 1 |
1
시각적 질의 응답을 위한 인터페이스를 제공하는 방법에 있어서,360도 비디오 데이터를 수신하는 단계;상기 360도 비디오 데이터에 기초하여 복수의 관측 시야(Field of View; FOV)에 대응되는 복수의 이미지를 획득하는 단계;상기 복수의 이미지에 포함된 복수의 물체를 식별하고, 상기 복수의 물체에 대한 메타 데이터를 저장하는 단계;상기 메타 데이터에 기초하여 상기 복수의 물체 각각의 평면 좌표를 구면 좌표로 변환하는 단계;상기 메타 데이터에 기초하여 상기 복수의 물체를 레이블에 따라 복수의 목록으로 분류하는 단계;상기 복수의 목록 중 제1 레이블에 대응되는 제1 목록에 포함된 복수의 제1 물체 중에서 정답 확률이 가장 높은 제1 물체를 선택하는 단계;상기 정답 확률이 가장 높은 제1 물체의 구면 좌표와 나머지 제1 물체 각각의 구면 좌표를 비교하고, 비교 결과에 기초하여 상기 나머지 제1 물체 중 미리 설정된 조건을 만족하는 제1 물체를 상기 복수의 이미지에서 제거하는 단계; 및상기 미리 설정된 조건을 만족하는 제1 물체가 제거된 복수의 이미지에 기초하여 상기 시각적 질의 응답을 위한 인터페이스를 생성하는 단계;를 포함하는 방법
|
| 2 |
2
제1항에 있어서,상기 복수의 목록 중 제2 레이블에 대응되는 제2 목록에 포함된 복수의 제2 물체 중에서 정답 확률이 가장 높은 제2 물체를 선택하는 단계;상기 정답 확률이 가장 높은 제2 물체의 구면 좌표와 나머지 제2 물체 각각의 구면 좌표를 비교하고, 비교 결과에 기초하여 상기 나머지 제2 물체 중 미리 설정된 조건을 만족하는 제2 물체를 상기 복수의 이미지에서 제거하는 단계; 및상기 미리 설정된 조건을 만족하는 제2 물체가 제거된 복수의 이미지에 기초하여 상기 시각적 질의 응답을 위한 인터페이스를 생성하는 단계;를 더 포함하는 방법
|
| 3 |
3
제1항에 있어서,구면 좌표계에서, 상기 정답 확률이 가장 높은 제1 물체의 영역과 상기 미리 설정된 조건을 만족하는 제1 물체의 영역 간에 겹치는 부분의 넓이는 임계값 이상인 것을 특징으로 하는 방법
|
| 4 |
4
제1항에 있어서,상기 복수의 물체를 레이블에 따라 복수의 목록으로 분류하는 단계는,상기 복수의 제1 물체를 정답 확률을 기초로 내림차순으로 정렬하여 상기 제1 목록을 생성하는 단계;를 포함하고,상기 정답 확률이 가장 높은 제1 물체를 선택하는 단계는,상기 제1 목록에서 첫 번째로 배치된 제1 물체를 선택하는 단계;를 포함하는 방법
|
| 5 |
5
제1항에 있어서,상기 정답 확률이 가장 높은 제1 물체를 상기 제1 레이블에 대한 정답으로 채택하고 상기 제1 목록에서 제거하는 단계; 및상기 미리 설정된 조건을 만족하는 제1 물체를 상기 제1 목록에서 제거하는 단계;를 더 포함하는 방법
|
| 6 |
6
제5항에 있어서,상기 제1 목록에 있는 상기 복수의 제1 물체가 모두 제거될 때까지, 상기 정답 확률이 가장 높은 제1 물체를 선택하는 단계와, 상기 정답 확률이 가장 높은 제1 물체를 상기 제1 레이블에 대한 정답으로 채택하고 상기 제1 목록에서 제거하는 단계와, 상기 미리 설정된 조건을 만족하는 제1 물체를 상기 제1 목록에서 제거하는 단계를 반복하여 수행하는 단계;를 더 포함하는 방법
|
| 7 |
7
제1항에 있어서,상기 시각적 질의 응답을 위한 인터페이스를 생성하는 단계는,상기 미리 설정된 조건을 만족하는 제1 물체가 제거된 복수의 이미지를 처리하여 특정 뷰포트에서의 파노라마 이미지를 생성하는 단계;를 포함하는 방법
|
| 8 |
8
제7항에 있어서,상기 시각적 질의 응답을 위한 인터페이스를 생성하는 단계는,상기 파노라마 이미지의 적어도 하나의 측면에서 불연속적인 물체가 식별된 것에 기초하여 상기 파노라마 이미지의 적어도 하나의 측면에 상기 불연속적인 물체의 적어도 일부가 포함된 이미지를 추가하는 보정을 수행하는 단계;를 포함하는 방법
|
| 9 |
9
제7항에 있어서,상기 시각적 질의 응답을 위한 인터페이스를 생성하는 단계는,상기 복수의 이미지 중에서 상기 특정 뷰포트를 기준으로 상측 뷰에 대응되는 이미지를 상기 파노라마 이미지의 일 측면에 추가하는 보정을 수행하는 단계;를 포함하는 방법
|
| 10 |
10
제7항에 있어서,상기 시각적 질의 응답을 위한 인터페이스를 생성하는 단계는,상기 복수의 이미지 중에서 상기 특정 뷰포트를 기준으로 하측 뷰에 대응되는 이미지를 상기 파노라마 이미지의 일 측면에 추가하는 보정을 수행하는 단계;를 포함하는 방법
|
| 11 |
11
시각적 질의 응답을 위한 인터페이스를 제공하는 시스템에 있어서,컴퓨터에서 판독 가능한 명령을 저장하는 적어도 하나의 메모리; 및상기 적어도 하나의 메모리에 저장된 명령을 실행하는 적어도 하나의 프로세서;를 포함하고,상기 적어도 하나의 프로세서는,360도 비디오 데이터를 수신하고,상기 360도 비디오 데이터에 기초하여 복수의 관측 시야(Field of View; FOV)에 대응되는 복수의 이미지를 획득하고,상기 복수의 이미지에 포함된 복수의 물체를 식별하고, 상기 복수의 물체에 대한 메타 데이터를 저장하고,상기 메타 데이터에 기초하여 상기 복수의 물체 각각의 평면 좌표를 구면 좌표로 변환하고,상기 메타 데이터에 기초하여 상기 복수의 물체를 레이블에 따라 복수의 목록으로 분류하고,상기 복수의 목록 중 제1 레이블에 대응되는 제1 목록에 포함된 복수의 제1 물체 중에서 정답 확률이 가장 높은 제1 물체를 선택하고,상기 정답 확률이 가장 높은 제1 물체의 구면 좌표와 나머지 제1 물체 각각의 구면 좌표를 비교하고, 비교 결과에 기초하여 상기 나머지 제1 물체 중 미리 설정된 조건을 만족하는 제1 물체를 상기 복수의 이미지에서 제거하고,상기 미리 설정된 조건을 만족하는 제1 물체가 제거된 복수의 이미지에 기초하여 상기 시각적 질의 응답을 위한 인터페이스를 생성하는 시스템
|
| 12 |
12
제11항에 있어서,상기 적어도 하나의 프로세서는,상기 복수의 목록 중 제2 레이블에 대응되는 제2 목록에 포함된 복수의 제2 물체 중에서 정답 확률이 가장 높은 제2 물체를 선택하고,상기 정답 확률이 가장 높은 제2 물체의 구면 좌표와 나머지 제2 물체 각각의 구면 좌표를 비교하고, 비교 결과에 기초하여 상기 나머지 제2 물체 중 미리 설정된 조건을 만족하는 제2 물체를 상기 복수의 이미지에서 제거하고,상기 미리 설정된 조건을 만족하는 제2 물체가 제거된 복수의 이미지에 기초하여 상기 시각적 질의 응답을 위한 인터페이스를 생성하는 시스템
|
| 13 |
13
제11항에 있어서,구면 좌표계에서, 상기 정답 확률이 가장 높은 제1 물체의 영역과 상기 미리 설정된 조건을 만족하는 제1 물체의 영역 간에 겹치는 부분의 넓이는 임계값 이상인 것을 특징으로 하는 시스템
|
| 14 |
14
제11항에 있어서,상기 적어도 하나의 프로세서는,상기 복수의 제1 물체를 정답 확률을 기초로 내림차순으로 정렬하여 상기 제1 목록을 생성하고,상기 제1 목록에서 첫 번째로 배치된 제1 물체를 상기 정답 확률이 가장 높은 제1 물체로 선택하는 시스템
|
| 15 |
15
제11항에 있어서,상기 적어도 하나의 프로세서는,상기 정답 확률이 가장 높은 제1 물체를 상기 제1 레이블에 대한 정답으로 채택하고 상기 제1 목록에서 제거하고,상기 미리 설정된 조건을 만족하는 제1 물체를 상기 제1 목록에서 제거하는 시스템
|
| 16 |
16
제15항에 있어서,상기 적어도 하나의 프로세서는,상기 제1 목록에 있는 상기 복수의 제1 물체가 모두 제거될 때까지, 상기 정답 확률이 가장 높은 제1 물체를 선택하는 제1 동작과, 상기 정답 확률이 가장 높은 제1 물체를 상기 제1 레이블에 대한 정답으로 채택하고 상기 제1 목록에서 제거하는 제2 동작과, 상기 미리 설정된 조건을 만족하는 제1 물체를 상기 제1 목록에서 제거하는 제3 동작을 반복하여 수행하는 시스템
|
| 17 |
17
제15항에 있어서,상기 적어도 하나의 프로세서는,상기 미리 설정된 조건을 만족하는 제1 물체가 제거된 복수의 이미지를 처리하여 특정 뷰포트에서의 파노라마 이미지를 생성하는 시스템
|
| 18 |
18
제17항에 있어서,상기 적어도 하나의 프로세서는,상기 파노라마 이미지의 적어도 하나의 측면에서 불연속적인 물체가 식별된 것에 기초하여 상기 파노라마 이미지의 적어도 하나의 측면에 상기 불연속적인 물체의 적어도 일부가 포함된 이미지를 추가하는 보정을 수행하는 시스템
|
| 19 |
19
제17항에 있어서,상기 적어도 하나의 프로세서는,상기 복수의 이미지 중에서 상기 특정 뷰포트를 기준으로 상측 뷰에 대응되는 이미지를 상기 파노라마 이미지의 일 측면에 추가하는 보정을 수행하는 시스템
|
| 20 |
20
제17항에 있어서,상기 적어도 하나의 프로세서는,상기 복수의 이미지 중에서 상기 특정 뷰포트를 기준으로 하측 뷰에 대응되는 이미지를 상기 파노라마 이미지의 일 측면에 추가하는 보정을 수행하는 시스템
|
