| 1 |
1
어노테이션 시스템에 의해 수행되는 360 비디오 어노테이션 방법에 있어서, 360 비디오에서 추출된 프레임으로부터 3차 투영된 이미지를 생성하는 단계;상기 생성된 3차 투영된 이미지에서 3차 투영된 이미지에 포함된 물체를 인식하는 단계;상기 3차 투영된 이미지 및 이미지에서 인식된 물체에 대하여 각각의 물체 정보를 취합하여 메타데이터로 저장하는 단계; 및 상기 3차 투영된 이미지에 상기 물체에 대한 물체 정보를 메타데이터로 저장하여 어노테이션을 생성하는 단계를 포함하고, 상기 360 비디오에서 추출된 프레임으로부터 3차 투영된 이미지를 생성하는 단계는,360 비디오를 위도 정보 및 경도 정보를 평면에 반영하는 등변 투영된 이미지에 x축, y축, z축에 대하여 회전시켜 3차원 좌표를 매핑시키고, 상기 매핑된 3차원 좌표에 픽셀 값을 지정함으로써 상기 등변 투영된 이미지가 3차 투영된 이미지로 변환되는 단계를 포함하는 360 비디오 어노테이션 방법
|
| 2 |
2
삭제
|
| 3 |
3
어노테이션 시스템에 의해 수행되는 360 비디오 어노테이션 방법에 있어서, 360 비디오에서 추출된 프레임으로부터 3차 투영된 이미지를 생성하는 단계;상기 생성된 3차 투영된 이미지에서 3차 투영된 이미지에 포함된 물체를 인식하는 단계;상기 3차 투영된 이미지 및 이미지에서 인식된 물체에 대하여 각각의 물체 정보를 취합하여 메타데이터로 저장하는 단계; 및 상기 3차 투영된 이미지에 상기 물체에 대한 물체 정보를 메타데이터로 저장하여 어노테이션을 생성하는 단계를 포함하고, 상기 생성된 3차 투영된 이미지에서 3차 투영된 이미지에 포함된 물체를 인식하는 단계는,상기 3차 투영된 이미지를 각 면단위로 분할하고, 상기 각 면단위로 분할된 3차 투영된 이미지에서 물체의 레이블과 위치를 계산하는 단계를 포함하고,상기 3차 투영된 이미지 및 이미지에서 인식된 물체에 대하여 각각의 물체 정보를 취합하여 메타데이터로 저장하는 단계는,상기 물체의 레이블과 위치를 계산함에 따라 획득된 물체 정보와 상기 3차 투영된 이미지의 각 면의 정보를 통합하여 메타데이터를 생성하는 단계를 포함하는 360 비디오 어노테이션 생성 방법
|
| 4 |
4
어노테이션 시스템에 의해 수행되는 360 비디오 어노테이션 방법에 있어서, 360 비디오에서 추출된 프레임으로부터 3차 투영된 이미지를 생성하는 단계;상기 생성된 3차 투영된 이미지에서 3차 투영된 이미지에 포함된 물체를 인식하는 단계;상기 3차 투영된 이미지 및 이미지에서 인식된 물체에 대하여 각각의 물체 정보를 취합하여 메타데이터로 저장하는 단계; 및 상기 3차 투영된 이미지에 상기 물체에 대한 물체 정보를 메타데이터로 저장하여 어노테이션을 생성하는 단계를 포함하고, 상기 메타데이터는 계층형 구조를 형성하고, 상기 360 비디오는 제목 정보를 가지고 하위에 복수의 360 비디오 프레임을 포함하고, 상기 360 비디오 프레임은 시간 정보를 가지고 하위에 복수의 면(face) 이미지를 포함하고,상기 면 이미지는 위치 정보를 가지고 하위에 물체 검출로 인식된 물체(object)를 포함하고-면은 상기 360 비디오 프레임에 3차 투영법을 적용하고 6개로 분할한 이미지를 의미함-;상기 물체는 레이블 정보, 위치 정보, 시간 속성을 포함하는 360 비디오 어노테이션 생성 방법
|
| 5 |
5
어노테이션 시스템에 의해 수행되는 360 비디오 어노테이션 방법에 있어서, 360 비디오에서 추출된 프레임으로부터 3차 투영된 이미지를 생성하는 단계;상기 생성된 3차 투영된 이미지에서 3차 투영된 이미지에 포함된 물체를 인식하는 단계;상기 3차 투영된 이미지 및 이미지에서 인식된 물체에 대하여 각각의 물체 정보를 취합하여 메타데이터로 저장하는 단계; 및 상기 3차 투영된 이미지에 상기 물체에 대한 물체 정보를 메타데이터로 저장하여 어노테이션을 생성하는 단계를 포함하고, 상기 저장된 메타데이터에 기반하여 어노테이션을 생성하는 단계는, 360 비디오 뷰어, 네비게이션, 어노테이션 정보를 포함하는 저작 도구를 제공하는 단계를 포함하고,상기 360 비디오 뷰어는, 360 비디오를 왜곡없이 비디오 프레임의 일부분을 시청하고, 각도의 전환이 가능하도록 하고, 상기 360 비디오 뷰어에 어노테이션 후보가 표시되고, 사용자에 의하여 입력된 어노테이션이 표시되고, 상기 네비게이션은, 사용자로부터 어노테이션되는 물체를 포함하는 비디오의 시간 정보 및 위치 정보를 검색하는 검색 기능을 제공하고,상기 어노테이션 정보는, 사용자로부터 작업 중인 비디오에서 어노테이션되는 리스트 표시하고, 각각의 어노테이션에 대한 메타데이터의 정보를 편집하는 기능을 제공하는 360 비디오 어노테이션 생성 방법
|
| 6 |
6
어노테이션 시스템에 있어서, 360 비디오에서 추출된 프레임으로부터 3차 투영된 이미지를 생성하는 이미지 생성부;상기 생성된 3차 투영된 이미지에서 3차 투영된 이미지에 포함된 물체를 인식하는 인식부;상기 3차 투영된 이미지 및 이미지에서 인식된 물체에 대하여 각각의 물체 정보를 취합하여 메타데이터로 저장하는 저장부; 및 상기 3차 투영된 이미지에 상기 물체에 대한 물체 정보를 메타데이터로 저장하여 어노테이션을 생성하는 어노테이션 생성부를 포함하고, 상기 이미지 생성부는, 360 비디오를 위도 정보 및 경도 정보를 평면에 반영하는 등변 투영된 이미지에 x축, y축, z축에 대하여 회전시켜 3차원 좌표를 매핑시키고, 상기 매핑된 3차원 좌표에 픽셀 값을 지정함으로써 상기 등변 투영된 이미지가 3차 투영된 이미지로 변환되는 어노테이션 시스템
|
