1 |
1
360도 영상 전송 장치에 의해 수행되는 360도 영상 전송 방법에 있어서, 입력 영상을 기본 계층의 비트스트림 및 적어도 하나의 타일로 이루어진 타일 계층의 비트스트림으로 부호화하는 단계; 360도 영상 렌더링 장치로부터 수신된 사용자 시점 정보를 이용해, 상기 부호화된 타일 계층의 비트스트림에서 사용자 시점 영상에 포함되는 목표 타일을 선택하는 단계; 상기 선택된 목표 타일에 따라 목표 타일 데이터를 추출하고, 상기 추출된 목표 타일 데이터에서 원본 파라미터 셋을 수정하여 대체 파라미터 셋을 생성하고, 상기 생성된 대체 파라미터 셋을 이용하여 타일 비트스트림을 생성하는 단계; 및 상기 360도 영상 렌더링 장치에 상기 부호화된 기본 계층의 비트스트림 및 상기 생성된 타일 비트스트림을 스트리밍하는 단계를 포함하는, 타일 기반 360도 영상 전송 방법
|
2 |
2
제1항에 있어서, 상기 타일 비트스트림을 생성하는 단계는, 추출해야 할 목표 타일들의 인덱스들이 주어지면, NAL(Network abstraction layer) 유닛 단위로 구성된 비트스트림을 분석하여 추출 시 필요한 목표 타일 개수 정보, 영상 크기 정보, 타일 크기 집합 정보 및 CTU 크기 정보 중에서 적어도 하나를 저장하는, 타일 기반 360도 영상 전송 방법
|
3 |
3
제1항에 있어서, 상기 타일 비트스트림을 생성하는 단계는, 상기 원본 파라미터 셋을 수정하여 슬라이스 세그먼트 주소 집합, 영상 크기, 타일 크기 집합, 및 루프 필터 옵션 중에서 적어도 하나를 반영한 대체 파라미터 셋을 생성하는, 타일 기반 360도 영상 전송 방법
|
4 |
4
제1항에 있어서, 상기 타일 비트스트림을 생성하는 단계는, 시퀀스 파라미터 셋(SPS, sequence parameter set)에서 루마 샘플의 픽처 넓이(pic_width_in_luma_samples)와 루마 샘플에서의 픽처 높이(pic_height_in_luma_samples)를 수정하여 출력 영상의 크기를 반영하는, 타일 기반 360도 영상 전송 방법
|
5 |
5
제1항에 있어서, 상기 타일 비트스트림을 생성하는 단계는, 픽처 파라미터 셋(PPS, picture parameter set)에서 타일 행 개수 정보(num_tile_rows_minus1)와 타일 열 개수 정보(num_tile_columns_minus1)를 수정하여 타일의 열 및 행 개수를 수정하는, 타일 기반 360도 영상 전송 방법
|
6 |
6
제1항에 있어서, 상기 타일 비트스트림을 생성하는 단계는, 타일이 비대칭적으로 분할되었을 경우, 픽처 파라미터 셋(PPS)에서 타일 행의 높이 정보(row_height_minus1) 및 타일 열의 폭 정보(column_width_minus1) 배열을 수정하여 각 타일의 크기를 수정하는, 타일 기반 360도 영상 전송 방법
|
7 |
7
제1항에 있어서, 상기 타일 비트스트림을 생성하는 단계는, VCL(Video Coding Layer) NAL(Network Abstraction Layer) 유닛인 슬라이스(slice)의 헤더(header) 정보를 수정하는, 타일 기반 360도 영상 전송 방법
|
8 |
8
제1항에 있어서, 상기 타일 비트스트림을 생성하는 단계는, 대체 파라미터 셋에 포함된 시퀀스 파라미터 셋(SPS) 및 픽처 파라미터 셋(PPS)을 사용해 픽쳐 객체를 생성하고, 추출할 타일의 인덱스를 참고하여 상기 생성된 픽처 객체로부터 각 슬라이스의 첫 번째 코딩 트리 유닛(CTU, Coding tree unit)의 순차 스캔(raster scan) 주소를 구하는, 타일 기반 360도 영상 전송 방법
|
9 |
9
제8항에 있어서, 상기 타일 비트스트림을 생성하는 단계는, 상기 구한 순차 스캔 주소를 타일 스캔(tile scan) 주소로 변환하고 상기 변환된 타일 스캔 주소를 슬라이스에 반영하여 슬라이스 세그먼트 주소를 수정하는, 타일 기반 360도 영상 전송 방법
|
10 |
10
제9항에 있어서, 상기 슬라이스 세그먼트 주소는, 픽쳐(picture)에 포함된 슬라이스 내의 첫 번째 코딩 트리 유닛의 순차 스캔 주소를 나타내고, 슬라이스 객체에 포함된 픽쳐 객체로부터 도출되는, 타일 기반 360도 영상 전송 방법
|
11 |
11
입력 영상을 기본 계층의 비트스트림 및 적어도 하나의 타일로 이루어진 타일 계층의 비트스트림으로 부호화하는 영상 부호화기; 360도 영상 렌더링 장치로부터 수신된 사용자 시점 정보를 이용해, 상기 부호화된 타일 계층의 비트스트림에서 사용자 시점 영상에 포함되는 목표 타일을 선택하는 사용자 시점 타일 선택기; 상기 선택된 목표 타일에 따라 목표 타일 데이터를 추출하고, 상기 추출된 목표 타일 데이터에서 원본 파라미터 셋을 수정하여 대체 파라미터 셋을 생성하고, 상기 생성된 대체 파라미터 셋을 이용하여 타일 비트스트림을 생성하는 다중 타일 추출기; 및 상기 360도 영상 렌더링 장치에 상기 부호화된 기본 계층의 비트스트림 및 상기 생성된 타일 비트스트림을 전송하는 송신기를 포함하는, 타일 기반 360도 영상 전송 장치
|
12 |
12
제11항에 있어서, 상기 다중 타일 추출기는, 추출해야 할 목표 타일들의 인덱스들이 주어지면, NAL(Network abstraction layer) 유닛 단위로 구성된 비트스트림을 분석하여 추출 시 필요한 목표 타일 개수 정보, 영상 크기 정보, 타일 크기 집합 정보 및 CTU 크기 정보 중에서 적어도 하나를 저장하는, 타일 기반 360도 영상 전송 장치
|
13 |
13
제11항에 있어서, 상기 다중 타일 추출기는, 상기 원본 파라미터 셋을 수정하여 슬라이스 세그먼트 주소 집합, 영상 크기, 타일 크기 집합, 및 루프 필터 옵션 중에서 적어도 하나를 반영한 대체 파라미터 셋을 생성하는, 타일 기반 360도 영상 전송 장치
|
14 |
14
제11항에 있어서, 상기 다중 타일 추출기는, 시퀀스 파라미터 셋(SPS, sequence parameter set)에서 루마 샘플의 픽처 넓이(pic_width_in_luma_samples)와 루마 샘플에서의 픽처 높이(pic_height_in_luma_samples)를 수정하여 출력 영상의 크기를 반영하는, 타일 기반 360도 영상 전송 장치
|
15 |
15
제11항에 있어서, 상기 다중 타일 추출기는, 픽처 파라미터 셋(PPS, picture parameter set)에서 타일 행 개수 정보(num_tile_rows_minus1)와 타일 열 개수 정보(num_tile_columns_minus1)를 수정하여 타일의 열 및 행 개수를 수정하는, 타일 기반 360도 영상 전송 장치
|
16 |
16
제11항에 있어서, 상기 다중 타일 추출기는, 타일이 비대칭적으로 분할되었을 경우, 픽처 파라미터 셋(PPS)에서 타일 행의 높이 정보(row_height_minus1) 및 타일 열의 폭 정보(column_width_minus1) 배열을 수정하여 각 타일의 크기를 수정하는, 타일 기반 360도 영상 전송 장치
|
17 |
17
제11항에 있어서, 상기 다중 타일 추출기는, VCL(Video Coding Layer) NAL(Network Abstraction Layer) 유닛인 슬라이스(slice)의 헤더(header) 정보를 수정하는, 타일 기반 360도 영상 전송 장치
|
18 |
18
제11항에 있어서, 상기 다중 타일 추출기는, 대체 파라미터 셋에 포함된 시퀀스 파라미터 셋(SPS) 및 픽처 파라미터 셋(PPS)을 사용해 픽쳐 객체를 생성하고, 추출할 타일의 인덱스를 참고하여 상기 생성된 픽처 객체로부터 각 슬라이스의 첫 번째 코딩 트리 유닛(CTU, Coding tree unit)의 순차 스캔(raster scan) 주소를 구하는, 타일 기반 360도 영상 전송 장치
|
19 |
19
제18항에 있어서, 상기 다중 타일 추출기는, 상기 구한 순차 스캔 주소를 타일 스캔(tile scan) 주소로 변환하고 상기 변환된 타일 스캔 주소를 슬라이스에 반영하여 슬라이스 세그먼트 주소를 수정하는, 타일 기반 360도 영상 전송 장치
|
20 |
20
제19항에 있어서, 상기 슬라이스 세그먼트 주소는, 픽쳐(picture)에 포함된 슬라이스 내의 첫 번째 코딩 트리 유닛의 순차 스캔 주소를 나타내고, 슬라이스 객체에 포함된 픽쳐 객체로부터 도출되는, 타일 기반 360도 영상 전송 장치
|
21 |
21
프로세서에 의해 실행될 때, 상기 프로세서로 하여금 방법을 실행하게 하는 명령어들을 저장하기 위한 비일시적 컴퓨터 판독가능 저장 매체로서, 상기 방법은: 입력 영상을 기본 계층의 비트스트림 및 적어도 하나의 타일로 이루어진 타일 계층의 비트스트림으로 부호화하는 단계; 360도 영상 렌더링 장치로부터 수신된 사용자 시점 정보를 이용해, 상기 부호화된 타일 계층의 비트스트림에서 사용자 시점 영상에 포함되는 목표 타일을 선택하는 단계; 상기 선택된 목표 타일에 따라 목표 타일 데이터를 추출하고, 상기 추출된 목표 타일 데이터에서 원본 파라미터 셋을 수정하여 대체 파라미터 셋을 생성하고, 상기 생성된 대체 파라미터 셋을 이용하여 타일 비트스트림을 생성하는 단계; 및 상기 360도 영상 렌더링 장치에 상기 부호화된 기본 계층의 비트스트림 및 상기 생성된 타일 비트스트림을 스트리밍하는 단계를 포함하는, 비일시적 컴퓨터 판독 가능한 저장 매체
|