| 1 |
1
복수 개 시점의 영상을 바탕 시점 영상과 추가 시점 영상으로 분할하는 단계;상기 바탕 시점 영상 대비 상기 추가 시점 영상의 비율을 계산하는 단계;상기 바탕 시점 영상과 상기 추가 시점 영상에 대해 예측 동작과 및 변환 동작을 수행하여 변환 계수를 얻고, 상기 바탕 및 추가 시점 영상의 변환 계수를 각각 복수 개의 양자화 단계로 양자화하여 양자화 변환 계수를 얻는 단계;상기 비율을 근거로, 상기 복수 개의 양자화 단계로 양자화된 양자화 변환 계수 중에서, 상기 바탕 시점 영상과 상기 추가 시점 영상에 대해 각각 제1 양자화 단계와 제2 양자화 단계로 양자화된 양자화 변환 계수를 선택하는 단계; 및상기 선택된 양자화 변환 계수를 엔트로피 코딩하는 단계를 포함하여 이루어지는 다시점 영상 인코딩 방법
|
| 2 |
2
제1 항에 있어서,상기 비율은 디코더가 상기 바탕 시점 영상과 상기 추가 시점 영상을 이용하여 합성하는 합성 영상에서 상기 추가 시점 영상이 차지하는 비율로 계산되는 것을 특징으로 하는 다시점 영상 인코딩 방법
|
| 3 |
3
제2 항에 있어서,상기 비율은 상기 합성 영상의 픽셀 수와 상기 추가 시점 영상의 픽셀 수의 비율인 것을 특징으로 하는 다시점 영상 인코딩 방법
|
| 4 |
4
제1 항에 있어서,상기 선택하는 단계는, 목표로 하는 율-왜곡 비용을 만족하도록 하는 상기 제1 양자화 단계와 상기 제2 양자화 단계로 양자화된 양자화 변환 계수를 선택하는 것을 특징으로 하는 다시점 영상 인코딩 방법
|
| 5 |
5
제4 항에 있어서,상기 율-왜곡 비용의 만족 여부는 프레임 단위로 이루어지는 것을 특징으로 하는 다시점 영상 인코딩 방법
|
| 6 |
6
제4 항에 있어서,상기 선택하는 단계에서 상기 복수 개의 양자화 단계로 양자화된 양자화 변환 계수 중에서 상기 율-왜곡 비용을 만족하도록 하는 양자화 단계로 양자화된 양자화 변환 계수가 없을 때, 상기 바탕 시점 영상의 픽셀 수를 변경하고, 상기 변경된 픽셀 수를 적용하여, 상기 복수 개 시점의 영상을 상기 바탕 시점 영상과 추가 시점 영상으로 다시 분할하고, 상기 비율을 계산하고, 상기 양자화 변환 계수를 얻고, 상기 양자화 변환 계수를 선택하는 단계를 다시 수행하는 것을 특징으로 하는 다시점 영상 인코딩 방법
|
| 7 |
7
제1 항에 있어서,상기 계산하는 단계는 GOP(Group Of Picture) 단위로 상기 비율을 계산하는 것을 특징으로 하는 다시점 영상 인코딩 방법
|
| 8 |
8
제1 항에 있어서,상기 선택하는 단계는, 상기 비율을 복수 개의 범위로 구분하고, 각 범위에 대해 상기 바탕 시점 영상과 상기 추가 시점 영상에 대해 각각 정해진 양자화 단계를 적용하여 상기 양자화 변환 계수를 결정하는 것을 특징으로 하는 다시점 영상 인코딩 방법
|
| 9 |
9
제1 항에 있어서,상기 비율이 각각 제1 값 및 상기 제1 값보다 작은 제2 값이고, 상기 추가 시점 영상에 대해 상기 제1 값과 제2 값을 근거로 상기 선택되는 양자화 변환 계수를 생성할 때 적용되는 제2 양자화 단계가 각각 제2-1 단계와 제2-2 단계일 때, 상기 제2-2 단계는 상기 제2-1 단계보다 품질이 더 낮은 양자화 단계인 것을 특징으로 하는 다시점 영상 인코딩 방법
|
| 10 |
10
제1 항에 있어서,상기 분할하는 단계는, 상기 복수 개의 시점의 영상 중에서 하나 이상의 바탕 시점 영상을 선택하여 바탕 시점 아틀라스를 생성하고, 상기 복수 개의 시점의 영상 중에서 상기 하나 이상의 바탕 시점 영상으로 선택되지 않은 나머지 시점의 영상에서 상기 바탕 시점 영상과 중복을 제거하고 남은 패치 영상으로 추가 시점 아틀라스를 생성하는 것을 특징으로 하는 다시점 영상 인코딩 방법
|
| 11 |
11
제1 항에 있어서,상기 바탕 시점 영상과 상기 추가 시점 영상의 구성 정보 및/또는 상기 바탕 시점 영상과 상기 추가 시점 영상으로부터 합성 영상을 생성하기 위한 제어 정보를 포함하는 메타데이터에 상기 선택된 양자화 변환 계수의 생성에 적용된 양자화 단계와 관련된 정보를 반영하는 단계를 더 포함하여 이루어지는 것을 특징으로 하는 다시점 영상 인코딩 방법
|
| 12 |
12
복수 개 시점의 영상 중에서 바탕 시점으로 선택된 바탕 시점 영상을 포함하는 바탕 시점 아틀라스 및 상기 선택되지 않은 나머지 시점의 추가 시점 영상에서 상기 바탕 시점 영상과 중복되는 부분을 제거하여 생성되는 패치 영상을 포함하는 바탕 시점 아틀라스를 생성하고, 상기 바탕 시점 영상과 상기 패치 영상의 비율을 계산하기 위한 아틀라스 생성부;상기 바탕 시점 아틀라스에 포함된 상기 바탕 시점 영상과 상기 추가 시점 아틀라스에 포함된 패치 영상을 2차원 코덱을 이용하여 부호화하기 위한 텍스처 인코더; 및상기 바탕 시점 아틀라스와 상기 추가 시점 아틀라스의 구성 정보 및/또는 상기 바탕 시점 아틀라스와 상기 추가 시점 아틀라스의 합성 과정을 제어하기 위한 제어 정보를 부호화하여 메타데이터로 출력하기 위한 메타데이터 구성부를 포함하여 구성되고,상기 텍스처 인코더는, 상기 바탕 시점 영상과 상기 패치 영상에 대해 예측 동작과 및 변환 동작을 수행하여 변환 계수를 얻고, 상기 바탕 시점 영상 및 상기 패치 영상의 변환 계수를 각각 복수 개의 양자화 단계로 양자화하여 양자화 변환 계수를 얻고, 상기 비율을 근거로 상기 복수 개의 양자화 단계로 양자화된 양자화 변환 계수 중에서 상기 바탕 시점 영상과 상기 패치 영상에 대해 각각 제1 양자화 단계와 제2 양자화 단계로 양자화된 양자화 변환 계수를 선택하고, 상기 선택된 양자화 변환 계수를 엔트로피 코딩하는 것을 특징으로 하는 다시점 영상 인코딩 장치
|
| 13 |
13
제12 항에 있어서,상기 비율은 디코더가 상기 바탕 시점 아틀라스와 상기 추가 시점 아틀라스를 이용하여 합성하는 합성 영상에서 상기 추가 시점 아틀라스가 차지하는 비율로 계산되는 것을 특징으로 하는 다시점 영상 인코딩 장치
|
| 14 |
14
제13 항에 있어서,상기 비율은 상기 합성 영상의 픽셀 수와 상기 추가 시점 아틀라스의 픽셀 수의 비율인 것을 특징으로 하는 다시점 영상 인코딩 장치
|
| 15 |
15
제12 항에 있어서,상기 텍스처 인코더는 목표로 하는 율-왜곡 비용을 만족하도록 하는 상기 제1 양자화 단계와 상기 제2 양자화 단계로 양자화된 양자화 변환 계수를 선택하는 것을 특징으로 하는 다시점 영상 인코딩 장치
|
| 16 |
16
제15 항에 있어서,상기 텍스처 인코더는 상기 율-왜곡 비용의 만족 여부를 결정하는 동작을 프레임 단위로 수행하는 것을 특징으로 하는 다시점 영상 인코딩 장치
|
| 17 |
17
제12 항에 있어서,상기 아틀라스 생성부는 GOP(Group Of Picture) 단위로 상기 비율을 계산하는 것을 특징으로 하는 다시점 영상 인코딩 장치
|
| 18 |
18
제12 항에 있어서,상기 텍스처 인코더는, 상기 비율을 복수 개의 범위로 구분하고, 각 범위에 대해 상기 바탕 시점 영상과 상기 패치 영상에 대해 각각 정해진 양자화 단계를 적용하여 상기 양자화 변환 계수를 결정하는 것을 특징으로 하는 다시점 영상 인코딩 장치
|
| 19 |
19
제12 항에 있어서,상기 비율이 각각 제1 값 및 상기 제1 값보다 작은 제2 값이고, 상기 추가 시점 영상에 대해 상기 제1 값과 제2 값을 근거로 상기 선택되는 양자화 변환 계수를 생성할 때 적용되는 제2 양자화 단계가 각각 제2-1 단계와 제2-2 단계일 때, 상기 제2-2 단계는 상기 제2-1 단계보다 품질이 더 낮은 양자화 단계인 것을 특징으로 하는 다시점 영상 인코딩 장치
|
| 20 |
20
제12 항에 있어서,상기 메타데이터 구성부는 상기 메타데이터에 상기 선택된 양자화 변환 계수의 생성에 적용된 양자화 단계와 관련된 정보를 반영하는 것을 특징으로 하는 다시점 영상 인코딩 장치
|
| 21 |
21
2차원 코덱을 이용하여 바탕 시점과 추가 시점의 부호화된 텍스처 데이터를 복호화하여 바탕 시점 아틀라스와 추가 시점 아틀라스를 생성하기 위한 텍스처 디코더;상기 바탕 시점 아틀라스와 상기 추가 시점 아틀라스의 구성 정보 및/또는 상기 바탕 시점 아틀라스와 상기 추가 시점 아틀라스의 합성 과정을 제어하기 위한 제어 정보를 포함하는 메타데이터를 해석하기 위한 메타데이터 파서;상기 메타데이터를 이용하여 상기 추가 시점 아틀라스에 포함된 패치 영상이 놓일 위치와 방향을 결정하여 패치 점유 지도를 생성하기 위한 아틀라스 패치 점유 지도 생성부; 및상기 메타데이터와 상기 패치 점유 지도를 이용하여 상기 바탕 시점 아틀라스와 상기 추가 시점 아틀라스로부터 시청자의 움직임에 대응하는 영상을 생성하기 위한 재생부를 포함하여 구성되고,상기 메타데이터는 상기 바탕 시점 영상과 상기 패치 영상의 양자화 변환 계수의 생성에 적용된 양자화 단계와 관련된 정보를 더 포함하고,상기 텍스처 디코더는 상기 양자화 단계와 관련된 정보를 이용하여 상기 바탕 시점 영상과 상기 패치 영상의 양자화 변환 계수를 역양자화하고, 상기 역양자화된 변환 계수를 역변환하여 레지듀얼 샘플들을 복원하고, 레지듀얼 샘플들과 예측 동작으로 생성한 예측 샘플들을 이용하여 복원 샘플들을 생성하여 상기 바탕 시점 영상과 상기 패치 영상을 복원하고,상기 바탕 시점 영상의 변환 계수에 적용된 양자화 단계와 상기 패치 영상의 변환 계수에 적용된 양자화 단계는 상기 바탕 시점 영상과 상기 패치 영상의 비율을 근거로 서로 다른 값으로 결정되는 것을 특징으로 하는 다시점 영상 디코딩 장치
|
