| 1 |
1
다시점 영상 정보의 복호화 방법에 있어서,복수의 카메라에 의해 촬영된 복수의 영상의 영상 데이터에 관한 비트 스트림(bit stream)을 수신하는 단계;상기 비트 스트림에 포함된 영상 데이터로부터 복수의 영상의 영상 프레임 내의 블록의 뎁스 정보를 추출하여 제1정보를 생성하는 단계;복수의 영상의 영상 프레임 간의 동일한 모션 추정이 발생하였는지 판단하여 제2정보를 생성하는 단계;상기 복수의 영상의 영상 프레임 내의 블록의 픽셀 정보를 추출하여 제3정보를 생성하는 단계;복수의 카메라에 의해 촬영된 복수의 영상의 영상 데이터로부터 복수의 영상의 영상 프레임의 블록의 뎁스 정보를 추출하여 뎁스 정보 유사도 값을 연산하는 단계;복수의 영상의 영상 프레임 간의 동일한 모션 추정이 발생하였는지 판단하여 모션 추정값을 연산하는 단계;복수의 영상의 영상 프레임 내의 블록의 픽셀 정보를 추출하여 픽셀 정보 유사도 값을 연산하는 단계; 상기 뎁스 정보 유사도 값, 상기 모션 추정값 및 상기 픽셀 정보 유사도 값에 기초하여 머신 러닝 알고리즘을 이용하여 미리 훈련된 다시점 영상 정보의 공간 보상 모델을 생성하는 단계; 및 상기 미리 훈련되어 생성된 상기 다시점 영상 정보의 공간 보상(Disparity Compensation) 모델에 제1정보 내지 상기 제3정보를 입력하여, 복수의 영상의 영상 프레임 간의 블록 매칭을 수행하고 공간 보상을 수행하는 단계,를 포함하되,상기 뎁스 정보 유사도 값을 연산하는 단계는, 상기 복수의 영상의 영상 프레임 중 제1영상의 영상 데이터의 제1블록의 뎁스 정보 및 제2영상의 영상 데이터의 제2블록의 뎁스 정보를 비교하여, 뎁스 정보 유사도 값을 연산하고,상기 모션 추정값을 연산하는 단계는,상기 복수의 영상의 영상 프레임 간의 예측 유닛(PU)을 비교하여 상기 복수의 영상의 영상 프레임 간의 동일한 모션 추정이 발생하였는지 판단하고,상기 픽셀 정보 유사도 값을 연산하는 단계는, 복수의 영상의 영상 프레임 내의 블록의 제1영역에 해당하는 픽셀 정보 각각을 추출하여 픽셀 정보 유사도 값을 연산하는 것인, 다시점 영상 정보의 복호화 방법
|
| 2 |
2
삭제
|
| 3 |
3
제1항에 있어서,상기 머신 러닝 알고리즘은 SVM(Support Vector Machine)을 포함하는 것인, 다시점 영상 정보의 복호화 방법
|
| 4 |
4
제1항에 있어서,상기 복수의 영상의 영상 프레임 내의 상기 뎁스 정보는 영상 프레임 내의 각 블록의 64x64부터 8x8까지의 CU(Coding Unit)의 크기 정보 또는 트리 구조에 관한 정보를 포함하는 것인, 다시점 영상 정보의 복호화 방법
|
| 5 |
5
제1항에 있어서,상기 복수의 영상의 영상 프레임 간의 동일한 모션 추정이 발생하였는지 판단하여 모션 추정값을 연산하는 단계는, 영상 프레임 간의 대응하는 블록의 예측 유닛(Prediction Unit)이 동일한 경우, 상기 영상 프레임 간의 동일한 모션 추정이 발생한 것으로 판단하여 미리 설정된 모션 추정값을 부여하는 것인, 다시점 영상 정보의 복호화 방법
|
| 6 |
6
다시점 영상 정보의 복호화 방법에 있어서,복수의 카메라에 의해 촬영된 복수의 영상의 영상 데이터로부터 복수의 영상의 영상 프레임 내의 블록의 뎁스 정보를 추출하여 뎁스 정보 유사도 값을 연산하는 단계;복수의 영상의 영상 프레임 간의 동일한 모션 추정이 발생하였는지 판단하여 모션 추정값을 연산하는 단계;복수의 영상의 영상 프레임 내의 블록의 픽셀 정보를 추출하여 픽셀 정보 유사도 값을 연산하는 단계; 상기 뎁스 정보 유사도 값, 상기 모션 추정값 및 상기 픽셀 정보 유사도 값에 기초하여 머신 러닝 알고리즘을 이용하여 미리 훈련된 다시점 영상 정보의 공간 보상 모델을 생성하는 단계; 및상기 다시점 영상 정보의 공간 보상 모델을 이용하여, 복수의 카메라에 의해 촬영되어 부호화된 영상 데이터를 복호화하는 단계,를 포함하고, 상기 영상 데이터를 복호화하는 단계는,복수의 카메라에 의해 촬영된 부호화된 영상 데이터에 관한 비트 스트림(bit stream)을 수신하는 단계;상기 비트 스트림에 포함된 영상 데이터로부터 복수의 영상의 영상 프레임 내의 블록의 뎁스 정보를 추출하여 제1정보를 생성하는 단계;복수의 영상의 영상 프레임 간의 동일한 모션 추정이 발생하였는지 판단하여 제2정보를 생성하는 단계;상기 복수의 영상의 영상 프레임 내의 블록의 픽셀 정보를 추출하여 제3정보를 생성하는 단계; 및상기 다시점 영상 정보의 공간 보상 모델에 제1정보 내지 상기 제3정보를 입력하여, 복수의 영상의 영상 프레임 간의 블록 매칭을 수행하고 공간 보상을 수행하는 단계,를 포함하되,상기 뎁스 정보 유사도 값을 연산하는 단계는, 상기 복수의 영상의 영상 프레임 중 제1영상의 영상 데이터의 제1블록의 뎁스 정보 및 제2영상의 영상 데이터의 제2블록의 뎁스 정보를 비교하여, 뎁스 정보 유사도 값을 연산하고,상기 모션 추정값을 연산하는 단계는,상기 복수의 영상의 영상 프레임 간의 예측 유닛(PU)을 비교하여 상기 복수의 영상의 영상 프레임 간의 동일한 모션 추정이 발생하였는지 판단하고,상기 픽셀 정보 유사도 값을 연산하는 단계는, 복수의 영상의 영상 프레임 내의 블록의 제1영역에 해당하는 픽셀 정보 각각을 추출하여 픽셀 정보 유사도 값을 연산하는 것인, 다시점 영상 정보의 복호화 방법
|
| 7 |
7
제6항에 있어서,상기 머신 러닝 알고리즘은 SVM(Support Vector Machine)을 포함하는 것인, 다시점 영상 정보의 복호화 방법
|
| 8 |
8
삭제
|
| 9 |
9
다시점 영상 정보의 복호화 장치에 있어서,복수의 카메라에 의해 촬영된 복수의 영상의 영상 데이터에 관한 비트 스트림(bit stream)을 수신하는 수신부;상기 비트 스트림에 포함된 영상 데이터로부터 복수의 영상의 영상 프레임 내의 블록의 뎁스 정보, 복수의 영상의 영상 프레임 간의 모션 추정에 관한 정보 및 상기 복수의 영상의 영상 프레임 내의 블록의 픽셀 정보를 포함하는 상기 비트 스트림의 특징 정보를 추출하는 특징 추출부; 및미리 훈련되어 생성된 다시점 영상 정보의 공간 보상(Disparity Compensation) 모델을 포함하며, 상기 공간 보상 모델에 상기 추출된 특징 정보를 입력하여 복수의 영상의 영상 프레임 간의 블록 매칭을 수행하고 공간 보상을 수행하는 복호화부,를 포함하되,상기 특징 추출부는,상기 비트 스트림에 포함된 영상 데이터로부터 복수의 영상의 영상 프레임 내의 블록의 뎁스 정보를 추출하여 제1정보를 생성하는 제1정보 추출부;복수의 영상의 영상 프레임 간의 동일한 모션 추정이 발생하였는지 판단하여 제2정보를 생성하는 제2정보 추출부; 및상기 복수의 영상의 영상 프레임 내의 블록의 픽셀 정보를 추출하여 제3정보를 생성하는 제3정보 추출부,를 포함하고, 상기 제1정보 추출부는,상기 복수의 영상의 영상 프레임 중 제1영상의 영상 데이터의 제1블록의 뎁스 정보 및 제2영상의 영상 데이터의 제2블록의 뎁스 정보를 비교하여, 뎁스 정보 유사도 값을 연산하고,상기 제2정보 추출부는,상기 복수의 영상의 영상 프레임 간의 예측 유닛(PU)을 비교하여 상기 복수의 영상의 영상 프레임 간의 동일한 모션 추정이 발생하였는지 판단하고,상기 제3정보 추출부는,복수의 영상의 영상 프레임 내의 블록의 제1영역에 해당하는 픽셀 정보 각각을 추출하여 픽셀 정보 유사도 값을 연산하는 것인, 다시점 영상 정보의 복호화 장치
|
| 10 |
10
제9항에 있어서,상기 공간 보상 모델은, 복수의 카메라에 의해 촬영된 복수의 영상의 영상 데이터로부터 복수의 영상의 영상 프레임 내의 블록의 뎁스 정보를 추출하여 연산된 뎁스 정보 유사도 값, 복수의 영상의 영상 프레임 간의 동일한 모션 추정이 발생하였는지 판단하여 연산된 모션 추정값 및 복수의 영상의 영상 프레임 내의 블록의 픽셀 정보를 추출하여 연산된 픽셀 정보 유사도 값에 기초하여 머신 러닝 알고리즘을 이용하여 생성되는 것인, 다시점 영상 정보의 복호화 장치
|
| 11 |
11
삭제
|
| 12 |
12
제10항에 있어서,상기 머신 러닝 알고리즘은 SVM(Support Vector Machine)을 포함하는 것인, 다시점 영상 정보의 복호화 장치
|
| 13 |
13
제1항, 제3항 내지 제7항 중 어느 한 항의 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한, 컴퓨터로 읽을 수 있는 기록매체
|
