| 1 |
1
영상 확대부가, 입력된 저해상도 영상을 기설정된 기준에 따라 확대한 영상인 확대 저해상도 영상을 생성하는 단계;잔류 영상 생성부가, 상기 확대 저해상도 영상에 복수 개의 영상처리 레이어(layer)를 순차적으로 적용하여 상기 확대 저해상도 영상의 특징을 이용해 산출된 영상인 잔류 영상(residual image)을 생성하는 단계; 및영상 복원부가, 상기 확대 저해상도 영상 및 상기 잔류 영상을 이용하여, 확대 고해상도 영상을 생성하는 단계를 포함하며,상기 잔류 영상을 생성하는 단계는,상기 잔류 영상 생성부가, 상기 확대 저해상도 영상에 제1 영상처리 레이어를 적용하여 상기 확대 저해상도 영상의 특징을 포함하는 특징 맵(feature map)인 복수 개의 제1 특징 맵을 산출하는 단계;상기 잔류 영상 생성부가, 상기 복수 개의 제1 특징 맵에 제2 영상처리 레이어를 적용하여 상기 복수 개의 제1 특징 맵 각각의 대표 특징을 포함하는 특징 맵인 복수 개의 제2 특징 맵을 산출하는 단계;상기 잔류 영상 생성부가, 상기 복수 개의 제2 특징 맵에 제3 영상처리 레이어를 적용하여 상기 복수 개의 제2 특징 맵의 특징을 포함하는 특징 맵인 복수 개의 제3 특징 맵을 산출하는 단계; 및상기 잔류 영상 생성부가, 상기 복수 개의 제3 특징 맵에 제4 영상처리 레이어를 적용하여 상기 잔류 영상을 산출하는 단계를 순차적으로 포함하고,상기 제1 영상처리 레이어는, 기설정된 크기의 제1 윈도우(window)를 기설정된 개수만큼 포함하는 컨볼루션(convolution) 레이어이며,상기 제2 영상처리 레이어는, 기설정된 크기의 제2 윈도우(window)를 기설정된 개수만큼 포함하는 풀링(pooling) 레이어이며,상기 제3 영상처리 레이어는, 기설정된 크기의 제3 윈도우(window)를 기설정된 개수만큼 포함하는 컨볼루션(convolution) 레이어이며,상기 제4 영상처리 레이어는, 기설정된 크기의 제4 윈도우(window)를 포함하는 디컨볼루션(deconvolution) 레이어인 것을 특징으로 하는,고해상도 영상 복원 방법
|
| 2 |
2
제1항에 있어서,상기 확대 저해상도 영상을 생성하는 단계에서,상기 영상 확대부는, 상기 입력된 저해상도 영상의 너비 및 높이를 각각 2배로 확대하여 보간한 확대 저해상도 영상을 생성하는 것을 특징으로 하는,고해상도 영상 복원 방법
|
| 3 |
3
삭제
|
| 4 |
4
제1항에 있어서,상기 복수 개의 제1 특징 맵을 산출하는 단계에서,상기 복수 개의 제1 특징 맵은 상기 제1 윈도우의 개수만큼 산출되는 것을 특징으로 하는,고해상도 영상 복원 방법
|
| 5 |
5
제1항에 있어서,상기 복수 개의 제2 특징 맵을 산출하는 단계에서,상기 복수 개의 제2 특징 맵은 상기 제2 윈도우의 개수만큼 산출되는 것을 특징으로 하는,고해상도 영상 복원 방법
|
| 6 |
6
제5항에 있어서,상기 풀링 레이어는,상기 기설정된 크기의 제2 윈도우가 적용된 픽셀들 각각의 픽셀값들 중 가장 큰 픽셀값을 반복하여 추출하는 최대 풀링(Max Pooling) 레이어인 것을 특징으로 하는,고해상도 영상 복원 방법
|
| 7 |
7
제1항에 있어서,상기 복수 개의 제3 특징 맵을 산출하는 단계에서,상기 복수 개의 제3 특징 맵은 상기 제3 윈도우의 개수만큼 산출되는 것을 특징으로 하는,고해상도 영상 복원 방법
|
| 8 |
8
삭제
|
| 9 |
9
입력된 저해상도 영상을 기설정된 기준에 따라 확대한 영상인 확대 저해상도 영상을 생성하는 영상 확대부;상기 확대 저해상도 영상에 복수 개의 영상처리 레이어(layer)를 순차적으로 적용하여 상기 확대 저해상도 영상의 특징을 이용해 산출된 영상인 잔류 영상(residual image)을 생성하는 잔류 영상 생성부; 및상기 확대 저해상도 영상 및 상기 잔류 영상을 이용하여, 확대 고해상도 영상을 생성하는 영상 복원부를 포함하며,상기 잔류 영상 생성부는,상기 확대 저해상도 영상에 제1 영상처리 레이어를 적용하여 상기 확대 저해상도 영상의 특징을 포함하는 특징 맵(feature map)인 복수 개의 제1 특징 맵을 산출하고, 상기 복수 개의 제1 특징 맵에 제2 영상처리 레이어를 적용하여 상기 복수 개의 제1 특징 맵 각각의 대표 특징을 포함하는 특징 맵인 복수 개의 제2 특징 맵을 산출하고, 상기 복수 개의 제2 특징 맵에 제3 영상처리 레이어를 적용하여 상기 복수 개의 제2 특징 맵의 특징을 포함하는 특징 맵인 복수 개의 제3 특징 맵을 산출하고, 상기 복수 개의 제3 특징 맵에 제4 영상처리 레이어를 적용하여 상기 잔류 영상을 산출하는 동작을 순차적으로 수행하고,상기 제1 영상처리 레이어는, 기설정된 크기의 제1 윈도우(window)를 기설정된 개수만큼 포함하는 컨볼루션(convolution) 레이어이며,상기 제2 영상처리 레이어는, 기설정된 크기의 제2 윈도우(window)를 기설정된 개수만큼 포함하는 풀링(pooling) 레이어이며,상기 제3 영상처리 레이어는, 기설정된 크기의 제3 윈도우(window)를 기설정된 개수만큼 포함하는 컨볼루션(convolution) 레이어이며,상기 제4 영상처리 레이어는, 기설정된 크기의 제4 윈도우(window)를 포함하는 디컨볼루션(deconvolution) 레이어인 것을 특징으로 하는,고해상도 영상 복원 장치
|
