1 |
1
원본 이미지를 압축한 JPEG 압축 이미지를 입력하기 위한 제1 이미지 입력부;상기 제1 이미지 입력부로부터 상기 JPEG 압축 이미지를 입력받고, 상기 JPEG 압축 이미지의 블록단위 노이즈를 제거하면서 픽셀단위로 압축을 해제하여 1차로 해상도를 높인 압축 해제 이미지를 생성하는 압축 해제부; 및상기 압축 해제부로부터 압축 해제 이미지를 입력받고, 해당 압축 해제 이미지에서 테두리 픽셀간 강도(intensity) 값에 차이를 발생시켜 2차로 해상도를 높인 고해상도 이미지를 생성하는 해상도 향상부;를 포함하고,상기 압축 해제부 및 상기 해상도 향상부 각각은'상기 원본 이미지-입력 이미지'와 '상기 원본 이미지-상기 압축 해제부와 상기 해상도 향상부 통과 이미지'의 차이를 이용하여 상기 입력 이미지에 대한 학습을 수행하는 것을 특징으로 하는 JPEG 압축 이미지의 해상도 증가 시스템
|
2 |
2
제1항에 있어서,상기 압축 해제부는 상기 JPEG 압축 이미지의 본래 픽셀과 그 주변 픽셀의 조합으로 대체하는 픽셀제어로 번짐, 선명도, 밝기, 톤을 조절하며, 이웃하는 픽셀들의 선형화시키는 Conv 0026# ReLU 레이어 모듈; 상기 Conv 0026# ReLU 레이어 모듈에 배치 정규화 알고리즘(Batch Normalization)기능이 추가되어 레이어 모듈마다 입력의 분포를 같게 맞춰 학습시간을 줄이고 정확성을 향상시켜 상기 JPEG 압축 이미지에 블록단위 노이즈를 제거하는 복수의 Conv 0026# BN 0026# ReLU 레이어 모듈; 및 블록단위 노이즈를 제거된 JPEG 압축 이미지의 본래 픽셀과 그 주변 픽셀의 조합으로 대체하는 픽셀제어로 번짐, 선명도, 밝기, 톤을 조절하여 차이 이미지를 생성하는 Conv 레이어 모듈;을 포함하는 JPEG 압축 이미지의 해상도 증가 시스템
|
3 |
3
제 2항에 있어서, 상기 압축 해제부는 입력된 JPEG 압축 이미지가 상기 Conv 레이어 모듈을 통과함에 따라 생성된 상기 차이 이미지에 상기 JPEG 압축 이미지를 더함으로써 압축 해제 이미지를 생성하는 JPEG 압축 이미지의 해상도 증가 시스템
|
4 |
4
제 3항에 있어서,상기 해상도 향상부는상기 압축 해제 이미지의 본래 픽셀과 그 주변 픽셀의 조합으로 대체하는 픽셀제어로 번짐, 선명도, 밝기, 톤을 조절하며, 이웃하는 픽셀들의 선형화시키는 복수의 Conv 0026# ReLU 레이어 모듈; 및상기 Conv 0026# ReLU 레이어 모듈을 통과한 압축 해제 이미지의 픽셀제어로 번짐, 선명도, 밝기, 톤을 재조절하여 테두리 픽셀간 강도(intensity) 값에 차이를 발생시켜 차이 이미지를 생성하는 Conv 레이어 모듈;을 포함하는 JPEG 압축 이미지의 해상도 증가 시스템
|
5 |
5
제 4항에 있어서, 상기 해상도 향상부는 입력된 압축 해제 이미지가 상기 Conv 레이어 모듈을 통과함에 따라 생성된 상기 차이 이미지에 상기 압축 해제 이미지를 더함으로써 고해상도 이미지를 생성하는 JPEG 압축 이미지의 해상도 증가 시스템
|
6 |
6
제 5항에 있어서, 복수의 상기 Conv 0026# ReLU 레이어 모듈은 19개 중, 첫번째 Conv 0026# ReLU 레이어 모듈은 (채널수)×3×3×64의 필터를 사용하고, 2번째부터 19번째 Conv 0026# ReLU 레이어 모듈은 64×3×3×64필터를 사용하며, 마지막 20번째 Conv 0026# ReLU 레이어 모듈은 64×3×3×(채널수)의 필터를 사용하는 JPEG 압축 이미지의 해상도 증가 시스템
|
7 |
7
제1항 내지 제6항 중 어느 한 항에 있어서,상기 압축해제부와 상기 해상도 향상부는 학습시에 각각 40×40 이미지 조각들로 나누어 배치수 128로 설정하고, 41×41 이미지 조각으로 나누어 배치수 64로 설정하여, '상기 원본이미지-입력이미지'와 '상기 원본이미지-상기 압축해제부와 상기 해상도 향상부 통과 이미지'의 차이로 표준 제곱 오차(Mean Square Error)를 손실함수로 학습하는 JPEG 압축 이미지의 해상도 증가 시스템
|
8 |
8
(a) 제1 이미지 입력부가 압축해제부로 원본 이미지를 압축한 JPEG 압축 이미지를 입력하는 단계;(b) 상기 압축해제부가 JPEG 압축 이미지를 입력받아, 블록단위 노이즈를 제거하면서 픽셀단위로 압축을 해제하여 1차로 해상도가 향상된 압축 해제 이미지를 생성하는 단계; 및(c) 해상도 향상부가 상기 (b)단계에서 압축이 해제된 상기 압축 해제 이미지를 전달받아 2차로 해상도가 향상된 고해상도 이미지를 생성하는 단계를 포함하고,상기 (b) 및 (c) 단계는상기 압축 해제부 및 상기 해상도 향상부 각각이 '상기 원본 이미지-입력 이미지'와 '상기 원본 이미지-상기 압축 해제부와 상기 해상도 향상부 통과 이미지'의 차이를 이용하여 상기 입력 이미지에 대한 학습을 수행하고, 상기 학습 결과를 기반으로 상기 압축 해제 이미지 및 상기 고해상도 이미지를 생성하는 단계인 것을 특징으로 하는 JPEG 압축 이미지의 해상도 증가 방법
|
9 |
9
제8항에 있어서,상기 (b)단계는 (b-1) 상기 압축 해제부의 Conv 0026# ReLU 레이어 모듈이 JPEG 압축 이미지의 픽셀제어로 픽셀들을 선형화시키는단계;(b-2) 상기 압축 해제부의 Conv 0026# BN 0026# ReLU 레이어 모듈이 레이어 모듈마다 입력의 분포를 같게 맞춰 JPEG 압축 이미지에 블록단위 노이즈를 제거하는 단계;(b-3) 상기 압축 해제부의 Conv 레이어 모듈이 상기블록단위 노이즈가 제거된 JPEG 압축 이미지의 본래 픽셀과 그 주변 픽셀의 조합으로 대체하는 픽셀제어 차이 이미지를 생성하는 단계; 및(b-4) 상기 압축해제부는 입력된 JPEG 압축 이미지가 상기 Conv 레이어 모듈을 통과함에 따라 생성된 상기 차이 이미지에 상기 JPEG 압축 이미지를 더해 압축 해제 이미지를 생성단계;를 포함하는 JPEG 압축 이미지의 해상도 증가 방법
|
10 |
10
제 9항에 있어서,상기 (c)단계는 (c-1) 상기 해상도 향상부의 Conv 0026# ReLU 레이어 모듈이 상기 압축 해제 이미지의 픽셀제어로 이웃하는 픽셀들을 선형화시키는 단계;(c-2) 상기 해상도 향상부의 Conv 레이어 모듈이 압축 해제 이미지의 픽셀제어로 테두리 픽셀간 강도(intensity) 값에 차이를 발생시켜 차이 이미지를 생성하는 단계; 및(c-3) 상기 해상도 향상부가 상기 차이 이미지에 상기 압축 해제 이미지를 더함으로써 고해상도 이미지를 생성하는 단계;를 포함하는 JPEG 압축 이미지의 해상도 증가 방법
|