| 1 |
1
입력된 블러 이미지(Blurred image)로부터 블러를 제거하여 정답 이미지와 유사한 디블러 이미지(Deblurred image)를 생성하는 블러 이미지 처리 방법에 있어서,상기 블러 이미지로부터 블러 제거를 위한 특징 분포를 갖는 제1 입력 특징맵 및 제2 입력 특징맵을 생성하는 단계;외부 정보 없이 블러 제거를 위한 특징 분포에서 얼굴 인식을 위한 특징 분포로 변환하는 SSFT(Self-Spatial Feature Transform) 모듈을 이용하여 상기 제1 입력 특징맵으로부터 예측 특징맵을 생성하는 단계; 및상기 제2 입력 특징맵 및 상기 예측 특징맵에 기반하여 디블러 이미지를 생성하는 단계를 포함하는블러 이미지 처리 방법
|
| 2 |
2
제1항에 있어서,상기 예측 특징맵은 생성적 적대적 네트워크 (Generative Adversarial Network, GAN)를 통해 학습되는 사전 정보 생성자에 의해 생성되는블러 이미지 처리 방법
|
| 3 |
3
제2항에 있어서,상기 GAN은 상기 사전 정보 생성자;사전 학습된 얼굴 인식 모듈을 통해 상기 정답 이미지로부터 얼굴의 질감 정보를 포함하는 얼굴 특징맵을 생성하는 얼굴 인식 모듈; 및상기 예측 특징맵 또는 상기 얼굴 특징맵을 입력으로 하고, 상기 입력이 상기 예측 특징맵인지 또는 상기 얼굴 특징맵인지 여부를 식별하는 식별자를 포함하는블러 이미지 처리 방법
|
| 4 |
4
제3항에 있어서,상기 식별자는상기 예측 특징맵 및 상기 얼굴 특징맵에 대하여 채널별로 서로 다른 가중치를 부여하는 단계;상기 가중치에 따라 채널을 연결하여 내부 특징을 처리하는 단계; 및상기 내부 특징 처리 결과에 따라 상기 입력이 상기 예측 특징맵인지 또는 상기 얼굴 특징맵인지 여부를 분류하는 단계를 거쳐 상기 입력을 식별하는블러 이미지 처리 방법
|
| 5 |
5
제4항에 있어서,상기 사전 정보 생성자는픽셀 단위의 거리를 계산하여 산출되는 픽셀 손실, 상기 사전 정보 생성자와 상기 식별자의 경쟁 학습에 의해 발생하는 적대적 손실 및 상기 예측 특징맵의 가중치에 따른 거리를 계산하여 산출되는 사전 손실에 기반하여 학습되는블러 이미지 처리 방법
|
| 6 |
6
제1항에 있어서,상기 디블러 이미지를 생성하는 단계는SFT(Spatial Feature Transform) 모듈을 이용하여 상기 예측 특징맵을 사전 정보로 활용하여 상기제2 입력 특징맵에 적용하는 단계; 및상기 예측 특징맵이 적용된 상기 제2 입력 특징맵에 대하여 얼굴 인식을 위한 특징 분포에서 블러 제거를 위한 특징 분포로 변환하여 상기 디블러 이미지를 생성하는 단계를 포함하는블러 이미지 처리 방법
|
| 7 |
7
입력된 블러 이미지(Blur image)로부터 블러를 제거하여 정답 이미지와 유사한 디블러 이미지(Deblur image)를 생성하는 블러 이미지 처리 장치에 있어서,상기 블러 이미지로부터 블러 제거를 위한 특징 분포를 갖는 제1 입력 특징맵 및 제2 입력 특징맵을 생성하는 엔코더;외부 정보 없이 블러 제거를 위한 특징 분포에서 얼굴 인식을 위한 특징 분포로 변환하는 SSFT(Self-Spatial Feature Transform) 모듈을 이용하여 상기 제1 입력 특징맵으로부터 예측 특징맵을 생성하는 사전 정보 생성자; 및상기 제2 입력 특징맵 및 상기 예측 특징맵에 기반하여 디블러 이미지를 생성하는 디코더를 포함하는블러 이미지 처리 장치
|
| 8 |
8
제7항에 있어서,상기 사전 정보 생성자는 생성적 적대적 네트워크 (Generative Adversarial Network, GAN)를 통해 학습되는블러 이미지 처리 장치
|
| 9 |
9
제8항에 있어서,상기 GAN은 상기 사전 정보 생성자;사전 학습된 얼굴 인식 모듈을 통해 상기 정답 이미지로부터 얼굴의 질감 정보를 포함하는 얼굴 특징맵을 추출하는 얼굴 인식 모듈; 및상기 예측 특징맵 또는 상기 얼굴 특징맵을 입력으로 하고, 상기 입력이 상기 예측 특징맵인지 또는 상기 얼굴 특징맵인지 여부를 식별하는 식별자를 포함하는블러 이미지 처리 장치
|
| 10 |
10
제9항에 있어서,상기 식별자는상기 예측 특징맵 및 상기 얼굴 특징맵에 대하여 채널별로 서로 다른 가중치를 부여하는 채널 집중 모듈;상기 가중치에 따라 채널을 연결하여 내부 특징을 처리하는 처리 모듈; 및상기 처리 모듈의 출력에 기반하여 상기 입력이 상기 예측 특징맵인지 또는 상기 얼굴 특징맵인지 여부를 분류하는 분류 모듈을 포함하는블러 이미지 처리 장치
|
| 11 |
11
제10항에 있어서,상기 사전 정보 생성자는픽셀 단위의 거리를 계산하여 산출되는 픽셀 손실, 상기 사전 정보 생성자와 상기 식별자의 경쟁 학습에 의해 발생하는 적대적 손실 및 상기 예측 특징맵의 가중치에 따른 거리를 계산하여 산출되는 사전 손실에 기반하여 학습되는블러 이미지 처리 장치
|
| 12 |
12
제7항에 있어서,상기 디코더는SFT(Spatial Feature Transform) 모듈을 이용하여 상기 예측 특징맵을 사전 정보로 활용하여 상기제2 입력 특징맵에 적용하고, 상기 예측 특징맵이 적용된 상기 제2 입력 특징맵에 대하여 얼굴 인식을 위한 특징 분포에서 블러 제거를 위한 특징 분포로 변환하여 상기 디블러 이미지를 생성하는 블러 이미지 처리 장치
|
