| 1 |
1
장면 블러 및 인간 블러를 포함하는 입력 영상에 대하여 초기 디블러링부를 통해 디블러링 네트워크가 수렴될 때까지 초기화 및 학습하여 학습된 디블러링 가중치를 생성하는 단계; 의사 블러 합성부를 통해 상기 초기 디블러링부에서 학습된 디블러링 가중치를 입력 받아 학습된 리블러 영상을 생성하는 단계; 학습된 리블러 영상을 의사 블러 합성부를 통해 학습한 후 메타 전송 디블러링 가중치를 생성하는 단계; 및 최종 디블러링부를 통해 메타 전송 디블러링 가중치를 이용하여 메타 테스트를 수행하는 단계를 포함하는 디블러링 방법
|
| 2 |
2
제1항에 있어서,장면 블러 및 인간 블러를 포함하는 입력 영상에 대하여 초기 디블러링부를 통해 디블러링 네트워크가 수렴될 때까지 초기화 및 학습하여 학습된 디블러링 가중치를 생성하는 단계는, 초기 디블러링부는 블러 RGB 영상을 입력 받아 복수의 컨볼루션 블록을 통해 전달하여 중간 특징을 생성하고, 각 컨볼루션 블록은 정상화 함수 및 활성화 함수에 이어 컨볼루션(CONV) 레이어를 포함하며, 인스턴스 정규화(Instance Normalization; IN) 및 ReLU를 적용하여 각 블록에서 시퀀스(CONV→IN→ReLU)를 출력한 후, 중간 특징은 일련의 복수의 잔여 블록(ResBlock)을 통해 전달되며, 복수의 잔여 블록은 각 블록에서 인스턴스 정규화 및 ReLU를 적용하여 각 블록에서 시퀀스(CONV→IN→ReLU→CONV→IN)로 출력하고, 시퀀스 출력은 최종 컨볼루션 레이어와 융합되고 입력된 블러 RGB 영상과 함께 디블러 영상을 출력하는 디블러링 방법
|
| 3 |
3
제1항에 있어서,의사 블러 합성부를 통해 상기 초기 디블러링부에서 학습된 디블러링 가중치를 입력 받아 학습된 리블러 영상을 생성하는 단계는, 의사 블러 합성부가 예비 훈련을 위해 초기 디블러링부의 상기 초기화 및 학습 동작을 정지하여 디블러링 네트워크의 성능을 유지하고, 의사 블러 합성부를 최적화 하기 위해 선명한 영상을 이용하여 먼저 학습한 후, 디블러링된 영상을 이용하여 다시 학습하여 리블러 영상을 생성하는 디블러링 방법
|
| 4 |
4
제1항에 있어서,학습된 리블러 영상을 의사 블러 합성부를 통해 학습한 후 메타 전송 디블러링 가중치를 생성하는 단계는, 블러, 디블러, 리블러, 디블러 시퀀스를 적용하기 위한 최적화된 디블러링 파라미터를 찾기 위해 메타 테스트에 전송될 초기 안정 가중치인 메타 전송 디블러링 가중치를 생성하도록 메타 전송 학습을 수행하고, 메타 전송 디블러링 가중치는 최적화된 테스트 손실의 평균을 사용하여 계산된 값으로 업데이트되는 디블러링 방법
|
| 5 |
5
장면 블러 및 인간 블러를 포함하는 입력 영상에 대하여 디블러링 네트워크가 수렴될 때까지 초기화 및 학습하여 학습된 디블러링 가중치를 생성하는 초기 디블러링부; 학습된 디블러링 가중치를 입력 받아 학습된 리블러 영상을 생성하고, 학습된 리블러 영상을 학습한 후 메타 전송 디블러링 가중치를 생성하는 의사 블러 합성부; 및 메타 전송 디블러링 가중치를 이용하여 메타 테스트를 수행하는 최종 디블러링부를 포함하는 디블러링 장치
|
| 6 |
6
제5항에 있어서,초기 디블러링부는, 초기 디블러링부는 블러 RGB 영상을 입력 받아 복수의 컨볼루션 블록을 통해 전달하여 중간 특징을 생성하고, 각 컨볼루션 블록은 정상화 함수 및 활성화 함수에 이어 컨볼루션(CONV) 레이어를 포함하며, 인스턴스 정규화(Instance Normalization; IN) 및 ReLU를 적용하여 각 블록에서 시퀀스(CONV→IN→ReLU)를 출력한 후, 중간 특징은 일련의 복수의 잔여 블록(ResBlock)을 통해 전달되며, 복수의 잔여 블록은 각 블록에서 인스턴스 정규화 및 ReLU를 적용하여 각 블록에서 시퀀스(CONV→IN→ReLU→CONV→IN)로 출력하고, 시퀀스 출력은 최종 컨볼루션 레이어와 융합되고 입력된 블러 RGB 영상과 함께 디블러 영상을 출력하는 디블러링 장치
|
| 7 |
7
제5항에 있어서,의사 블러 합성부는, 의사 블러 합성부가 예비 훈련을 위해 초기 디블러링부의 상기 초기화 및 학습 동작을 정지하여 디블러링 네트워크의 성능을 유지하고, 의사 블러 합성부를 최적화 하기 위해 선명한 영상을 이용하여 먼저 학습한 후, 디블러링된 영상을 이용하여 다시 학습하여 리블러 영상을 생성하는 디블러링 장치
|
| 8 |
8
제5항에 있어서,의사 블러 합성부는, 블러, 디블러, 리블러, 디블러 시퀀스를 적용하기 위한 최적화된 디블러링 파라미터를 찾기 위해 메타 테스트에 전송될 초기 안정 가중치인 메타 전송 디블러링 가중치를 생성하도록 메타 전송 학습을 수행하고, 메타 전송 디블러링 가중치는 최적화된 테스트 손실의 평균을 사용하여 계산된 값으로 업데이트되는 디블러링 장치
|
