| 1 |
1
실사 영상 및 렌더링된 영상을 포함하는 학습 데이터를 수신하는 단계;상기 학습 데이터를 이용하여 저품질 영상을 생성하는 단계;상기 저품질 영상을 이용하여 고품질 영상을 생성하는 단계;상기 고품질 영상을 이용하여 실감 영상을 생성하는 단계; 및상기 고품질 영상 및 실감 영상에 기반하여 산출된 오차를 이용하여 신경망을 학습하는 단계;를 포함하는 것을 특징으로 하는 렌더링된 영상의 품질 및 실감 향상 방법
|
| 2 |
2
청구항 1에 있어서,상기 고품질 영상 및 실감 영상에 기반하여 산출된 오차는상기 생성된 고품질 영상과 상기 고품질 영상에 상응하도록 변환된 학습 데이터의 품질 복원 오차를 포함하는 것을 특징으로 하는 렌더링된 영상의 품질 및 실감 향상 방법
|
| 3 |
3
청구항 1에 있어서,상기 고품질 영상 및 실감 영상에 기반하여 산출된 오차는상기 실감 영상을 생성하는 신경망을 생성자로 하는 생성적 적대 신경망(Generative Adversarial network) 구조를 이용하여 산출된 적대적 생성 오차를 포함하는 것을 특징으로 하는 렌더링된 영상의 품질 및 실감 향상 방법
|
| 4 |
4
청구항 3에 있어서,생성적 적대 신경망 구조는입력 영상이 실사 영상에 기반하여 생성된 저품질 영상이면 상기 실사 영상을 참값으로 이용하고, 입력 영상이 렌더링된 영상에 기반하여 생성된 저품질 영상이면 대응하는 실사 영상이 없으므로 상기 학습 데이터 내 임의의 실사 영상을 참값으로 이용하는 것을 특징으로 하는 렌더링된 영상의 품질 및 실감 향상 방법
|
| 5 |
5
청구항 1에 있어서,상기 고품질 영상 및 실감 영상에 기반하여 산출된 오차는상기 학습 데이터와 상기 실감 영상의 화소 복원 오차, 및 상기 학습 데이터 및 상기 실감 영상 각각의 특징 벡터에 기반하여 산출된 인지적 복원 오차를 포함하는 것을 특징으로 하는 렌더링된 영상의 품질 및 실감 향상 방법
|
| 6 |
6
청구항 5에 있어서,상기 화소 복원 오차는상기 학습 데이터가 실사 영상인 경우 제1 거리식에 기반하여 산출되고, 상기 학습 데이터가 렌더링된 영상인 경우 상기 제1 거리식과 다른 제2 거리식에 기반하여 산출되는 것을 특징으로 하는 렌더링된 영상의 품질 및 실감 향상 방법
|
| 7 |
7
청구항 1에 있어서,상기 고품질 영상 및 실감 영상에 기반하여 산출된 오차는기학습된 신원 판별 신경망을 이용하여 산출한 상기 저품질 영상과 상기 실감 영상의 신원 보전 오차를 포함하는 것을 특징으로 하는 렌더링된 영상의 품질 및 실감 향상 방법
|
| 8 |
8
실사 영상 및 렌더링된 영상을 포함하는 학습 데이터를 이용하여 저품질 영상을 생성하는 저품질 영상 생성부;상기 저품질 영상을 이용하여 고품질 영상을 생성하는 영상 복원부; 상기 고품질 영상을 이용하여 실감 영상을 생성하는 실감 영상 생성부; 및상기 고품질 영상 및 실감 영상에 기반하여 산출된 오차를 이용하여 신경망을 학습하는 오차 분석부;를 포함하는 것을 특징으로 하는 렌더링된 영상의 품질 및 실감 향상 장치
|
| 9 |
9
청구항 8에 있어서,상기 오차 분석부는상기 생성된 고품질 영상과 상기 고품질 영상에 상응하도록 변환된 학습 데이터의 품질 복원 오차 산출하는 품질 오차 분석부를 포함하는 것을 특징으로 하는 렌더링된 영상의 품질 및 실감 향상 장치
|
| 10 |
10
청구항 8에 있어서,상기 오차 분석부는상기 실감 영상을 생성하는 신경망을 생성자로 하는 생성적 적대 신경망(Generative Adversarial network) 구조를 이용하여 산출된 적대적 생성 오차를 산출하는 적대적 생성 오차 분석부를 포함하는 것을 특징으로 하는 렌더링된 영상의 품질 및 실감 향상 장치
|
| 11 |
11
청구항 10에 있어서,생성적 적대 신경망 구조는입력 영상이 실사 영상에 기반하여 생성된 저품질 영상이면 상기 실사 영상을 참값으로 이용하고, 입력 영상이 렌더링된 영상에 기반하여 생성된 저품질 영상이면 대응하는 실사 영상이 없으므로 상기 학습 데이터 내 임의의 실사 영상을 참값으로 이용하는 것을 특징으로 하는 렌더링된 영상의 품질 및 실감 향상 장치
|
| 12 |
12
청구항 8에 있어서,상기 오차 분석부는상기 학습 데이터와 상기 실감 영상의 화소 복원 오차, 및 상기 학습 데이터 및 상기 실감 영상 각각의 특징 벡터에 기반하여 산출된 인지적 복원 오차를 산출하는 실감 영상 오차 분석부를 포함하는 것을 특징으로 하는 렌더링된 영상의 품질 및 실감 향상 장치
|
| 13 |
13
청구항 12에 있어서,상기 실감 영상 오차 분석부는상기 학습 데이터가 실사 영상인 경우 제1 거리식에 기반하여 오차를 산출하고, 상기 학습 데이터가 렌더링된 영상인 경우 상기 제1 거리식과 다른 제2 거리식에 기반하여 화소 복원 오차를 산출하는 것을 특징으로 하는 렌더링된 영상의 품질 및 실감 향상 장치
|
| 14 |
14
청구항 8에 있어서,실감 영상 오차 분석부는기학습된 신원 판별 신경망을 이용하여 산출한 상기 저품질 영상과 상기 실감 영상의 신원 보전 오차를 산출하는 신원 오차 분석부를 포함하는 것을 특징으로 하는 렌더링된 영상의 품질 및 실감 향상 장치
|
