| 1 |
1
카메라 모션 및 휴먼 모션에 대한 모션블러를 포함하는 데이터셋을 이용하여 생성기의 디블러링 모듈을 통해 영상에 대한 디블러링을 수행하는 단계; 디블러링된 영상을 입력 받아 생성기의 3D 인체 재구성 모듈을 통해 3D 인체 재구성을 수행하는 단계; 판별기를 통해 디블러된 영상 및 재구성된 3D 인체 영상을 입력 받아 휴먼 프라이어 정보를 활용하여 지역적 주의 지도를 생성하고, 생성된 지역적 주의 지도를 통해 학습하는 단계; 및 전역 판별기, 인체 판별기, 장면 판별기 및 패치 판별기를 포함하는 다중 판별기를 통해 학습 결과를 판별하는 단계 를 포함하고, 판별기를 통해 디블러된 영상 및 재구성된 3D 인체 영상을 입력 받아 휴먼 프라이어 정보를 활용하여 지역적 주의 지도를 생성하고, 생성된 지역적 주의 지도를 통해 학습하는 단계는, 디블러된 영상 및 3D 인체 재구성 영상을 입력 받아 블러링이 없는 영역을 포함하는 국부 영역을 찾고, 휴먼 영역을 시각화하기 위해 3D 인체 재구성 영상으로부터의 인체 정점과 관절 정보를 이용하여 인체 관절 지도를 생성하고, 생성된 인체 관절 지도가 블러링 휴먼 영역을 완전히 커버하도록 휴먼 프라이어 정보 및 블러링 장면 정보를 모두 활용하는 지역적 주의 지도를 생성하는 휴먼 모션 디블러링 방법
|
| 2 |
2
삭제
|
| 3 |
3
제1항에 있어서,전역 판별기, 인체 판별기, 장면 판별기 및 패치 판별기를 포함하는 다중 판별기를 통해 학습 결과를 판별하는 단계는, 전역 판별기 및 패치 판별기가 휴먼 프라이어 정보를 나타내지 않는 프레임워크로 활용되고, 인체 판별기 및 장면 판별기가 휴먼 프라이어 정보 및 블러링 장면 정보를 모두 활용하는 지역적 주의 지도를 이용하는 프레임워크로 활용되는 휴먼 모션 디블러링 방법
|
| 4 |
4
제3항에 있어서,학습 결과를 판별하기 위한 초기 판별 단계에서는 전역 판별기 및 패치 판별기를 통해 휴먼 프라이어 정보없이 디블러링 네트워크만을 이용하여 훈련되고, 인체 판별기 및 장면 판별기를 통해 판별기에 대한 추가 적대적 손실을 정의하고, 인체 판별기 및 장면 판별기에 대한 실제 및 가짜 데이터 손실을 계산하여 최적화하여 디블러링을 개선하고 3D 인체 위치 결과를 예측하는 휴먼 모션 디블러링 방법
|
| 5 |
5
카메라 모션 및 휴먼 모션에 대한 모션블러를 포함하는 데이터셋을 이용하여 디블러링을 수행하고, 3D 인체 재구성을 수행하는 생성기; 및디블러된 영상 및 재구성된 3D 인체 영상을 입력 받아 지역적 주의 지도를 생성하고, 생성된 지역적 주의 지도를 통해 학습하며, 다중 판별기를 통해 학습 결과를 판별하는 판별기를 포함하고,생성기는, 카메라 모션 및 휴먼 모션에 대한 모션블러를 포함하는 데이터셋을 이용하여 영상에 대한 디블러링을 수행하는 디블러링 모듈; 및디블러링된 영상을 입력 받아 3D 인체 재구성을 수행하는 3D 인체 재구성 모듈을 포함하고, 판별기는, 전역 판별기, 인체 판별기, 장면 판별기 및 패치 판별기를 포함하고, 디블러된 영상 및 재구성된 3D 인체 영상을 입력 받아 휴먼 프라이어 정보를 활용하여 지역적 주의 지도를 생성하고, 생성된 지역적 주의 지도를 통해 학습하고, 전역 판별기, 인체 판별기, 장면 판별기 및 패치 판별기를 통해 학습 결과를 판별하며, 디블러된 영상 및 3D 인체 재구성 영상을 입력 받아 블러링이 없는 영역을 포함하는 국부 영역을 찾고, 휴먼 영역을 시각화하기 위해 3D 인체 재구성 영상으로부터의 인체 정점과 관절 정보를 이용하여 인체 관절 지도를 생성하고, 생성된 인체 관절 지도가 블러링 휴먼 영역을 완전히 커버하도록 휴먼 프라이어 정보 및 블러링 장면 정보를 모두 활용하는 지역적 주의 지도를 생성하는 휴먼 모션 디블러링 장치
|
| 6 |
6
삭제
|
| 7 |
7
제5항에 있어서,전역 판별기 및 패치 판별기는 휴먼 프라이어 정보를 나타내지 않는 프레임워크로 활용되고, 인체 판별기 및 장면 판별기는 휴먼 프라이어 정보 및 블러링 장면 정보를 모두 활용하는 지역적 주의 지도를 이용하는 프레임워크로 활용되는 휴먼 모션 디블러링 장치
|
| 8 |
8
제5항에 있어서,인체 판별기 및 장면 판별기를 통해 판별기에 대한 추가 적대적 손실을 정의하고, 인체 판별기 및 장면 판별기에 대한 실제 및 가짜 데이터 손실을 계산하여 최적화하여 디블러링을 개선하고 3D 인체 위치 결과를 예측하는 휴먼 모션 디블러링 장치
|
