| 1 |
1
데이터셋 생성 모듈을 통해 모션 디블러링 및 3차원 인체 모델 재구성을 위한 합성 데이터셋(synthetic dataset)을 생성하는 단계; 상기 데이터셋을 이용하여 모션 디블러링 모듈을 통해 모션 디블러링된 이미지를 생성하고, 손실함수를 이용하여 상기 모션 디블러링된 이미지를 학습하는 단계; 상기 학습된 모션 디블러링된 이미지를 이용하여 구조 인식 모듈을 통해 통합적 인체 재구성을 위한 구조 정보를 제공하는 단계; 및상기 구조 정보로 디블러링된 이미지를 이용하여 인체 재구성 모듈을 통해 3차원 인체 모델을 재구성하는 단계 를 포함하고, 상기 데이터셋을 이용하여 모션 디블러링 모듈을 통해 모션 디블러링된 이미지를 생성하고, 손실함수를 이용하여 상기 모션 디블러링된 이미지를 학습하는 단계는, 픽셀 단위 평균 오차 손실 함수, 지각 손실 함수, 글로벌 및 로컬 판별기 모두에 대한 적대적 손실 함수 및 인체 재구성 손실 함수를 이용하여 모션 디블러링된 이미지를 생성하는 3차원 인체 모델 복원 방법
|
| 2 |
2
제1항에 있어서,상기 데이터셋 생성 모듈을 통해 모션 디블러링 및 3차원 인체 모델 재구성을 위한 합성 데이터셋(synthetic dataset)을 생성하는 단계는, 평균 이미지가 계산되기 전에 프레임 속도를 증가시키기 위해 비디오 프레임 보간을 적용하고, 평균 이미지 계산 중에 인체 영역을 분할하여 배경 영역에 대한 블러 효과를 감소시키기 위한 인체 마스크를 생성하며, 통합적 3D 파라미터를 얻기 위해 유사 실측 자료(pseudo ground truth) 2D 키포인트를 생성하고, 유사 실측 자료 파라미터와 3D 키포인트를 생성하여 데이터를 필터링함으로써 모션 디블러링 및 3차원 인체 모델 재구성을 위한 합성 데이터셋(synthetic dataset)을 생성하는3차원 인체 모델 복원 방법
|
| 3 |
3
삭제
|
| 4 |
4
데이터셋 생성 모듈을 통해 모션 디블러링 및 3차원 인체 모델 재구성을 위한 합성 데이터셋(synthetic dataset)을 생성하는 단계; 상기 데이터셋을 이용하여 모션 디블러링 모듈을 통해 모션 디블러링된 이미지를 생성하고, 손실함수를 이용하여 상기 모션 디블러링된 이미지를 학습하는 단계; 상기 학습된 모션 디블러링된 이미지를 이용하여 구조 인식 모듈을 통해 통합적 인체 재구성을 위한 구조 정보를 제공하는 단계; 및상기 구조 정보로 디블러링된 이미지를 이용하여 인체 재구성 모듈을 통해 3차원 인체 모델을 재구성하는 단계 를 포함하고,상기 구조 정보로 디블러링된 이미지를 이용하여 인체 재구성 모듈을 통해 3차원 인체 모델을 재구성하는 단계는, 디블러링된 이미지로부터 투영 행렬 및 통합적 3D 파라미터를 추정하고, 상기 통합적 3D 파라미터를 회귀시키기 위해 구조 특징 및 이미지 특징을 입력으로 연결하고, 상기 이미지 특징은 컨볼루션 블록에 의해 디블러 이미지로부터 생성되고, 구조 특징 및 이미지 특징 간의 연결 특징을 동적으로 융합하기 위한 특징 융합 블록을 이용하는 3차원 인체 모델 복원 방법
|
| 5 |
5
모션 디블러링 및 3차원 인체 모델 재구성을 위한 합성 데이터셋(synthetic dataset)을 생성하는 데이터셋 생성 모듈; 상기 데이터셋을 이용하여 모션 디블러링된 이미지를 생성하고, 손실함수를 이용하여 상기 모션 디블러링된 이미지를 학습하는 모션 디블러링 모듈; 상기 학습된 모션 디블러링된 이미지를 이용하여 통합적 인체 재구성을 위한 구조 정보를 제공하는 구조 인식 모듈; 및상기 구조 정보로 디블러링된 이미지를 이용하여 3차원 인체 모델을 재구성하는 인체 재구성 모듈 을 포함하고, 상기 모션 디블러링 모듈은, 픽셀 단위 평균 오차 손실 함수, 지각 손실 함수, 글로벌 및 로컬 판별기 모두에 대한 적대적 손실 함수 및 인체 재구성 손실 함수를 이용하여 모션 디블러링된 이미지를 생성하는 3차원 인체 모델 복원 장치
|
| 6 |
6
제5항에 있어서,상기 데이터셋 생성 모듈은, 평균 이미지가 계산되기 전에 프레임 속도를 증가시키기 위해 비디오 프레임 보간을 적용하고, 평균 이미지 계산 중에 인체 영역을 분할하여 배경 영역에 대한 블러 효과를 감소시키기 위한 인체 마스크를 생성하며, 통합적 3D 파라미터를 얻기 위해 유사 실측 자료(pseudo ground truth) 2D 키포인트를 생성하고, 유사 실측 자료 파라미터와 3D 키포인트를 생성하여 데이터를 필터링함으로써 모션 디블러링 및 3차원 인체 모델 재구성을 위한 합성 데이터셋(synthetic dataset)을 생성하는3차원 인체 모델 복원 장치
|
| 7 |
7
삭제
|
| 8 |
8
모션 디블러링 및 3차원 인체 모델 재구성을 위한 합성 데이터셋(synthetic dataset)을 생성하는 데이터셋 생성 모듈; 상기 데이터셋을 이용하여 모션 디블러링된 이미지를 생성하고, 손실함수를 이용하여 상기 모션 디블러링된 이미지를 학습하는 모션 디블러링 모듈; 상기 학습된 모션 디블러링된 이미지를 이용하여 통합적 인체 재구성을 위한 구조 정보를 제공하는 구조 인식 모듈; 및상기 구조 정보로 디블러링된 이미지를 이용하여 3차원 인체 모델을 재구성하는 인체 재구성 모듈 을 포함하고,상기 인체 재구성 모듈은, 디블러링된 이미지로부터 투영 행렬 및 통합적 3D 파라미터를 추정하고, 상기 통합적 3D 파라미터를 회귀시키기 위해 구조 특징 및 이미지 특징을 입력으로 연결하고, 상기 이미지 특징은 컨볼루션 블록에 의해 디블러 이미지로부터 생성되고, 구조 특징 및 이미지 특징 간의 연결 특징을 동적으로 융합하기 위한 특징 융합 블록을 이용하는 3차원 인체 모델 복원 장치
|
