| 1 |
1
시퀀스의 압축을 위한 스켈레톤 기반의 동적 포인트 클라우드 추정 시스템에 있어서,다시점 색상-깊이 영상의 연속된 프레임을 획득하는 프레임 획득부;다시점 프레임으로부터 3차원 포인트 클라우드를 획득하는 점군 획득부;3차원 포인트 클라우드로부터 3차원 스켈레톤을 추출하는 스켈레톤 추출부;3차원 포인트 클라우드를 메쉬로 변환하는 메쉬 변환부;프레임이 키프레임이면, 해당 프레임의 메쉬를 해당 프레임의 3차원 스켈레톤으로 리깅하는 메쉬 리깅부;프레임이 비키프레임인 경우, 해당 프레임과 키프레임의 3차원 스켈레톤들로부터 움직임 벡터를 추출하는 움직임 추출부;상기 움직임 벡터를 이용하여 키프레임의 메쉬를 변형하는 메쉬 변형부; 및,비키프레임의 메쉬와 변형된 메쉬 간의 잔차를 산출하는 잔차 산출부를 포함하는 것을 특징으로 하는 시퀀스의 압축을 위한 스켈레톤 기반의 동적 포인트 클라우드 추정 시스템
|
| 2 |
2
제1항에 있어서,상기 점군 획득부는 각 시점의 색상-깊이 영상에서 각 시점의 포인트 클라우드를 생성하고, 각 시점의 카메라 파라미터를 이용하여 각 시점의 포인트 클라우드를 정합하여 통합된 3차원 포인트 클라우드를 획득하는 것을 특징으로 하는 시퀀스의 압축을 위한 스켈레톤 기반의 동적 포인트 클라우드 추정 시스템
|
| 3 |
3
제1항에 있어서,상기 스켈레톤 추출부는 통합된 3차원 포인트 클라우드에 대하여 다수의 방향으로 투영하여 투영 영상을 획득하고, 각 투영 영상에서 2차원 스켈레톤 영상을 획득하고, 이를 복원하여 3차원 스켈레톤을 생성하는 것을 특징으로 하는 시퀀스의 압축을 위한 스켈레톤 기반의 동적 포인트 클라우드 추정 시스템
|
| 4 |
4
제3항에 있어서,상기 스켈레톤 추출부는 각 투영 영상을 오픈포즈(OpenPose) 라이브러리에 적용하여 2차원 스켈레톤 영상을 획득하는 것을 특징으로 하는 시퀀스의 압축을 위한 스켈레톤 기반의 동적 포인트 클라우드 추정 시스템
|
| 5 |
5
제3항에 있어서,상기 스켈레톤 추출부는 상기 통합된 3차원 포인트 클라우드에 주성분 분석을 적용하여 정면을 찾고, 객체의 정면이 축 방향과 평행하도록 객체를 회전시키고, 상기 객체에 AABB(Axis-aligned Bounding Box) 박스를 설정하고, AABB 박스의 각 측면의 평면 상으로 투영하고, 투영 영상에서 2차원 스켈레톤 영상을 획득한 후, 2차원 스켈레톤 영상을 복원하고 복원된 영상의 각 마디(joint)로부터 중심으로 직선을 연결하여 교차지점을 형성하고, 교차지점을 평균하여 3차원 지표를 갖는 마디(joint)를 구하는 것을 특징으로 하는 시퀀스의 압축을 위한 스켈레톤 기반의 동적 포인트 클라우드 추정 시스템
|
| 6 |
6
제1항에 있어서,상기 메쉬 변환부는 통합된 3차원 포인트 클라우드를 양자화 하고, 양자화된 포인트 클라우드를 메쉬로 변환하는 것을 특징으로 하는 시퀀스의 압축을 위한 스켈레톤 기반의 동적 포인트 클라우드 추정 시스템
|
| 7 |
7
제6항에 있어서,상기 메쉬 변환부는 옥트리 구조를 이용하여 포인트 클라우드 양자화 하는 것을 특징으로 하는 시퀀스의 압축을 위한 스켈레톤 기반의 동적 포인트 클라우드 추정 시스템
|
| 8 |
8
제6항에 있어서,상기 메쉬 변환부는 푸아송 표면 재구성(Poisson Surface Reconstruction) 방식을 이용하여 포인트 클라우드를 메쉬로 변환하는 것을 특징으로 하는 시퀀스의 압축을 위한 스켈레톤 기반의 동적 포인트 클라우드 추정 시스템
|
| 9 |
9
제6항에 있어서,상기 움직임 추출부는 키 프레임의 스켈레톤의 각 조인트에서 비키 프레임의 스켈레톤의 대응되는 조인트 간의 차이 벡터를 움직임 벡터로 산출하는 것을 특징으로 하는 시퀀스의 압축을 위한 스켈레톤 기반의 동적 포인트 클라우드 추정 시스템
|
| 10 |
10
제1항에 있어서,상기 메쉬 변형부는 스켈레톤에 대한 스키닝 웨이트를 설정하고, 좌표변환 행렬을 구하고, 상기 스키닝 웨이트와 상기 좌표변환 행렬을 이용하여 키프레임의 메쉬를 변형하는 것을 특징으로 하는 시퀀스의 압축을 위한 스켈레톤 기반의 동적 포인트 클라우드 추정 시스템
|
| 11 |
11
제10항에 있어서,상기 스키닝 웨이트는 스켈레톤의 뼈대의 중심에 가까울수록 1값에 가까워지게 설정되고, 마디에 가까워질수록 0에 가까워지도록 설정되는 것을 특징으로 하는 시퀀스의 압축을 위한 스켈레톤 기반의 동적 포인트 클라우드 추정 시스템
|
| 12 |
12
제10항에 있어서,상기 좌표변환 행렬은 평행이동 T와 회전행렬 R로 구성되고, 다음 수식 1에 의해 변형되는 것을 특징으로 하는 시퀀스의 압축을 위한 스켈레톤 기반의 동적 포인트 클라우드 추정 시스템
|
