| 1 |
1
영상 프레임이 입력되면, 상기 영상 프레임에 포함된 단일 객체에 대한 3 차원 모델을 생성하는 단계; 및상기 3 차원 모델을 이용하여 상기 영상 프레임에서의 상기 단일 객체에 대한 세그멘테이션을 획득하는 단계;를 포함하고,상기 단일 객체에 대한 세그멘테이션을 획득하는 단계는,상기 단일 객체를 포함하도록 상기 영상 프레임에서 추출되는 바운딩 박스에, 상기 3 차원 모델을 투영시켜 세그멘테이션 마스크를 생성하는 단계;를 포함하되,상기 세그멘테이션 마스크를 생성하는 단계는,상기 바운딩 박스를 이용하여 상기 3 차원 모델에 대한 카메라 파라미터를 추정하는 단계; 및상기 카메라 파라미터를 이용하여 상기 세그멘테이션 마스크를 생성하는 단계;를 포함하는, 객체에 대한 세그멘테이션을 획득하는 방법
|
| 2 |
2
제 1 항에 있어서, 상기 단일 객체에 대한 세그멘테이션을 획득하는 단계는,상기 단일 객체가 다른 객체에 의해 가려져 신체의 일부분만을 포함하는 경우에, 상기 신체의 가려진 영역이 포함되도록 상기 세그멘테이션을 획득하는, 객체에 대한 세그멘테이션을 획득하는 방법
|
| 3 |
3
제 1 항에 있어서, 상기 단일 객체에 대한 3 차원 모델을 생성하는 단계는,상기 영상 프레임에서 상기 단일 객체를 포함하는 바운딩 박스를 추출하는 단계; 및미리 학습된 SPIN(SMPL oPtimization IN the loop) 알고리즘을 이용하여 상기 바운딩 박스에 따른 상기 3 차원 모델을 생성하는 단계;를 포함하는, 객체에 대한 세그멘테이션을 획득하는 방법
|
| 4 |
4
제 3 항에 있어서, 상기 바운딩 박스에 따른 3 차원 모델을 생성하는 단계는,상기 바운딩 박스를 이용하여 상기 단일 객체에 대한 SMPL 파라미터를 추정하는 단계; 및상기 SMPL 파라미터를 이용하여 상기 3 차원 모델을 생성하는 단계;를 포함하는, 객체에 대한 세그멘테이션을 획득하는 방법
|
| 5 |
5
제 4 항에 있어서, 상기 단일 객체에 대한 SMPL 파라미터를 추정하는 단계는,상기 단일 객체의 포즈, 모양, 회전, 위치 및 크기 중 적어도 하나에 대응하여 상기 SMPL 파라미터를 추정하는, 객체에 대한 세그멘테이션을 획득하는 방법
|
| 6 |
6
제 1 항에 있어서, 상기 단일 객체에 대한 세그멘테이션을 획득하는 단계는,상기 세그멘테이션 마스크가 생성된 바운딩 박스를 상기 영상 프레임으로 확장시키는 단계; 및상기 세그멘테이션 마스크에 기초하여 상기 영상 프레임에서의 상기 세그멘테이션을 획득하는 단계;를 더 포함하는, 객체에 대한 세그멘테이션을 획득하는 방법
|
| 7 |
7
제 1 항에 있어서, 상기 세그멘테이션 마스크는,다수의 픽셀을 포함하는, 객체에 대한 세그멘테이션을 획득하는 방법
|
| 8 |
8
제 1 항에 있어서, 상기 단일 객체에 대한 3 차원 모델을 생성하는 단계는,상기 영상 프레임에 적어도 하나의 단일 객체가 포함되면, 상기 적어도 하나의 단일 객체 각각에 대한 3 차원 모델을 생성하는, 객체에 대한 세그멘테이션을 획득하는 방법
|
| 9 |
9
제 8 항에 있어서, 상기 단일 객체에 대한 세그멘테이션을 획득하는 단계는,상기 생성된 적어도 하나의 3 차원 모델 각각을 이용하여 상기 영상 프레임에서의 상기 적어도 하나의 단일 객체 각각에 대한 세그멘테이션을 획득하는, 객체에 대한 세그멘테이션을 획득하는 방법
|
| 10 |
10
영상 프레임이 저장되는 메모리; 및상기 영상 프레임에 포함된 단일 객체에 대한 3 차원 모델을 생성하고, 상기 3 차원 모델을 이용하여 상기 영상 프레임에서의 상기 단일 객체에 대한 세그멘테이션을 획득하는 프로세서;를 포함하고,상기 프로세서는,상기 단일 객체를 포함하도록 상기 영상 프레임에서 추출되는 바운딩 박스에, 상기 3 차원 모델을 투영시켜 세그멘테이션 마스크를 생성하되,상기 바운딩 박스를 이용하여 상기 3 차원 모델에 대한 카메라 파라미터를 추정하고, 상기 카메라 파라미터를 이용하여 상기 세그멘테이션 마스크를 생성하는, 객체에 대한 세그멘테이션을 획득하는 장치
|
| 11 |
11
제 10 항에 있어서, 상기 프로세서는,상기 영상 프레임에서 상기 단일 객체를 감지하고, 상기 단일 객체를 포함하는 바운딩 박스를 추출하며, 상기 바운딩 박스를 이용하여 상기 3 차원 모델을 생성하는, 객체에 대한 세그멘테이션을 획득하는 장치
|
| 12 |
12
제 10 항에 있어서, 상기 프로세서는,상기 세그멘테이션 마스크가 생성된 바운딩 박스를 상기 영상 프레임으로 확장시키며, 상기 세그멘테이션 마스크에 기초하여 상기 영상 프레임에서의 상기 세그멘테이션을 획득하는, 객체에 대한 세그멘테이션을 획득하는 장치
|
| 13 |
13
제 10 항에 있어서, 상기 프로세서는,상기 영상 프레임에 적어도 하나의 단일 객체가 포함되면, 상기 적어도 하나의 단일 객체 각각에 대한 3 차원 모델을 생성하는, 객체에 대한 세그멘테이션을 획득하는 장치
|
| 14 |
14
컴퓨터 프로그램을 저장하고 있는 컴퓨터 판독 가능 기록매체로서,상기 컴퓨터 프로그램은, 프로세서에 의해 실행되면,영상 프레임이 입력되면, 상기 영상 프레임에 포함된 단일 객체에 대한 3 차원 모델을 생성하는 단계; 및상기 3 차원 모델을 이용하여 상기 영상 프레임에서의 상기 단일 객체에 대한 세그멘테이션을 획득하는 단계;를 포함하고,상기 단일 객체에 대한 세그멘테이션을 획득하는 단계는,상기 단일 객체를 포함하도록 상기 영상 프레임에서 추출되는 바운딩 박스에, 상기 3 차원 모델을 투영시켜 세그멘테이션 마스크를 생성하는 단계;를 포함하되,상기 세그멘테이션 마스크를 생성하는 단계는,상기 바운딩 박스를 이용하여 상기 3 차원 모델에 대한 카메라 파라미터를 추정하는 단계; 및상기 카메라 파라미터를 이용하여 상기 세그멘테이션 마스크를 생성하는 단계;를 포함하는 방법을 상기 프로세서가 수행하도록 하기 위한 명령어를 포함하는, 컴퓨터 판독 가능한 기록매체
|
| 15 |
15
컴퓨터 판독 가능한 기록매체에 저장되어 있는 컴퓨터 프로그램으로서,상기 컴퓨터 프로그램은, 프로세서에 의해 실행되면,영상 프레임이 입력되면, 상기 영상 프레임에 포함된 단일 객체에 대한 3 차원 모델을 생성하는 단계; 및상기 3 차원 모델을 이용하여 상기 영상 프레임에서의 상기 단일 객체에 대한 세그멘테이션을 획득하는 단계;를 포함하고,상기 단일 객체에 대한 세그멘테이션을 획득하는 단계는,상기 단일 객체를 포함하도록 상기 영상 프레임에서 추출되는 바운딩 박스에, 상기 3 차원 모델을 투영시켜 세그멘테이션 마스크를 생성하는 단계;를 포함하되,상기 세그멘테이션 마스크를 생성하는 단계는,상기 바운딩 박스를 이용하여 상기 3 차원 모델에 대한 카메라 파라미터를 추정하는 단계; 및상기 카메라 파라미터를 이용하여 상기 세그멘테이션 마스크를 생성하는 단계;를 포함하는 방법을 상기 프로세서가 수행하도록 하기 위한 명령어를 포함하는, 컴퓨터 프로그램
|
