| 1 |
1
얼굴 영상의 2차원 텍스쳐 맵 형성 방법에 있어서,동영상의 프레임들 내에 포함된 얼굴의 특징점들을 검출하는 동작과;상기 검출된 특징점을 이용하여 상기 프레임들 각각을 지정된 2차원 텍스쳐 맵의 좌표계에 대응하도록 변형하고, 상기 변형된 프레임들 중 상기 얼굴의 각도에 따라 결정되는 복수의 대표 프레임들을 이용하여 상기 얼굴 영상의 2차원 텍스쳐 맵을 구성하는 동작을 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 방법
|
| 2 |
2
제 1항에 있어서, 상기 동영상은,카메라를 이용하여 촬영되는 것을 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 방법
|
| 3 |
3
제 2항에 있어서,상기 구성된 2차원 텍스쳐 맵에 대응하는 얼굴 영상, 및 상기 카메라를 이용하여 촬영되는 동영상으로부터 추출된 특징점들의 좌표들을 전송하는 동작을 더 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 방법
|
| 4 |
4
제 1항에 있어서, 상기 동영상의 프레임들 내에 포함된 얼굴의 특징점들을 검출하는 동작은,상기 동영상의 프레임들 별로 얼굴의 위치를 검출하는 동작과;능동적 외양 모델(active appearance model)을 이용하여 상기 위치가 검출된 얼굴의 특징점들을 검출하는 동작을 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 방법
|
| 5 |
5
제 1항에 있어서, 상기 프레임들 각각을 지정된 2차원 텍스쳐 맵의 좌표계에 대응하도록 변형하는 것은, 상기 프레임들 별로 상기 검출된 특징점들을 상기 지정된 2차원 텍스쳐 맵 상의 점들에 대응시키는 동작과,상기 검출된 특징점들 및 상기 지정된 2차원 텍스쳐 맵 상의 점들 간의 대응 관계를 이용하여, 상기 프레임들 각각을 상기 지정된 2차원 텍스쳐 맵의 좌표계에 대응하도록 변형하는 동작을 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 방법
|
| 6 |
6
제 5항에 있어서, 상기 프레임들 별로 상기 검출된 특징점들을 지정된 2차원 텍스쳐 맵 상의 점들에 대응시키는 동작은,상기 프레임들 별로 상기 검출된 특징점들의 각 좌표를 상기 지정된 2차원 텍스쳐 맵 상의 지정된 좌표에 대응시키는 동작을 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 방법
|
| 7 |
7
제 5항에 있어서, 상기 프레임들 각각을 상기 지정된 2차원 텍스쳐 맵의 좌표계에 대응하도록 변형하는 동작은,상기 지정된 2차원 텍스쳐 맵 상의 지정된 특징점들 각각을 꼭지점으로 하는 델로네 삼각 분할을 하는 동작과,상기 프레임들 별로, 상기 델로네 삼각 분할을 통해 형성된 삼각형들 각각에 대응하는 삼각형을 상기 지정된 2차원 텍스쳐 맵 상으로 아핀 변환 하는 동작을 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 방법
|
| 8 |
8
제 1항에 있어서, 상기 얼굴 영상의 2차원 텍스쳐 맵을 구성하는 동작은,상기 변형된 프레임들에서 지정된 얼굴 각도들 별로 각각 가장 근접한 얼굴 각도를 포함하는 대표 프레임을 선택하여 상기 복수의 대표 프레임들을 결정하는 동작과,대표 프레임들 마다 좌표 별로 미리 결정된 신뢰도에 해당하는 값을 고려하여, 상기 얼굴 영상의 2차원 텍스쳐 맵 상의 좌표들 각각에 대해 적용할 픽셀 값을 상기 복수의 대표 프레임들 중 어느 하나의 대표 프레임에서 추출하는 동작과,상기 얼굴 영상의 2차원 텍스쳐 맵 상의 좌표들 각각의 상기 추출된 픽셀 값을 결합하여, 상기 얼굴 영상의 2차원 텍스쳐 맵을 구성하는 동작을 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 방법
|
| 9 |
9
제 8항에 있어서, 상기 얼굴 영상의 2차원 텍스쳐 맵 상의 좌표들 각각에 대해 적용할 픽셀 값을 상기 복수의 대표 프레임들 중 어느 하나의 대표 프레임에서 추출하는 동작은,하기 수학식 1을 이용하여, 상기 지정된 2차원 텍스쳐 맵 상의 모든 좌표들 각각에 대한 상기 복수의 대표 프레임들 별로 해당 좌표의 에너지 값을 계산하는 동작과,상기 계산된 에너지 값에 따라, 상기 복수의 대표 프레임들에서 에너지 값이 가장 낮은 좌표의 대표 프레임의 픽셀 값을 추출하는 동작을 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 방법
|
| 10 |
10
제 1항에 있어서,상기 구성된 2차원 텍스쳐 맵을 이용하여 상기 프레임들 별 상기 검출된 특징점들의 좌표의 오차를 보정하는 동작을 더 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 방법
|
| 11 |
11
제 10항에 있어서, 상기 프레임들 별 상기 검출된 특징점들의 좌표의 오차를 보정하는 동작은,상기 구성된 2차원 텍스쳐 맵 상의 각 특징점에 대해, 상기 지정된 2차원 텍스쳐 맵의 좌표계에 대응하도록 변형된 프레임들에서 대응하는 픽셀을 검색하는 동작과, 상기 지정된 2차원 텍스쳐 맵의 좌표계에 대응하도록 변형된 프레임들에서 대응하는 픽셀에 상기 구성된 2차원 텍스쳐 맵 상의 해당 특징점을 대응시키는 동작을 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 방법
|
| 12 |
12
얼굴 영상의 2차원 텍스쳐 맵 형성 장치에 있어서,저장부와;동영상의 프레임들 내에 포함된 얼굴의 특징점들을 검출하며, 상기 검출된 특징점을 이용하여 상기 프레임들 각각을 상기 저장부에 미리 저장된 지정된 2차원 텍스쳐 맵의 좌표계에 대응하도록 변형하고, 상기 변형된 프레임들 중 상기 얼굴의 각도에 따라 결정되는 복수의 대표 프레임들을 이용하여 상기 얼굴 영상의 2차원 텍스쳐 맵을 구성하는 제어부를 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 장치
|
| 13 |
13
제 12항에 있어서, 카메라 모듈을 더 포함하며,상기 제어부는,상기 카메라 모듈를 이용하여 상기 동영상을 촬영하도록 제어하는 것을 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 장치
|
| 14 |
14
제 13항에 있어서,통신 모듈을 더 포함하며,상기 제어부는,상기 통신 모듈을 통해, 상기 구성된 2차원 텍스쳐 맵에 대응하는 얼굴 영상 및 상기 카메라 모듈을 이용하여 촬영되는 동영상으로부터 추출된 특징점들의 좌표들을 전송하도록 제어하는 얼굴 영상의 2차원 텍스쳐 맵 형성 장치
|
| 15 |
15
제 12항에 있어서, 상기 제어부는,상기 동영상의 프레임들 별로 얼굴의 위치를 검출하며, 능동적 외양 모델(active appearance model)을 이용하여 상기 위치가 검출된 얼굴의 특징점들을 검출하는 것을 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 장치
|
| 16 |
16
제 12항에 있어서, 상기 제어부는, 상기 프레임들 별로 상기 검출된 특징점들을 상기 지정된 2차원 텍스쳐 맵 상의 점들에 대응시키며, 상기 검출된 특징점들 및 상기 지정된 2차원 텍스쳐 맵 상의 점들 간의 대응 관계를 이용하여, 상기 프레임들 각각을 상기 지정된 2차원 텍스쳐 맵의 좌표계에 대응하도록 변형하는 것을 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 장치
|
| 17 |
17
제 16항에 있어서, 상기 제어부는,상기 프레임들 별로 상기 검출된 특징점들의 각 좌표를 상기 지정된 2차원 텍스쳐 맵 상의 지정된 좌표에 대응시켜 상기 프레임들 별로 상기 검출된 특징점들을 상기 지정된 2차원 텍스쳐 맵 상의 점들에 대응시키는 것을 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 장치
|
| 18 |
18
제 16항에 있어서, 상기 제어부는,상기 지정된 2차원 텍스쳐 맵 상의 지정된 특징점들 각각을 꼭지점으로 하는 델로네 삼각 분할을 하며, 상기 프레임들 별로, 상기 델로네 삼각 분할을 통해 형성된 삼각형들 각각에 대응하는 삼각형을 상기 지정된 2차원 텍스쳐 맵 상으로 아핀 변환 하여 상기 프레임들 각각을 상기 지정된 2차원 텍스쳐 맵의 좌표계에 대응하도록 변형하는 것을 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 장치
|
| 19 |
19
제 12항에 있어서, 상기 제어부는,상기 변형된 프레임들에서 지정된 얼굴 각도들 별로 각각 가장 근접한 얼굴 각도를 포함하는 대표 프레임을 선택하여 상기 복수의 대표 프레임들을 결정하며, 대표 프레임들 마다 좌표 별로 미리 결정된 신뢰도에 해당하는 값을 고려하여, 상기 얼굴 영상의 2차원 텍스쳐 맵 상의 좌표들 각각에 대해 적용할 픽셀 값을 상기 복수의 대표 프레임들 중 어느 하나의 대표 프레임에서 추출하며, 상기 얼굴 영상의 2차원 텍스쳐 맵 상의 좌표들 각각의 상기 추출된 픽셀 값을 결합하여, 상기 얼굴 영상의 2차원 텍스쳐 맵을 구성하는 것을 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 장치
|
| 20 |
20
제 19항에 있어서, 상기 제어부는,하기 수학식 2를 이용하여, 상기 지정된 2차원 텍스쳐 맵 상의 모든 좌표들 각각에 대한 상기 복수의 대표 프레임들 별로 해당 좌표의 에너지 값을 계산하며,상기 계산된 에너지 값에 따라, 상기 복수의 대표 프레임들에서 에너지 값이 가장 낮은 좌표의 대표 프레임의 픽셀 값을 추출하여, 상기 얼굴 영상의 2차원 텍스쳐 맵 상의 좌표들 각각에 대해 적용할 픽셀 값을 상기 복수의 대표 프레임들 중 어느 하나의 대표 프레임에서 추출하는 것을 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 장치
|
| 21 |
21
제 12항에 있어서, 상기 제어부는,상기 구성된 2차원 텍스쳐 맵을 이용하여 상기 프레임들 별 상기 검출된 특징점들의 좌표의 오차를 보정하는 것을 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 장치
|
| 22 |
22
제 21항에 있어서, 상기 제어부는,상기 구성된 2차원 텍스쳐 맵 상의 각 특징점에 대해, 상기 지정된 2차원 텍스쳐 맵의 좌표계에 대응하도록 변형된 프레임들에서 대응하는 픽셀을 검색하며, 상기 지정된 2차원 텍스쳐 맵의 좌표계에 대응하도록 변형된 프레임들에서 대응하는 픽셀에 상기 구성된 2차원 텍스쳐 맵 상의 해당 특징점을 대응시켜 상기 프레임들 별 상기 검출된 특징점들의 좌표의 오차를 보정하는 것을 포함하는 얼굴 영상의 2차원 텍스쳐 맵 형성 장치
|
