| 1 |
1
이미지 편집 애플리케이션 제공 장치에서 수행되는 이미지 내 얼굴 변형 방법에 있어서, 이미지 편집을 위한 인터페이스 화면을 표시하는 단계; 타겟 이미지의 얼굴을 변형하기 위한 사용자의 입력을 수신하는 단계;상기 사용자의 입력에 기초하여 사용자가 원하는 얼굴을 갖게 하는 얼굴 변형 명령을 생성하는 단계; 상기 얼굴 변형 명령을 타겟 이미지의 얼굴에 적용하여 변형된 얼굴을 갖는 변형 이미지를 생성하는 단계; 및상기 변형 이미지를 표시하는 단계를 포함하되, 상기 인터페이스 화면을 표시하는 단계는: 상기 얼굴 변형을 위한 편집 기준을 결정하는 편집 모드를 포함한 메뉴 툴을 표시하는 단계 - 상기 메뉴 툴은 상기 얼굴 변형이 타겟 이미지의 얼굴 표정을 변화하게 하는 표정 모드, 상기 얼굴 변형이 타겟 이미지의 얼굴 인상을 변화하게 하는 인상 모드, 및 상기 얼굴 변형이 타겟 이미지의 얼굴 포즈를 변화하게 하는 포즈 모드 중 하나 이상을 포함하고, 그리고 메뉴 툴에 포함된 하나 이상의 제1 서브 영역은 각 편집 모드에 대응함; 및상기 편집 모드를 선택하는 사용자 입력에 응답하여, 해당 편집 모드의 하나 이상의 하위 항목을 포함한 편집 툴을 표시하는 단계 - 편집 툴을 표시하는 영역은 각 하위 항목을 각각 표시하는 제2 서브 영역을 포함하고, 이미지 편집을 위한 인터페이스는 제2 하위 영역에서 또는 제2 하위 영역에 근접한 상기 편집 툴 내 다른 영역에서 해당 하위 항목에 대한 변형 강도의 사용자 입력을 수신하도록 구성됨 - 를 포함하고,상기 타겟 이미지의 얼굴을 변형하기 위한 사용자의 입력을 수신하는 단계는, 얼굴 변형을 위한 편집 모드의 사용자 입력을 상기 메뉴 툴을 통해 수신하는 단계; 얼굴 변형을 위한 상기 편집 모드 내 하위 항목의 사용자 입력을 상기 편집 툴을 통해 수신하는 단계; 및 상기 하위 영역 상에서 또는 하위 영역에 근접한 상기 편집 툴 내 다른 영역에서 해당 하위 항목에 대한 변형 강도의 사용자 입력을 수신하는 단계;를 포함하며, 상기 편집 모드별 하위 항목들은 편집 모드별로 서로 상이한 것을 특징으로 하는 이미지 내 얼굴 변형 방법
|
| 2 |
2
삭제
|
| 3 |
3
삭제
|
| 4 |
4
삭제
|
| 5 |
5
삭제
|
| 6 |
6
삭제
|
| 7 |
7
제1항에 있어서, 상기 편집 툴은,상기 결정된 편집 기준이 표정인 경우, 미리 설정된 표정 유형을 포함하는 것을 특징으로 하는 이미지 내 얼굴 변형 방법
|
| 8 |
8
제1항에 있어서, 상기 편집 툴은,상기 결정된 편집 기준이 인상인 경우, 미리 설정된 인상 유형을 포함하는 것을 특징으로 하는 이미지 내 얼굴 변형 방법
|
| 9 |
9
제1항에 있어서, 상기 편집 툴은,상기 결정된 편집 기준이 포즈인 경우, 미리 설정된 포즈 유형을 포함하는 것을 특징으로 하는 이미지 내 얼굴 변형 방법
|
| 10 |
10
제9항에 있어서, 상기 편집 툴은,상기 미리 설정된 포즈 유형에서 특정 포즈 유형에 대한 입력만을 수신하도록 더 구성되는 것을 특징으로 하는 이미지 내 얼굴 변형 방법
|
| 11 |
11
제1항에 있어서, 상기 사용자의 입력에 기초하여 얼굴 변형 명령을 생성하는 단계는, 얼굴 변형 명령 생성 이전에 사용자 입력을 통해 표정 모드에서의 표정 유형이 결정된 경우, 표정 유형별 얼굴 모델, 표정 유형별 얼굴 모델의 표정 값 중 하나 이상을 포함한 얼굴 변형 명령을 생성하는 단계를 포함하는 것을 특징으로 하는 이미지 내 얼굴 변형 방법
|
| 12 |
12
제1항에 있어서, 상기 사용자의 입력에 기초하여 얼굴 변형 명령을 생성하는 단계는, 얼굴 변형 명령 생성 이전에 사용자 입력을 통해 인상 모드에서의 인상 유형이 결정된 경우, 인상 유형별 얼굴 모델, 인상 추정 함수 중 하나 이상을 포함한 얼굴 변형 명령을 생성하는 단계를 포함하는 것을 특징으로 하는 이미지 내 얼굴 변형 방법
|
| 13 |
13
제12항에 있어서, 상기 인상 추정 함수는,각각의 인상 유형별로 기계 학습된, 3차원 얼굴 모델의 거리 벡터가 입력되어 최소 학습 에러를 가질 경우 해당 인상 유형을 갖는 3차원 얼굴 모델을 생성하도록 기계 학습된 것을 특징으로 하는 이미지 내 얼굴 변형 방법
|
| 14 |
14
제1항에 있어서, 상기 사용자의 입력에 기초하여 얼굴 변형 명령을 생성하는 단계는, 얼굴 변형 명령 생성 이전에 사용자 입력을 통해 포즈 모드가 결정된 경우, 회전 축, 및 회전 방향 중 하나 이상을 포함하는 것을 특징으로 하는 이미지 내 얼굴 변형 방법
|
| 15 |
15
제1항에 있어서, 상기 변형 이미지를 생성하는 단계는, 상기 타겟 이미지의 2차원 얼굴에서 특징점을 추출하는 단계; 상기 타겟 이미지의 2차원 얼굴을 3차원 얼굴 모델로 모델링하여 타겟 얼굴 모델을 생성하는 단계; 상기 타겟 얼굴 모델을 메쉬 처리하는 단계; 상기 타겟 얼굴 모델의 얼굴을 초기 설정 얼굴로 변환하는 단계; 상기 타겟 얼굴 모델에 얼굴 변형 명령을 적용하여 변형된 얼굴을 갖는 변형 얼굴 모델을 생성하는 단계; 및상기 변형 얼굴 모델에 기초하여 변형된 얼굴을 갖는 변형 이미지를 생성하는 단계를 포함하는 것을 특징으로 하는 이미지 내 얼굴 변형 방법
|
| 16 |
16
제15항에 있어서, 상기 타겟 얼굴 모델에 얼굴 변형 명령을 적용하여 변형된 얼굴을 갖는 변형 얼굴 모델을 생성하는 단계는, 상기 얼굴 변형 명령이 얼굴의 표정 변형 명령인 경우, 결정된 표정 유형별 얼굴 모델에 대한 표정 값을 상기 타겟 얼굴 모델에 적용하여 변형된 표정을 갖는 변형 얼굴 모델을 생성하는 것을 특징으로 하는 이미지 내 얼굴 변형 방법
|
| 17 |
17
제15항에 있어서, 상기 타겟 얼굴 모델에 얼굴 변형 명령을 적용하여 변형된 얼굴을 갖는 변형 얼굴 모델을 생성하는 단계는, 상기 얼굴 변형 명령이 얼굴의 인상 변형 명령인 경우, 결정된 인상 유형별 얼굴 모델에 대한 인상 추정 함수에 상기 타겟 얼굴 모델의 거리 벡터를 적용하여 변형된 인상을 갖는 변형 얼굴 모델을 생성하는 것을 특징으로 하는 이미지 내 얼굴 변형 방법
|
| 18 |
18
제15항에 있어서, 상기 타겟 얼굴 모델에 얼굴 변형 명령을 적용하여 변형된 얼굴을 갖는 변형 얼굴 모델을 생성하는 단계는, 상기 얼굴 변형 명령이 얼굴의 포즈 변형 명령인 경우, 회전 축 및 회전 방향을 타겟 얼굴 모델에 적용하여 변형된 포즈를 갖는 변형 얼굴 모델을 생성하는 것을 특징으로 하는 이미지 내 얼굴 변형 방법
|
| 19 |
19
제15항에 있어서, 상기 사용자의 입력은, 상기 결정된 하위 항목에 대응하는 얼굴로 타겟 이미지의 얼굴을 변형함에 있어, 변형 강도에 대한 입력을 수신하는 단계를 더 포함하는 이미지 내 얼굴 변형 방법
|
| 20 |
20
제19항에 있어서, 상기 얼굴 변형 명령은,상기 변형 강도를 더 포함하는 것을 특징으로 하는 이미지 내 얼굴 변형 방법
|
| 21 |
21
제20항에 있어서, 상기 타겟 얼굴 모델에 얼굴 변형 명령을 적용하여 변형된 얼굴을 갖는 변형 얼굴 모델을 생성하는 단계는, 상기 얼굴 변형 명령이 얼굴의 표정 변형 명령인 경우, 상기 변형 강도에 대응하는 표정별 얼굴 모델에 대한 표정 값을 상기 타겟 얼굴 모델에 적용하여 변형된 표정을 갖는 변형 얼굴 모델을 생성하는 것을 특징으로 하는 이미지 내 얼굴 변형 방법
|
| 22 |
22
제21항에 있어서, 상기 변형 강도에 대응하는 표정별 얼굴 모델은, 미리 저장된 표정-얼굴 테이블에 기초하여 결정되며, 상기 표정-얼굴 테이블은 각각의 표정 유형에 있어 하나 이상의 표정 강도별 얼굴 모델 및 상기 표정 강도별 얼굴 모델에 대한 표정 값 중 하나 이상을 포함하는 것을 특징으로 하는 이미지 내 얼굴 변형 방법
|
| 23 |
23
제20항에 있어서, 상기 타겟 얼굴 모델에 얼굴 변형 명령을 적용하여 변형된 얼굴을 갖는 변형 얼굴 모델을 생성하는 단계는, 상기 얼굴 변형 명령이 얼굴의 인상 변형 명령인 경우, 초기 설정된 타겟 얼굴 모델의 거리 벡터에서 인상 추정 함수에 기초하여 생성된 타겟 얼굴 모델의 거리 벡터 간의 차이에 기초하여 상기 변형 강도에 대응하는 변화 값을 결정하고, 상기 변형 강도에 대응하는 변화 값에 기초하여 변형된 인상을 갖는 변형 얼굴 모델을 생성하는 것을 특징으로 하는 이미지 내 얼굴 변형 방법
|
| 24 |
24
제20항에 있어서, 상기 타겟 얼굴 모델에 얼굴 변형 명령을 적용하여 변형된 얼굴을 갖는 변형 얼굴 모델을 생성하는 단계는, 상기 얼굴 변형 명령이 얼굴의 포즈 변형 명령인 경우, 상기 변형 강도에 기초하여 회전 각도를 결정하고, 회전 축, 회전 방향 및 회전 각도를 타겟 얼굴 모델에 적용하여 변형된 포즈를 갖는 변형 얼굴 모델을 생성하는 것을 특징으로 하는 이미지 내 얼굴 변형 방법
|
| 25 |
25
제20항에 있어서, 상기 변형 강도에 대한 입력은, 스와이프 입력을 통해 수신되는 것을 특징으로 하는 이미지 내 얼굴 변형 방법
|
| 26 |
26
컴퓨터에 의해 판독가능하고, 상기 컴퓨터에 의해 동작 가능한 프로그램 명령어를 저장하는 컴퓨터 판독가능 기록매체로서, 상기 프로그램 명령어가 상기 컴퓨터의 프로세서에 의해 실행되는 경우 상기 프로세서가 제1항, 제7항 내지 제25항 중 어느 하나의 항에 따른 이미지 내 얼굴 변형 방법을 수행하게 하는 컴퓨터 판독가능 기록매체
|
