1 |
1
컴퓨팅 장치에 의해 수행되는 디지털 휴먼 생성 방법으로서,사람이 촬영된 제1 입력 사진을 입력 받는 단계,상기 제1 입력 사진의 해상도가 기준 해상도보다 낮은 경우 상기 제1 입력 사진에 초해상화를 적용하고, 상기 사람의 시점이 정면 시점이 아닌 경우 상기 제1 입력 사진에서 상기 사람의 시점을 정면 시점으로 변환하여, 제2 입력 사진을 출력하는 단계,상기 제2 입력 사진에 기초해서 3차원 정보를 생성하는 단계,상기 제2 입력 사진과 상기 3차원 정보에 기초해서 디지털 휴먼의 기본 음절 또는 단어 발음에 대한 키프레임 표정 영상을 생성하는 단계, 그리고상기 키프레임 표정 영상을 포함하는 키프레임 영상에 기초해서 대화 스크립트에 해당하는 디지털 휴먼의 발화 영상을 생성하는 단계를 포함하는 디지털 휴먼 생성 방법
|
2 |
2
제1항에서,상기 제2 입력 사진과 상기 3차원 정보에 기초해서 상기 디지털 휴먼의 바디 자세에 대한 키프레임 자세 영상을 생성하는 단계, 그리고상기 키프레임 표정 영상과 상기 키프레임 자세 영상을 블렌딩해서 상기 키프레임 영상을 생성하는 단계를 더 포함하는 디지털 휴먼 생성 방법
|
3 |
3
제1항에서,상기 3차원 정보에 기초해서 시점 합성 방식으로 상기 키프레임 영상 사이의 중간 프레임 영상을 생성하는 단계를 더 포함하며,상기 발화 영상을 생성하는 단계는 상기 키프레임 영상과 상기 중간 프레임 영상에 기초해서 상기 발화 영상을 생성하는 단계를 포함하는디지털 휴먼 생성 방법
|
4 |
4
제1항에서,상기 3차원 정보를 생성하는 단계는상기 제2 입력 사진에 기초해서 상기 사람의 전신 영역에 대한 3차원 정보를 생성하는 단계,상기 제2 입력 사진에 기초해서 상기 사람의 관심 영역에 대한 3차원 정보를 생성하는 단계, 그리고상기 전신 영역에 대한 3차원 정보와 상기 관심 영역에 대한 3차원 정보를 합성하여 상기 3차원 정보를 생성하는 단계를 포함하는 디지털 휴먼 생성 방법
|
5 |
5
제4항에서,상기 3차원 정보는 색상, 깊이 또는 노멀 중 적어도 하나를 포함하는 내재적 3차원 정보인, 디지털 휴먼 생성 방법
|
6 |
6
제1항에서,상기 키프레임 표정 영상을 생성하는 단계는상기 제2 입력 사진으로부터 광원 효과를 제거하여 상기 제2 입력 사진을 알베도 영상으로 변환하는 단계, 그리고상기 알베도 영상과 상기 3차원 정보에 기초해서 상기 키프레임 표정 영상을 생성하는 단계를 포함하는 디지털 휴먼 생성 방법
|
7 |
7
제6항에서,상기 키프레임 영상에 환경에 따른 조명 조건을 반영하여 예제 영상을 생성하는 단계를 더 포함하며,상기 발화 영상은 상기 예제 영상을 포함하는디지털 휴먼 생성 방법
|
8 |
8
제1항에서,사용자 단말로부터의 입력에 기초해서 상기 대화 스크립트를 생성하는 단계를 더 포함하는 디지털 휴먼 생성 방법
|
9 |
9
적어도 하나의 명령어를 저장하는 메모리, 그리고상기 명령어를 실행하는 프로세서를 포함하며,상기 명령어를 실행함으로써, 상기 프로세서는사람이 촬영된 사진을 입력 받고,상기 사진에 기초해서 상기 사람의 전신 영역에 대한 3차원 정보를 생성하고,상기 사진에 기초해서 상기 사람의 관심 영역에 대한 3차원 정보를 생성하고,상기 전신 영역에 대한 3차원 정보와 상기 관심 영역에 대한 3차원 정보를 합성하여 최종 3차원 정보를 생성하고,상기 사진과 상기 최종 3차원 정보에 기초해서 디지털 휴먼의 기본 음절 또는 단어 발음에 대한 키프레임 표정 영상을 생성하고,상기 키프레임 표정 영상을 포함하는 키프레임 영상에 기초해서 대화 스크립트에 해당하는 디지털 휴먼의 발화 영상을 생성하는디지털 휴먼 생성 장치
|
10 |
10
제9항에서,상기 프로세서는상기 사진과 상기 최종 3차원 정보에 기초해서 상기 디지털 휴먼의 바디 자세에 대한 키프레임 자세 영상을 생성하고,상기 키프레임 표정 영상과 상기 키프레임 자세 영상을 블렌딩해서 상기 키프레임 영상을 생성하는디지털 휴먼 생성 장치
|
11 |
11
제9항에서,상기 프로세서는상기 최종 3차원 정보에 기초해서 시점 합성 방식으로 상기 키프레임 영상 사이의 중간 프레임 영상을 생성하고,상기 키프레임 영상과 상기 중간 프레임 영상에 기초해서 상기 발화 영상을 생성하는 디지털 휴먼 생성 장치
|
12 |
12
제9항에서,상기 프로세서는 사용자 단말로부터의 입력에 기초해서 상기 대화 스크립트를 생성하는, 디지털 휴먼 생성 장치
|
13 |
13
컴퓨팅 장치에 의해 수행되는 디지털 휴먼 생성 방법으로서,사람이 촬영된 사진을 입력 받는 단계,상기 사진에 기초해서 3차원 정보를 생성하는 단계,상기 사진과 상기 3차원 정보에 기초해서 디지털 휴먼의 기본 음절 또는 단어 발음에 대한 키프레임 표정 영상을 생성하는 단계, 그리고상기 키프레임 표정 영상을 포함하는 키프레임 영상에 기초해서 대화 스크립트에 해당하는 디지털 휴먼의 발화 영상을 생성하는 단계를 포함하는 디지털 휴먼 생성 방법
|
14 |
14
제13항에서,상기 사진과 상기 3차원 정보에 기초해서 상기 디지털 휴먼의 바디 자세에 대한 키프레임 자세 영상을 생성하는 단계, 그리고상기 키프레임 표정 영상과 상기 키프레임 자세 영상을 블렌딩해서 상기 키프레임 영상을 생성하는 단계를 더 포함하는 디지털 휴먼 생성 방법
|
15 |
15
제13항에서,상기 3차원 정보에 기초해서 시점 합성 방식으로 상기 키프레임 영상 사이의 중간 프레임 영상을 생성하는 단계를 더 포함하며,상기 발화 영상을 생성하는 단계는 상기 키프레임 영상과 상기 중간 프레임 영상에 기초해서 상기 발화 영상을 생성하는 단계를 포함하는디지털 휴먼 생성 방법
|
16 |
16
제13항에서,상기 3차원 정보를 생성하는 단계는상기 사진에 기초해서 상기 사람의 전신 영역에 대한 3차원 정보를 생성하는 단계,상기 사진에 기초해서 상기 사람의 관심 영역에 대한 3차원 정보를 생성하는 단계, 그리고상기 전신 영역에 대한 3차원 정보와 상기 관심 영역에 대한 3차원 정보를 합성하여 상기 3차원 정보를 생성하는 단계를 포함하는 디지털 휴먼 생성 방법
|
17 |
17
제13항에서,상기 사진을 전처리하여 상기 사진의 해상도를 기준 해상도 이상으로 변환하고 상기 사람의 시점을 정면 시점으로 변환하는 단계를 더 포함하는 디지털 휴먼 생성 방법
|
18 |
18
제13항에서,상기 사진으로부터 광원 효과를 제거하여 상기 사진을 알베도 영상으로 변환하는 단계를 더 포함하며,상기 키프레임 표정 영상의 생성에 사용되는 상기 사진은 상기 알베도 영상인디지털 휴먼 생성 방법
|
19 |
19
제18항에서,상기 키프레임 영상에 환경에 따른 조명 조건을 반영하여 예제 영상을 생성하는 단계를 더 포함하며,상기 발화 영상은 상기 예제 영상을 포함하는디지털 휴먼 생성 방법
|
20 |
20
제13항에서,사용자 단말로부터의 입력에 기초해서 상기 대화 스크립트를 생성하는 단계를 더 포함하는 디지털 휴먼 생성 방법
|