맞춤기술찾기

이전대상기술

사진 기반 대화형 디지털 휴먼 생성 장치 및 방법

  • 기술번호 : KST2023001496
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 디지털 휴먼 생성 장치는 사람이 촬영된 사진에 기초해서 3차원 정보를 생성하고, 사진과 3차원 정보에 기초해서 디지털 휴먼의 기본 음절 또는 단어 발음에 대한 키프레임 표정 영상을 생성하고, 키프레임 표정 영상을 포함하는 키프레임 영상에 기초해서 대화 스크립트에 해당하는 디지털 휴먼의 발화 영상을 생성한다.
Int. CL G06T 13/40 (2011.01.01) G06T 3/40 (2006.01.01) G10L 21/10 (2013.01.01) G06T 7/70 (2017.01.01) G06T 5/50 (2006.01.01)
CPC G06T 13/40(2013.01) G06T 3/4053(2013.01) G10L 21/10(2013.01) G06T 7/70(2013.01) G06T 5/50(2013.01)
출원번호/일자 1020210185839 (2021.12.23)
출원인 한국전자통신연구원
등록번호/일자
공개번호/일자 10-2023-0096393 (2023.06.30) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 공개
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 N
심사청구항수 20

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국전자통신연구원 대한민국 대전광역시 유성구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 윤승욱 대전광역시 유성구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 이철희 대한민국 서울특별시 강남구 도곡로**길 **(역삼동) 베리타스빌딩, *-*층(베리타스국제특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2021.12.23 수리 (Accepted) 1-1-2021-1491918-11
2 [대리인선임]대리인(대표자)에 관한 신고서
[Appointment of Agent] Report on Agent (Representative)
2022.11.16 수리 (Accepted) 1-1-2022-1221614-72
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
컴퓨팅 장치에 의해 수행되는 디지털 휴먼 생성 방법으로서,사람이 촬영된 제1 입력 사진을 입력 받는 단계,상기 제1 입력 사진의 해상도가 기준 해상도보다 낮은 경우 상기 제1 입력 사진에 초해상화를 적용하고, 상기 사람의 시점이 정면 시점이 아닌 경우 상기 제1 입력 사진에서 상기 사람의 시점을 정면 시점으로 변환하여, 제2 입력 사진을 출력하는 단계,상기 제2 입력 사진에 기초해서 3차원 정보를 생성하는 단계,상기 제2 입력 사진과 상기 3차원 정보에 기초해서 디지털 휴먼의 기본 음절 또는 단어 발음에 대한 키프레임 표정 영상을 생성하는 단계, 그리고상기 키프레임 표정 영상을 포함하는 키프레임 영상에 기초해서 대화 스크립트에 해당하는 디지털 휴먼의 발화 영상을 생성하는 단계를 포함하는 디지털 휴먼 생성 방법
2 2
제1항에서,상기 제2 입력 사진과 상기 3차원 정보에 기초해서 상기 디지털 휴먼의 바디 자세에 대한 키프레임 자세 영상을 생성하는 단계, 그리고상기 키프레임 표정 영상과 상기 키프레임 자세 영상을 블렌딩해서 상기 키프레임 영상을 생성하는 단계를 더 포함하는 디지털 휴먼 생성 방법
3 3
제1항에서,상기 3차원 정보에 기초해서 시점 합성 방식으로 상기 키프레임 영상 사이의 중간 프레임 영상을 생성하는 단계를 더 포함하며,상기 발화 영상을 생성하는 단계는 상기 키프레임 영상과 상기 중간 프레임 영상에 기초해서 상기 발화 영상을 생성하는 단계를 포함하는디지털 휴먼 생성 방법
4 4
제1항에서,상기 3차원 정보를 생성하는 단계는상기 제2 입력 사진에 기초해서 상기 사람의 전신 영역에 대한 3차원 정보를 생성하는 단계,상기 제2 입력 사진에 기초해서 상기 사람의 관심 영역에 대한 3차원 정보를 생성하는 단계, 그리고상기 전신 영역에 대한 3차원 정보와 상기 관심 영역에 대한 3차원 정보를 합성하여 상기 3차원 정보를 생성하는 단계를 포함하는 디지털 휴먼 생성 방법
5 5
제4항에서,상기 3차원 정보는 색상, 깊이 또는 노멀 중 적어도 하나를 포함하는 내재적 3차원 정보인, 디지털 휴먼 생성 방법
6 6
제1항에서,상기 키프레임 표정 영상을 생성하는 단계는상기 제2 입력 사진으로부터 광원 효과를 제거하여 상기 제2 입력 사진을 알베도 영상으로 변환하는 단계, 그리고상기 알베도 영상과 상기 3차원 정보에 기초해서 상기 키프레임 표정 영상을 생성하는 단계를 포함하는 디지털 휴먼 생성 방법
7 7
제6항에서,상기 키프레임 영상에 환경에 따른 조명 조건을 반영하여 예제 영상을 생성하는 단계를 더 포함하며,상기 발화 영상은 상기 예제 영상을 포함하는디지털 휴먼 생성 방법
8 8
제1항에서,사용자 단말로부터의 입력에 기초해서 상기 대화 스크립트를 생성하는 단계를 더 포함하는 디지털 휴먼 생성 방법
9 9
적어도 하나의 명령어를 저장하는 메모리, 그리고상기 명령어를 실행하는 프로세서를 포함하며,상기 명령어를 실행함으로써, 상기 프로세서는사람이 촬영된 사진을 입력 받고,상기 사진에 기초해서 상기 사람의 전신 영역에 대한 3차원 정보를 생성하고,상기 사진에 기초해서 상기 사람의 관심 영역에 대한 3차원 정보를 생성하고,상기 전신 영역에 대한 3차원 정보와 상기 관심 영역에 대한 3차원 정보를 합성하여 최종 3차원 정보를 생성하고,상기 사진과 상기 최종 3차원 정보에 기초해서 디지털 휴먼의 기본 음절 또는 단어 발음에 대한 키프레임 표정 영상을 생성하고,상기 키프레임 표정 영상을 포함하는 키프레임 영상에 기초해서 대화 스크립트에 해당하는 디지털 휴먼의 발화 영상을 생성하는디지털 휴먼 생성 장치
10 10
제9항에서,상기 프로세서는상기 사진과 상기 최종 3차원 정보에 기초해서 상기 디지털 휴먼의 바디 자세에 대한 키프레임 자세 영상을 생성하고,상기 키프레임 표정 영상과 상기 키프레임 자세 영상을 블렌딩해서 상기 키프레임 영상을 생성하는디지털 휴먼 생성 장치
11 11
제9항에서,상기 프로세서는상기 최종 3차원 정보에 기초해서 시점 합성 방식으로 상기 키프레임 영상 사이의 중간 프레임 영상을 생성하고,상기 키프레임 영상과 상기 중간 프레임 영상에 기초해서 상기 발화 영상을 생성하는 디지털 휴먼 생성 장치
12 12
제9항에서,상기 프로세서는 사용자 단말로부터의 입력에 기초해서 상기 대화 스크립트를 생성하는, 디지털 휴먼 생성 장치
13 13
컴퓨팅 장치에 의해 수행되는 디지털 휴먼 생성 방법으로서,사람이 촬영된 사진을 입력 받는 단계,상기 사진에 기초해서 3차원 정보를 생성하는 단계,상기 사진과 상기 3차원 정보에 기초해서 디지털 휴먼의 기본 음절 또는 단어 발음에 대한 키프레임 표정 영상을 생성하는 단계, 그리고상기 키프레임 표정 영상을 포함하는 키프레임 영상에 기초해서 대화 스크립트에 해당하는 디지털 휴먼의 발화 영상을 생성하는 단계를 포함하는 디지털 휴먼 생성 방법
14 14
제13항에서,상기 사진과 상기 3차원 정보에 기초해서 상기 디지털 휴먼의 바디 자세에 대한 키프레임 자세 영상을 생성하는 단계, 그리고상기 키프레임 표정 영상과 상기 키프레임 자세 영상을 블렌딩해서 상기 키프레임 영상을 생성하는 단계를 더 포함하는 디지털 휴먼 생성 방법
15 15
제13항에서,상기 3차원 정보에 기초해서 시점 합성 방식으로 상기 키프레임 영상 사이의 중간 프레임 영상을 생성하는 단계를 더 포함하며,상기 발화 영상을 생성하는 단계는 상기 키프레임 영상과 상기 중간 프레임 영상에 기초해서 상기 발화 영상을 생성하는 단계를 포함하는디지털 휴먼 생성 방법
16 16
제13항에서,상기 3차원 정보를 생성하는 단계는상기 사진에 기초해서 상기 사람의 전신 영역에 대한 3차원 정보를 생성하는 단계,상기 사진에 기초해서 상기 사람의 관심 영역에 대한 3차원 정보를 생성하는 단계, 그리고상기 전신 영역에 대한 3차원 정보와 상기 관심 영역에 대한 3차원 정보를 합성하여 상기 3차원 정보를 생성하는 단계를 포함하는 디지털 휴먼 생성 방법
17 17
제13항에서,상기 사진을 전처리하여 상기 사진의 해상도를 기준 해상도 이상으로 변환하고 상기 사람의 시점을 정면 시점으로 변환하는 단계를 더 포함하는 디지털 휴먼 생성 방법
18 18
제13항에서,상기 사진으로부터 광원 효과를 제거하여 상기 사진을 알베도 영상으로 변환하는 단계를 더 포함하며,상기 키프레임 표정 영상의 생성에 사용되는 상기 사진은 상기 알베도 영상인디지털 휴먼 생성 방법
19 19
제18항에서,상기 키프레임 영상에 환경에 따른 조명 조건을 반영하여 예제 영상을 생성하는 단계를 더 포함하며,상기 발화 영상은 상기 예제 영상을 포함하는디지털 휴먼 생성 방법
20 20
제13항에서,사용자 단말로부터의 입력에 기초해서 상기 대화 스크립트를 생성하는 단계를 더 포함하는 디지털 휴먼 생성 방법
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 과학기술정보통신부 한국전자통신연구원 실감콘텐츠핵심기술개발(R&D) 실사 수준의 디지털 휴먼 생성과 30fps급 실감 렌더링 기술 개발