| 1 |
1
강의용 영상 자료와 강의를 진행할 영상 형태의 디지털 휴먼 튜터 모델을 생성하는 단계;상기 강의용 영상 자료와 DHT (Digital Human Tutor)를 합성하여 강의용 영상 콘텐츠를 형성하는 단계;상기 영상 컨텐츠를 학습자에게 시현하면서, 학습자의 안면을 포함하는 인체 영상을 획득하는 단계;상기 인체 영상으로부터 상기 학습자의 안면의 물리적 움직임에 대한 특징 정보를 추출하는 단계; 그리고상기 물리적 특징의 변화를 상기 DHT에 적용하여 상기 학습자의 반응을 상기 DHT의 외형에 모방시키는 단계;를 포함하는, 교감형 디지털 휴먼 튜터 생성 방법
|
| 2 |
2
제1항에 있어서,상기 학습자의 외형적 특징을 추출하는 단계에서,상기 학습자의 안면에서 특징점을 추출하고, 추출된 특징점의 미세 움직임 데이터를 추출하고, 상기 미세 움직임 데이터로부터 심박 정보를 추출하여, 상기 HDT의 특성값으로 입력하는, 교감형 디지털 휴먼 튜터 생성 방법
|
| 3 |
3
제2항에 있어서,상기 미세 움직임 데이터는 얼굴의 코 영역과 이마 영역 중 적어도 한 영역에 정의되는 다수의 특징점의 움직임으로부터 추출하는, 디지털 휴먼 튜터의 생성 방법
|
| 4 |
4
제4항에 있어서,상기 미세 표현 데이터를 추출하기 위하여 상기 특징점 추적에 KLT (Kanade-Lucas-Tomasi) 추적 알고리즘 또는 TM (Transformation Matrix) 기반 추적 알고리즘를 적용하여 미세 표현 데이터(Micro Expression Data, MED)를 계산하는, 교감형 디지털 휴먼 튜터 생성 방법
|
| 5 |
5
제3항 또는 제4항에 있어서,상기 미세 표현 데이터로부터 무의식적 미세 표현 데이터를 추출하기 위하여, 미세 표현 데이터에 대한 소정 주파수의 필터링을 수행하고, 필터링된 미세표현 데이터에 대해 주성분 분석(PCA)에 의해 심박의 주기성을 판단하고, 상기 주성분 분석을 거친 미세 표현 데이터를 상기 DHT의 특성값으로 입력하는, 교감형 디지털 휴먼 튜터 생성 방법
|
| 6 |
6
제5항에 있어서,상기 주성분 분석을 거친 나온 0
|
| 7 |
7
제1항에 있어서,상기 안면 영상에서 학습자의 동공 영역을 추출하고,상기 동공 영역에서 상기 학습자의 시선 파라미터를 추출하고, 그리고상기 시선 파라미터를 상기 DHT의 시선에 대한 특성값으로 입력하는, 교감형 디지털 휴먼 튜터 생성 방법
|
| 8 |
8
제7항에 있어서,상기 안면 영상에서 안면에 정의된 안면 근육 AU의 미세 움직임 값을 추출하고,상기 안면 근육 AU의 움직임 값을 상기 DHT의 안면 근육 AU이 특성값으로 입력하는, 교감형 디지털 휴먼 튜터 생성 방법
|
| 9 |
9
제1항에 있어서,상기 인체 영상에서 상기 학습자의 다수 관절에 대한 2차원 위치 좌표 데이터를 추출하고, 그리고상기 2차원 위치 좌표로부터 3차원 각도로 변환하여 상기 DHT의 관절 특성값으로 입력하는, 교감형 디지털 휴먼 튜터 생성 방법
|
| 10 |
10
청구항1 내지 제4항 중의 어느 한 항에 기재된 방법을 수행하는 교감형 디지털 휴먼 튜터 생성 시스템에 있어서,상기 강의용 영상 자료를 생성하는 영상 생성부;강의를 진행할 상기 DHT를 생성하는 DHT 생성부;상기 강의용 영상 자료와 DHT를 합성하여 강의용 영상 콘텐츠를 형성하는 영상-DHT 합성부;상기 영상 콘텐츠를 학습자에게 제공하는 영상 콘텐츠 배포부;상기 영상 콘텐츠를 시청하는 학습자의 안면을 포함하는 인체 영상을 획득하는 카메라를 포함하는 영상 정보 처리부;상기 학습자의 인체 영상으로부터 학습자의 안면의 물리적 움직임에 따른 물리적 특성변수를 측정하여 상기 DHT의 특성변수로 입력하여 DHT의 특성값으로 전송하는 특성 변수 측정부; 를 구비하는, 교감형 디지털 휴먼 튜터 생성 시스템
|
| 11 |
11
제10항에 있어서,상기 특성 변수 측정부는, 상기 미세 표현 데이터로부터 무의식적 미세 표현 데이터를 추출하기 위하여, 미세 표현 데이터에 대한 소정 주파수의 필터링을 수행하고, 필터링된 미세표현 데이터에 대해 주성분 분석(PCA)에 의해 심박의 주기성을 판단하는, 교감형 디지털 휴먼 튜터 생성 시스템
|
| 12 |
12
제11항에 있어서,상기 특성 변수 측정부는,상기 주성분 분석을 거친 나온 0
|
| 13 |
13
제11항에 있어서,상기 특성 변수 측정부는,상기 안면 영상에서 학습자의 동공 영역을 추출하고,상기 동공 영역에서 상기 학습자의 시선 파라미터를 추출하고, 그리고상기 시선 파라미터를 상기 DHT의 시선에 대한 특성값으로 전송하는, 교감형 디지털 휴먼 튜터 생성 시스템
|
| 14 |
14
제13항에 있어서,상기 특성 변수 측정부는,상기 안면 영상에서 안면에 정의된 안면 근육 AU의 미세 움직임 값을 추출하고,상기 안면 근육 AU의 움직임 값을 상기 DHT의 안면 근육 AU의 특성값으로 전송하는, 교감형 디지털 휴먼 튜터 생성 시스템
|
| 15 |
15
제14항에 있어서,상기 특성 변수 측정부는, 상기 인체 영상에서 상기 학습자의 다수 관절에 대한 2차원 위치 좌표 데이터를 추출하고, 그리고상기 2차원 위치 좌표로부터 3차원 각도로 변환하여 상기 DHT의 관절 특성값으로 전송하는, 교감형 디지털 휴먼 튜터 생성 시스템
|
| 16 |
16
제11항에 있어서,상기 특성 변수 측정부는,상기 안면 영상에서 안면에 정의된 안면 근육 AU의 미세 움직임 값을 추출하고,상기 안면 근육 AU의 움직임 값을 상기 DHT의 안면 근육 AU의 특성값으로 전송하는, 교감형 디지털 휴먼 튜터 생성 시스템
|
| 17 |
17
제11항에 있어서,상기 특성 변수 측정부는, 상기 인체 영상에서 상기 학습자의 다수 관절에 대한 2차원 위치 좌표 데이터를 추출하고, 그리고상기 2차원 위치 좌표로부터 3차원 각도로 변환하여 상기 DHT의 관절 특성값으로 전송하는, 교감형 디지털 휴먼 튜터 생성 시스템
|
