| 1 |
1
개인비서 시스템에 의해 수행되는 개인비서 방법에 있어서, 사용자의 음성, 표정 또는 감정이 유발되는 라이프로그를 파악하는 단계;상기 파악된 라이프로그에 대한 기계학습을 통하여 사용자의 내면 상태를 추론하는 단계; 및 상기 추론된 사용자의 내면 상태에 대응하여 생성된 대화 데이터를 TTS(Text To Speech)를 통해 출력하는 단계 를 포함하고,상기 사용자의 음성, 표정 또는 감정이 유발되는 라이프로그를 파악하는 단계는, 처음 사용자와 대화를 수행할 경우, 사용자와 관련된 정보가 존재하지 않기 때문에 기본적으로 설정된 질의-응답으로 대화를 시작하고, 사용자와 대화를 수행함에 따라 사용자의 식별 정보, 사용자의 선호 정보를 포함하는 사용자와 관련된 정보가 수집됨에 따라 사용자가 흥미를 가질만한 질문을 포함하는 대화를 진행하고, 사용자와 대화를 수행한 적이 있을 경우, 기 저장된 사용자의 정보에 기초하여 사용자와 대화를 진행하는 단계 를 포함하고,상기 파악된 라이프로그에 대한 기계학습을 통하여 사용자의 내면 상태를 추론하는 단계는,사용자의 얼굴, 사용자의 표정, 사용자와 대화하는 문장의 구문 분석을 통하여 감정, 연령 또는 성별을 포함하는 내면 상태를 인식하며, 사용자의 대화 내용, 사용자의 대화 억양 및 사용자의 표정 변화 중 어느 하나 이상의 라이프로그를 융합하여 사용자의 내면 상태를 인식하고, 인식된 사용자의 내면 상태를 학습시키고, 사용자의 정서적 불안, 사용자의 스트레스 정도 또는 사용자의 정신상태 중 어느 하나 이상을 포함하는 라이프로그를 학습시키고, 사용자의 얼굴 또는 사용자의 얼굴의 표정을 인식함에 따라 전처리 과정을 수행하여 노이즈를 제거한 후 사용자의 얼굴 또는 사용자의 얼굴의 표정 정보를 학습시키고, 사용자로부터 추출된 얼굴의 특징점을 이용하여 기 저장된 데이터와 매칭하여 사용자를 식별하고 사용자의 감정을 판단하여 사용자의 내면 상태를 추론하는 단계를 포함하고, 상기 추론된 사용자의 내면 상태에 대응하여 생성된 대화 데이터를 TTS(Text To Speech)를 통해 출력하는 단계는,상기 추론된 사용자의 내면 상태에 대응하여 생성된 대화 내용의 텍스트 데이터를 변환한 음성 데이터를 상기 사용자의 내면 상태에 기초하여 감정, 나이 또는 성별 중 어느 하나 이상의 음성 출력 정보를 변경시키고, 상기 변경된 음성 출력 정보를 출력하는 단계 를 포함하는 방법
|
| 2 |
2
제1항에 있어서,상기 추론된 사용자의 내면 상태에 대응하여 생성된 대화 데이터를 TTS(Text To Speech)를 통해 출력하는 단계는,상기 추론된 사용자의 내면 상태에 대응하여 생성된 대화 내용의 텍스트 데이터를 음성 데이터로 변환하고, 상기 변환된 음성 데이터를 출력하여 상기 사용자와 대화하는 단계 를 포함하는 방법
|
| 3 |
3
삭제
|
| 4 |
4
제1항에 있어서,상기 추론된 사용자의 내면 상태에 대응하여 생성된 대화 데이터를 TTS(Text To Speech)를 통해 출력하는 단계는,1)성별, 2)상기 성별에 따른 나이대 및 3)기쁨, 슬픔 또는 분노를 포함하는 감정 표현 중 적어도 하나 이상의 구분 가능한 TTS를 생성하는 단계 를 포함하는 방법
|
| 5 |
5
삭제
|
| 6 |
6
삭제
|
| 7 |
7
삭제
|
| 8 |
8
개인비서 시스템에 있어서, 사용자의 음성, 표정 또는 감정이 유발되는 라이프로그를 파악하는 인식부;상기 파악된 라이프로그에 대한 기계학습을 통하여 사용자의 내면 상태를 추론하는 분석부; 및 상기 추론된 사용자의 내면 상태에 대응하여 생성된 대화 데이터를 TTS(Text To Speech)를 통해 출력하는 TTS 대화부를 포함하고,상기 인식부는, 처음 사용자와 대화를 수행할 경우, 사용자와 관련된 정보가 존재하지 않기 때문에 기본적으로 설정된 질의-응답으로 대화를 시작하고, 사용자와 대화를 수행함에 따라 사용자의 식별 정보, 사용자의 선호 정보를 포함하는 사용자와 관련된 정보가 수집됨에 따라 사용자가 흥미를 가질만한 질문을 포함하는 대화를 진행하고, 사용자와 대화를 수행한 적이 있을 경우, 기 저장된 사용자의 정보에 기초하여 사용자와 대화를 진행하는 것을 포함하고, 상기 분석부는,사용자의 얼굴, 사용자의 표정, 사용자와 대화하는 문장의 구문 분석을 통하여 감정, 연령 또는 성별을 포함하는 내면 상태를 인식하며, 사용자의 대화 내용, 사용자의 대화 억양 및 사용자의 표정 변화 중 어느 하나 이상의 라이프로그를 융합하여 사용자의 내면 상태를 인식하고, 인식된 사용자의 내면 상태를 학습시키고, 사용자의 정서적 불안, 사용자의 스트레스 정도 또는 사용자의 정신상태 중 어느 하나 이상을 포함하는 라이프로그를 학습시키고, 사용자의 얼굴 또는 사용자의 얼굴의 표정을 인식함에 따라 전처리 과정을 수행하여 노이즈를 제거한 후 사용자의 얼굴 또는 사용자의 얼굴의 표정 정보를 학습시키고, 사용자로부터 추출된 얼굴의 특징점을 이용하여 기 저장된 데이터와 매칭하여 사용자를 식별하고 사용자의 감정을 판단하여 사용자의 내면 상태를 추론하는 것을 포함하고, 상기 TTS 대화부는,상기 추론된 사용자의 내면 상태에 대응하여 생성된 대화 내용의 텍스트 데이터를 변환한 음성 데이터를 상기 사용자의 내면 상태에 기초하여 감정, 나이 또는 성별 중 어느 하나 이상의 음성 출력 정보를 변경시키고, 상기 변경된 음성 출력 정보를 출력하는 시스템
|
| 9 |
9
제8항에 있어서,상기 TTS(Text To Speech) 대화부는,상기 추론된 사용자의 내면 상태에 대응하여 생성된 대화 내용의 텍스트 데이터를 음성 데이터로 변환하고, 상기 변환된 음성 데이터를 출력하여 상기 사용자와 대화하는 것을 특징으로 하는 시스템
|
| 10 |
10
삭제
|
| 11 |
11
제8항에 있어서,상기 TTS(Text To Speech) 대화부는,1)성별, 2)상기 성별에 따른 나이대 및 3)기쁨, 슬픔 또는 분노를 포함하는 감정 표현 중 적어도 하나 이상의 구분 가능한 TTS를 생성하는 것을 특징으로 하는 시스템
|
| 12 |
12
삭제
|
| 13 |
13
삭제
|
| 14 |
14
삭제
|
