1 |
1
화자의 두경부의 일면에 인접하여 조음기관의 물리특성을 측정하는 센서부;상기 센서부의 위치와 상기 조음기관의 물리특성을 기반으로 화자의 발화 특징을 파악하는 데이터해석부;상기 센서부의 위치와 상기 발화특징을 언어데이터로 변환하는 데이터변환부; 상기 데이터변환부(300)의 상기 언어데이터를 음성정보로 생성하는 텍스트정보부;상기 텍스트정보부와 연동되어, 언어데이터 기반의 상기 음성정보를 외부로 표현하는 데이터표현부; 상기 센서부는, 구강설에 대응되는 구강설 센서를 포함하는 발화 구현 시스템
|
2 |
2
제 1 항에 있어서,상기 구강설 센서는, 상기 구강설의 일측면에 고착되거나, 상기 구강설의 표면을 감싸거나, 상기 구강설 내부에 삽입되고, 발화에 따른 상기 구강설의 x축, y축, z축 방향 기반의 시간에 따른 벡터량의 변화량을 파악하여, 상기 구강설의 저고도, 전후설성, 굴곡도, 신전도, 회전도, 긴장도, 수축도, 이완도, 진동도 중 적어도 하나의 물리특성을 파악하는 발화 구현 시스템
|
3 |
3
제 1 항에 있어서,상기 구강설 센서는, 상기 구강설의 일측면에 고착되거나, 상기 구강설의 표면을 감싸거나, 상기 구강설 내부에 삽입되고, 발화에 따른 상기 구강설의 x축, y축, z축 방향 기반의 단위 시간 당 회전하는 각도의 변화량을 파악하여, 상기 구강설을 포함한 상기 조음기관의 물리 특성을 파악하는 발화 구현 시스템
|
4 |
4
제 1 항에 있어서,상기 구강설 센서는, 상기 구강설의 일측면에 고착되거나, 상기 구강설의 표면을 감싸고, 발화에 따른 상기 구강설의 수축 및 이완으로 발생하는 물리력에 따라 결정 구조의 변화에 기인하는 편극에 대응되는 전기신호가 발생하는 압전소자를 통해 상기 구강설의 굽힘도를 파악하여, 상기 구강설의 저고도, 전후설성, 굴곡도, 신전도, 회전도, 긴장도, 수축도, 이완도, 진동도 중 적어도 하나의 물리특성을 파악하는 발화 구현 시스템
|
5 |
5
제 1 항에 있어서,상기 센서부는, 상기 구강설이 상기 두경부 내외의 다른 조음기관과의 상호작용에 기인하는 접근 및 접촉에 대응되는 마찰전기(Tribo Electric Generator)에 따른 파열도, 마찰도, 공명도, 접근도 중 적어도 하나의 물리특성을 파악하는 마찰대전소자를 포함하는 발화 구현 시스템
|
6 |
6
제 1 항에 있어서,상기 데이터해석부는, 상기 센서부에서 측정되는 상기 구강설과 다른 조음기관과의 물리특성을 통해 상기 화자가 발화하는 자모음, 어휘 단위 강세 (Lexical Stress), 문장 단위 강세(Tonic stress) 중 적어도 하나의 발화 특징을 파악하는 발화 구현 시스템
|
7 |
7
제 6 항에 있어서,상기 데이터해석부는, 상기 센서부에 의해 측정되는 상기 조음기관의 물리특성에 의한 발화 특징을 파악함에 있어서, 2진수 내지 실수를 포함하는 수치로 구성된 표준 발화 특징 행렬을 기반으로 상기 화자의 발음과 강세의 정오도, 유사근접도, 발화 의도 중 적어도 하나의 발화 특징을 측정하는 발화 구현 시스템
|
8 |
8
제 7 항에 있어서, 상기 데이터해석부는, 상기 센서부에 의해 측정되는 상기 조음기관의 물리특성을 발화 특징을 파악함에 있어서, 상기 조음기관의 물리특성을 각 자모음 단위의 패턴으로 인식하는 단계, 상기 자모음 단위의 패턴의 특징을 추출하고, 추출된 상기 자모음 단위의 패턴의 특징을 유사도에 따라 분류하는 단계, 분류된 상기 자모음 단위의 패턴의 특징을 재조합하는 단계, 상기 조음기관의 물리특성을 상기 발화 특징으로 해석하는 단계에 따라 상기 발화 특징을 파악하는 발화 구현 시스템
|
9 |
9
제 7 항에 있어서,상기 데이터해석부는, 상기 센서부에 의해서 측정되는 상기 조음기관의 물리특성에 의해, 자모음의 동화(Assimilation), 이화(Dissimilation), 탈락(Elision), 첨가(Attachment), 강세(Stress)와, 약화(Reduction)로 야기되는 기식음화 (Asperation), 음절성자음화(Syllabic cosonant), 탄설음화(Flapping), 경음화(Tensification), 순음화(Labilalization), 연구개음화(Velarization), 치음화(Dentalizatiom), 구개음화 (Palatalization), 비음화(Nasalization), 강세변화(Stress Shift), 장음화(Lengthening) 중 적어도 하나의 이차조음현상인 발화 변이를 측정하는 발화 구현 시스템
|
10 |
10
제 1 항에 있어서,상기 구강설 센서는, 센서 작동을 위한 회로부, 상기 회로부를 감싸는 캡슐부, 상기 구강설 일면에 부착되는 접착부를 포함하는 발화 구현 시스템
|
11 |
11
제 10 항에 있어서,상기 구강설 센서는, 박막 회로를 가진 필름 형태로서 상기 구강설에 인접하여 작동하는 발화 구현 시스템
|
12 |
12
제 1 항에 있어서,상기 센서부는, 두경부 근육의 신경신호 측정의 기준 전위를 생성하는 적어도 하나의 레퍼런스 센서와, 상기 두경부 근육의 신경신호를 측정하는 적어도 하나의 양극센서 및 적어도 하나의 음극센서로 구성된 안면부 센서를 포함하는 발화 구현 시스템
|
13 |
13
제 12 항에 있어서,상기 데이터해석부는, 상기 안면부 센서에 기반하여 상기 센서부의 위치를 획득함에 있어서, 상기 레퍼런스 센서를 기준으로 하여 상기 적어도 하나의 양극센서 및 상기 적어도 하나의 음극센서의 전위차를 파악하여 상기 안면부 센서의 위치를 파악하는 발화 구현 시스템
|
14 |
14
제 12 항에 있어서,상기 데이터해석부는, 상기 안면부 센서에 기반하여 상기 화자의 발화 특징을 획득함에 있어서, 상기 레퍼런스 센서를 기준으로 하여 상기 적어도 하나의 양극센서 및 상기 적어도 하나의 음극센서의 전위차를 파악하여 상기 화자의 두경부에서 발생하는 상기 조음기관의 물리 특성에 의한 발화 특징을 파악하는 발화 구현 시스템
|
15 |
15
제 1 항에 있어서,상기 센서부는, 상기 화자의 두경부 중 성대에 인접하여 성대의 근전도 내지 떨림을 파악하여, 상기 화자의 발화 시작, 발화 정지, 발화 종료 중 적어도 하나의 발화 내역 정보를 파악하는 성대 센서를 포함하는 발화 구현 시스템
|
16 |
16
제 1 항에 있어서,상기 센서부는, 치아의 일면에 인접하여 상기 구강설 및 아랫 입술의 접촉에 기인하여 발생하는 전기적 용량 변화에 따른 신호발생 위치를 파악하는 치아센서를 포함하는 발화 구현 시스템
|
17 |
17
제 1 항에 있어서,상기 데이터해석부는, 상기 화자의 두경부 일면에 인접한 음성 취득 센서를 통해 발화에 따른 상기 화자의 음성을 취득하는 발화 구현 시스템
|
18 |
18
제 1 항에 있어서, 상기 센서부는 화자의 발화 의도에 따라 발생하는 두경부의 상하좌우의 기울임, 흉곽부의 들썩임, 두경부와 흉곽부 간의 핏대 및 근육의 긴장, 상지부의 떨림, 상지부의 제스쳐, 하지부의 떨림, 하지부의 제스쳐 중 적어도 하나의 비언어적 표현을 파악하기 위해 상기 화자의 두경부를 촬상하는 촬상센서를 더욱 포함하는 것을 특징으로 하는 발화 구현 시스템
|
19 |
19
제 1 항에 있어서,상기 센서부의 구강설 센서, 안면 센서, 음성취득 센서, 성대 센서, 치아 센서, 촬상센서 중 적어도 하나에 전원을 공급하는 전원부를 더 포함하는 발화 구현 시스템
|
20 |
20
제 1 항에 있어서, 상기 데이터해석부 및 상기 데이터베이스부가 외부에 위치하여 작동할 경우, 연동되어 통신할 수 있는 유선 또는 무선의 통신부를 더 포함하는 발화 구현 시스템
|
21 |
21
제 1항에 있어서, 상기 데이터해석부는, 상기 센서부의 위치, 상기 화자의 발화 특징, 상기 화자의 음성에 대응하는 적어도 하나의 언어 데이터 색인을 포함하는 데이터베이스부와 연동되는 발화 구현 시스템
|
22 |
22
제 21 항에 있어서, 상기 데이터베이스부는, 발화 시작점과 종료점을 포함하는 발화의 진행 시간, Formant 1, Formant 2, Formant 3 중 적어도 하나의 Formant값, 발화의 진폭, 발화에 따른 두경부 근육의 근전도, 발화에 따른 두경부 근육의 위치 변화, 구강설의 굽힘 및 회전에 따른 위치 변화 중 적어도 하나의 정보를 기반으로, 자모음의 음소단위 색인, 음절단위 색인, 단어단위 색인, 구절단위 색인, 문장단위 색인, 연속발화단위 색인, 발음의 고저 색인 중 적어도 하나의 언어 데이터 색인을 구성하는 발화 구현 시스템
|
23 |
23
제 1 항에 있어서, 상기 데이터표현부는, 상기 데이터베이스부의 언어 데이터 색인과 연동되어, 상기 화자의 발화 특징을 자모음의 음소(Phoneme)단위, 적어도 하나의 단어단위, 적어도 하나의 구절단위(Citation Forms), 적어도 하나의 문장단위, 연속발화단위(Consecutive Speech) 중 적어도 하나의 발화 표현을 나타내는 발화 구현 시스템
|
24 |
24
제 23 항에 있어서,상기 데이터표현부에 의해 나타나는 발화 표현은, 문자 기호, 그림, 특수기호, 숫자 중 적어도 하나로 시각화되거나, 소리 형태로 청각화되어, 상기 화자와 청자에게 제공되는 발화 구현 시스템
|
25 |
25
제 23 항에 있어서,상기 데이터표현부에 의해 나타나는 발화 표현은, 진동, 스누징, 태핑, 압박, 이완 중 적어도 하나의 촉각적 방법으로 상기 화자와 청자에게 제공되는 발화 구현 시스템
|
26 |
26
제 1항에 있어서,상기 텍스트정보부(600)는 언어데이터를 음성으로 출력함에 있어서,(a) 상기 데이터변환부에서 적어도 하나의 언어데이터를 획득하는 화자데이터취득단계(S710)와;(b) 상기 데이터베이스부의 언어데이터색인의 단어 단위 색인을 기반으로 상기 언어데이터에서 적어도 하나의 기능어(Function Word) 내지 공백은 0 내지 NULL로 라벨링하여 제외하고, 적어도 하나의 화자내용어를 상기 데이터해석부(200)의 상기 표준 발화 특징행렬의 원소로로 라벨링하여 화자내용어 테이블(615)을 생성하는 화자데이터추출단계(S720);(c) 상기 데이터베이스부의 언어데이터색인의 음소 단위 색인(361) 내지 음절 단위 색인을 기반으로, 상기 화자내용어 테이블을 Onset(초성), Necleus(중성), Coda(종성) 중 적어도 하나의 자모음 음소 단위로 분리하여 음소값행렬(620)을 생성하는 음소행렬생성단계(S730); (d) 상기 (c) 데이터분할단계에서 생성된 상기 음소값행렬(620)의 각 원소에 상응하여, 상기 음소 단위 색인의 발화 시작점과 종료점을 포함하는 발화의 진행 시간값과, 발화에 따른 F0, F1, F2, F3, F4 중 적어도 하나의 Formant Frequency값과, 발화의 진폭값 중 적어도 하나를 포함하는 음성값행렬(630)을 생성하는 음성행렬생성단계(S740);(e) 상기 (c)에서 생성된 상기 음소값행렬 중 적어도 하나의 원소에, 상기 음소값행렬의 원소에 대응하는 상기 (d) 단계에서 생성된 음성값행렬 중 적어도 하나의 원소를 할당하여 병합하는 데이터병합단계(S750);(f) (e) 단계를 거친 적어도 하나의 원소들끼리 재조합하여, 음소단위, 단어단위, 구절단위, 문장단위, 연속발화단위 중 적어도 하나의 음성정보를 생성하는 데이터생성단계(S760); 를 포함하는 화자데이터처리단계(S700)를 거치는 것을 특징으로 하는 조음기관의 물리 특성과 문자 및 음성 간 매칭을 통한 발화 의도 측정 및 발화 구현 시스템
|