| 1 |
1
다수의 입력 장치로부터 데이터를 수신하는 수신부;상기 수신부가 수신한 데이터 중 오디오 데이터를 텍스트 데이터로 변환하는 음성 인식부;상기 음성 인식부가 변환한 텍스트 데이터를 문장과 단어로 분할하여 수화 기호 및 영상 데이터와 매칭시키고, 텍스트 데이터의 감정을 계산하는 텍스트 처리부; 및상기 오디오 데이터와 동기화된 자막을 영상 데이터와 함께 표시하는 디스플레이부;를 포함하고,상기 텍스트 처리부는,상기 수신된 텍스트 데이터를 문장과 단어로 분리하고 이를 수화의 벤치 마크 데이터베이스에서 검색하여, 단어 또는 문장이 상기 수화의 벤치 마크 데이터베이스에서 대응하는 경우, 상기 수신된 텍스트를 수화 및 영상 데이터와 매칭시키는 매칭부; 및상기 수신된 텍스트 데이터를 문장으로 분할하고 상기 분할된 문장이 주관적인지 여부를 검사하여, 문장이 주관적인 경우 상기 문장에 포함되는 단어에 대한 극성값을 감정 단어 사전 데이터베이스에서 검색하여 텍스트 데이터에 대한 감정을 계산하는 감정 계산부;를 포함하며,상기 감정 계산부는,하나의 문장이 음성 인식부로부터 완성되는 동안에 문장에 대한 극성값을 감정 단어 사전 데이터베이스에서 검색하여 문장(텍스트)에 대해 얻어진 감정을 계산해 색으로 출력하여 사용자가 출력되는 영상에 대한 감정을 느낄 수 있도록 하는 청각 장애인을 위한 소통 지원 장치
|
| 2 |
2
제 1 항에 있어서,상기 음성 인식부는,상기 오디오 데이터에서 음파를 획득하고, 상기 음파를 모음과 자음으로 세분화하여 이를 2진 배열로 변환하는 프런트 엔드 프로세서; 및 상기 변환된 2진 배열을 음향 모델, 어휘집, 언어 모델이 포함된 데이터베이스에서 검색하여 텍스트 데이터로 변환하는 백 엔드 프로세서;를 포함하는 것을 특징으로 하는 청각 장애인을 위한 소통 지원 장치
|
| 3 |
3
삭제
|
| 4 |
4
제 1 항에 있어서,상기 다수의 입력 장치는,카메라 스트림, 마이크로폰 스피커, 모바일 장치 중 어느 하나이고,상기 데이터는,영상 데이터 및 오디오 데이터를 포함하는 것을 특징으로 하는 청각 장애인을 위한 소통 지원 장치
|
| 5 |
5
청각 장애인을 위한 소통 지원 장치에서의 청각 장애인을 위한 소통 지원 방법에 있어서,다수의 입력 장치로부터 데이터를 수신하는 단계;상기 수신한 데이터 중 오디오 데이터를 텍스트 데이터로 변환하는 단계;상기 변환한 텍스트 데이터를 문장과 단어로 분할하여 수화 기호 및 영상 데이터와 매칭시키고, 텍스트 데이터의 감정을 계산하는 단계; 및상기 오디오 데이터와 동기화된 자막을 영상 데이터와 함께 표시하는 단계;를 포함하고,상기 변환한 텍스트 데이터를 문장과 단어로 분할하여 수화 기호 및 영상 데이터와 매칭시키고, 텍스트 데이터의 감정을 계산하는 단계는,상기 수신된 텍스트 데이터를 문장과 단어로 분리하고 이를 수화의 벤치 마크 데이터베이스에서 검색하여, 단어 또는 문장이 상기 수화의 벤치 마크 데이터베이스에서 대응하는 경우, 상기 수신된 텍스트를 수화 및 영상 데이터와 매칭시키는 단계; 및상기 수신된 텍스트 데이터를 문장으로 분할하고 상기 분할된 문장이 주관적인지 여부를 검사하여, 문장이 주관적인 경우 상기 문장에 포함되는 단어에 대한 극성값을 감정 단어 사전 데이터베이스에서 검색하여 텍스트 데이터에 대한 감정을 계산하는 단계;를 포함하며,상기 텍스트 데이터에 대한 감정을 계산하는 단계는,하나의 문장이 음성 인식부로부터 완성되는 동안에 문장에 대한 극성값을 감정 단어 사전 데이터베이스에서 검색하여 문장(텍스트)에 대해 얻어진 감정을 계산해 색으로 출력하여 사용자가 출력되는 영상에 대한 감정을 느낄 수 있도록 하는 단계를 포함하는 청각 장애인을 위한 소통 지원 방법
|
| 6 |
6
제 5 항에 있어서,상기 수신한 데이터 중 오디오 데이터를 텍스트 데이터로 변환하는 단계는,상기 오디오 데이터에서 음파를 획득하고, 상기 음파를 모음과 자음으로 세분화하여 이를 2진 배열로 변환하는 단계; 및상기 변환된 2진 배열을 음향 모델, 어휘집, 언어 모델이 포함된 데이터베이스에서 검색하여 텍스트 데이터로 변환하는 단계;를 포함하는 것을 특징으로 하는 청각 장애인을 위한 소통 지원 방법
|
| 7 |
7
삭제
|
| 8 |
8
제 5 항에 있어서,상기 다수의 입력 장치는,카메라 스트림, 마이크로폰 스티커, 모바일 장치 중 어느 하나이고,상기 데이터는,영상 데이터 및 오디오 데이터를 포함하는 것을 특징으로 하는 청각 장애인을 위한 소통 지원 방법
|
