| 4 |
4
화면표시장치;상기 화면표시장치의 일부에 형성된 스마트폰 거치대;상기 스마트폰 거치대에 거치될 수 있는 스마트폰;을 포함하고,상기 스마트폰에 설치된 애플리케이션 프로그램은, 음성 인식부, 감정 인식부, 자막 생성부를 포함하고, 상기 스마트폰에 상기 애플리케이션 프로그램이 설치되면, 상기 스마트폰은 감정시각화자막을 스마트폰의 디스플레이부에 표시할 수 있고,상기 음성 인식부는 음성신호로부터 음성을 분석할 수 있고,상기 감정 인식부는 음성신호로부터 감정을 분석할 수 있고,상기 자막 생성부는, 음성 인식부의 분석 결과를 바탕으로 음성을 문자로 변환한 자막을 생성할 때, 감정 인식부의 분석결과를 이용하여 감정시각화자막을 생성할 수 있고,상기 감정시각화자막은 음성의 감정에 따라 자막의 색이 달라지고,상기 감정 인식부에서 감정을 인식할 때, 감정 음성 DB에서 음성 특징 벡터를 추출하여 상기 음성 특징 벡터에 대응하는 감정 정보를 이용해 일반 감정인식 모델을 생성하고, 상기 감정 음성 DB에서 추출한 상기 음성 특징 벡터에 대하여 사용자 평가를 통해 개인 감정 인식 모델을 생성하고, 사용자의 음성을 입력 받아 입력 받은 상기 사용자 음성의 음성 특징 벡터를 추출하고, 상기 추출한 사용자 음성의 음성 특징 벡터를 상기 일반 감정 인식 모델 및 상기 개인 감정 인식 모델을 이용하여 음성을 분석하고, 상기 분석한 음성을 바탕으로 상기 사용자 음성에 포함된 감정을 인식하여, 경계, 분노, 좌절, 비참함, 지루함, 피곤함, 침착, 만족, 기쁨, 행복, 즐거움, 놀람의 감정을 추정하고,말하는 사람의 어조가 보통의 어조이면 명조체로 표시하고, 말하는 사람의 어조가 단호한 감정의 어조이면 고딕체로 표시하고,말하는 사람의 목소리의 크기에 따라 자막의 크기를 다르게 표시하고,말하는 사람이 즐거운 것으로 추정될 때, 문자열이 움직이는 문자열로 표시되는 것을 특징으로 하는 감정시각화자막 생성장치
|
