1 |
1
발화자의 음성 및 주변 음향을 송신하는 발화자 이동 단말;상기 발화자 이동 단말로부터 발화자의 음성 및 주변 음향을 수신하는 통화 수신 모듈과, 상기 통화 수신 모듈에서 수신된 음성 및 주변 음향을 분석하여 상기 발화자의 연령 정보를 추론하는 연령 정보 추론 모듈과, 상기 통화 수신 모듈에서 수신된 음성 및 주변 음향을 분석하여 상기 발화자의 성별을 추론하는 성별 정보 추론 모듈과, 상기 통화 수신 모듈에서 수신된 음성 및 주변 음향을 분석하여 상기 발화자의 심리 상태를 추론하는 심리 상태 추론 모듈과, 상기 통화 수신 모듈에서 수신된 음성 및 주변 음향을 분석하여 상기 발화자의 진실/거짓을 추론하는 진실/거짓 추론 모듈과, 미리 정해진 주변 음향을 미리 저장된 음향 데이터베이스와, 상기 통화 수신 모듈에서 수신된 주변 음향과 상기 음향 데이터베이스에 미리 저장된 주변 음향을 상호 대비하여 주변 음향을 추론하는 주변 음향 추론 모듈과, 상기 통화 수신 모듈에서 상기 발화자 이동 단말로부터 발화자의 음성 및 주변 음향을 수신하는 경우 해당 통신사 서버를 통해 상기 발화자 이동 단말의 GPS(global positioning system) 기능을 턴온(turn-on)시키는 GPS(global positioning system) 원격 제어 모듈을 포함하는 상황 판단 서버;상기 연령 정보 추론 모듈에서 추론된 연령 정보, 상기 성별 정보 추론 모듈에서 추론된 성별 정보, 상기 심리 상태 추론 모듈에서 추론된 심리 상태 및 상기 진실/거짓 추론 모듈에서 추론된 진실/거짓을 실시간 디스플레이하는 사용자 단말을 포함하고,상기 연령 정보 추론 모듈은,발화자의 발화 속도가 느리고 각 음정들의 발화 속도가 일정하지 않고 묵음이 부적절한 위치에 길게 삽입되고 초성 및 종성의 발음이 비정상적이고 모음의 연장 수행력이 낮고 전체적인 말 속도 및 조음 속도가 느릴수록 연령이 높은 것으로 판단하고, 더 긴 MPT(maximum phonation time)를 보이고 음절의 반복 속도 및 규칙성을 검사하는 AMR(alternating motion rate) 및 SMR(sequential motion rate)이 빠를수록 연령이 낮은 것으로 판단하며, 성인 여성의 경우 높은 음성 장애 지수를 보이고 보컬 피치(vocal pitch)가 떨어지고 성대 진동의 변화율을 나타내는 지터(jitter) 및 음성 파형의 규칙성을 나타내는 시머(simmer)에 있어서 진동 파형의 규칙성은 증가하지 않고 진동 변환율이 증가하고 발성의 안정성을 나타내는 잡음대 조파비가 증가할수록 연령이 높은 것으로 판단하고, 성인 남성의 경우 성대 진동의 변화율을 나타내는 지터(jitter) 및 음성 파형의 규칙성을 나타내는 시머(simmer)에 있어서 진동의 변화율 및 진동 파형의 규칙성이 증가할수록 연령이 높은 것으로 판단하고 보컬 피치가 낮을수록 40세 내지 50세의 구간의 연령인 것으로 판단하도록 구성되며,상기 성별 정보 추론 모듈은,최대 발성 지속 시간, 기본 주파수, 주파수 변동률, 진폭 변동률, 소음대 배음비, 평균 기본 주파수, 최대 기본 주파수 및 최소 기본 주파수의 차이를 분석하여 성별을 추론하고,상기 심리 상태 추론 모듈은,발화자의 발화 속도, 묵음 길이, 묵음 빈도수, 피치의 상대적 변화량을 기반으로 발화자의 외향성 및 내향성을 판단하고, 발화자의 뇌파/맥파 센싱 정보로부터 유쾌 또는 안정 중 어느 하나의 감성 상태를 판단하는 감성 추론 엔진에 의해 발화자의 감성, 성격, 심리 상태 또는 의도를 다면적으로 파악하도록 구성되며,상기 주변 음향 추론 모듈은,상기 음향 데이터베이스에 미리 저장된 차 소리, 사람 소리 및 비 소리를 상기 주변 음향과 대비하여 주변 음향을 추론하도록 구성되며,상기 진실/거짓 추론 모듈은,신고 접수자의 미리 정해진 질문에 대해 5초 동안 발화자의 대답을 저장하고, 저장된 발화자의 대답에 대해 신고 접수자의 동일한 패턴의 질문에 대한 미리 정해진 다수의 답변을 기준으로 상기 발화자의 대답이 진실인지 또는 거짓인지 판단하도록 구성되는 것을 특징으로 하는 음성/음향 분석 기반 상황 판단 시스템
|
3 |
3
발화자 이동 단말이 발화자의 음성 및 주변 음향을 송신하는 단계;상황 판단 서버가 상기 발화자 이동 단말로부터 발화자의 음성 및 주변 음향을 수신하는 단계;상기 상황 판단 서버가 상기 수신된 음성 및 주변 음향을 분석하여 상기 발화자의 연령 정보를 추론하는 단계;상기 상황 판단 서버가 상기 수신된 음성 및 주변 음향을 분석하여 상기 발화자의 성별 정보를 추론하는 단계;상기 상황 판단 서버가 상기 수신된 음성 및 주변 음향을 분석하여 상기 발화자의 심리 상태를 추론하는 단계;상기 상황 판단 서버가 음향 데이터베이스에 미리 정해진 주변 음향과 통화 수신 모듈에서 수신된 주변 음향을 상호 대비하여 주변 음향을 추론하는 단계;상기 상황 판단 서버가 상기 수신된 음성 및 주변 음향을 분석하여 상기 발화자의 진실/거짓을 추론하는 단계;사용자 단말이 상기 상황 판단 서버가 추론한 연령 정보, 성별 정보, 심리 상태 및 진실/거짓을 디스플레이하는 단계;상기 상황 판단 서버에서 상기 발화자 이동 단말로부터 발화자의 음성 및 주변 음향을 수신하는 경우, 상기 상황 판단 서버가 해당 통신사 서버를 통해 상기 발화자 이동 단말의 GPS(global positioning system) 기능을 턴온(turn-on)시키고 상기 발화자 이동 단말로부터 GPS 좌표를 실시간 수신하여 디스플레이하는 단계를 포함하고,상기 상황 판단 서버가 상기 수신된 음성 및 주변 음향을 분석하여 상기 발화자의 연령 정보를 추론하는 단계는,발화자의 발화 속도가 느리고 각 음정들의 발화 속도가 일정하지 않고 묵음이 부적절한 위치에 길게 삽입되고 초정 및 종송의 발음이 비정상적이고 모음의 연장 수행력이 낮고 전체적인 말 속도 및 조음 속도가 느릴수록 연령이 높은 것으로 판단하고, 더 긴 MPT(maximum phonation time)를 보이고 음절의 반복 속도 및 규칙성을 검사하는 AMR(alternating motion rate) 및 SMR(sequential motion rate)이 빠를수록 연령이 낮은 것으로 판단하며, 성인 여성의 경우 높은 음성 장애 지수를 보이고 보컬 피치(vocal pitch)가 떨어지고 성대 진동의 변화율을 나타내는 지터(jitter) 및 음성 파형의 규칙성을 나타내는 시머(simmer)에 있어서 진동 파형의 규칙성은 증가하지 않고 진동 변환율이 증가하고 발성의 안정성을 나타내는 잡음대 조파비가 증가할수록 연령이 높은 것으로 판단하고, 성인 남성의 경우 성대 진동의 변화율을 나타내는 지터(jitter) 및 음성 파형의 규칙성을 나타내는 시머(simmer)에 있어서 진동의 변화율 및 진동 파형의 규칙성이 증가할수록 연령이 높은 것으로 판단하고 보컬 피치가 낮을수록 40세 내지 50세의 구간의 연령인 것으로 판단하도록 구성되며,상기 상황 판단 서버가 상기 수신된 음성 및 주변 음향을 분석하여 상기 발화자의 성별 정보를 추론하는 단계는,최대 발성 지속 시간, 기본 주파수, 주파수 변동률, 진폭 변동률, 소음대 배음비, 평균 기본 주파수, 최대 기본 주파수 및 최소 기본 주파수의 차이를 분석하여 성별을 추론하고,상기 상황 판단 서버가 상기 수신된 음성 및 주변 음향을 분석하여 상기 발화자의 심리 상태를 추론하는 단계는,발화자의 발화 속도, 묵음 길이, 묵음 빈도수, 피치의 상대적 변화량을 기반으로 발화자의 외향성 및 내향성을 판단하고, 발화자의 뇌파/맥파 센싱 정보로부터 유쾌 또는 안정 중 어느 하나의 감성 상태를 판단하는 감성 추론 엔진에 의해 발화자의 감성, 성격, 심리 상태 또는 의도를 다면적으로 파악하도록 구성되며,상기 상황 판단 서버가 상기 수신된 음성 및 주변 음향을 분석하여 상기 발화자의 진실/거짓을 추론하는 단계는,신고 접수자의 미리 정해진 질문에 대해 5초 동안 발화자의 대답을 저장하고, 저장된 발화자의 대답에 대해 신고 접수자의 동일한 패턴의 질문에 대한 미리 정해진 다수의 답변을 기준으로 상기 발화자의 대답이 진실인지 또는 거짓인지 판단하도록 구성되는 것을 특징으로 하는 음성/음향 분석 기반 상황 판단 방법
|