1 |
1
운동성 및 음성 분석을 통한 감정 변화를 모니터링하기 위한 장치에 있어서, 통신을 위한 통신부; 사용자의 소정의 공간을 지속적으로 촬영하여 관찰 영상을 생성하는 카메라부; 상기 공간 내의 음성을 지속적으로 수신하여 관찰 음성을 생성하는 오디오부; 상기 관찰 영상을 기초로 상기 사용자의 운동 패턴을 생성하고, 생성된 운동 패턴을 분석하는 운동성분석부; 상기 관찰 음성을 기초로 상기 사용자의 발화 패턴을 생성하고, 생성된 발화 패턴을 분석하는 발화분석부; 상기 운동 패턴 및 상기 발화 패턴을 기초로 상기 운동 패턴 및 상기 발화 패턴에 대응하는 사용자의 감정 상태가 학습된 신경망을 통해 상기 사용자의 감정 상태를 분석하는 감정분석부; 및 상기 분석된 감정 상태를 상기 통신부를 통해 보호자장치 및 원격진료장치로 전송하는 리포트부;를 포함하는 것을 특징으로 하는 모니터링하기 위한 장치
|
2 |
2
제1항에 있어서, 상기 운동성분석부는 상기 사용자의 일반적인 운동 패턴을 학습한 제1 신경망을 포함하며, 실시간으로 입력되는 관찰 영상에서 이미지 인식을 통해 상기 사용자가 식별되면, 식별된 사용자의 운동 패턴을 추출하고, 상기 제1 신경망을 통해 상기 학습된 운동 패턴과 상기 추출된 운동 패턴이 차이가 있는지 여부를 판별한 후, 상기 학습된 운동 패턴과 상기 추출된 운동 패턴이 차이가 있으면, 차이가 있는 운동 패턴과 함께 운동 패턴 이상 신호를 출력하는 것을 특징으로 하는 모니터링하기 위한 장치
|
3 |
3
제2항에 있어서, 상기 운동성분석부는 상기 공간을 복수의 단위 공간으로 구분하고, 상기 관찰 영상으로부터 단위 시간 별로 사용자의 상기 단위 공간 상의 위치를 추출하여 운동 패턴을 생성하는 것을 특징으로 하는 모니터링하기 위한 장치
|
4 |
4
제1항에 있어서, 상기 발화분석부는 상기 사용자의 일반적인 발화 패턴을 학습한 제2 신경망을 포함하며, 실시간으로 입력되는 관찰 음성에서 음성 인식을 통해 상기 사용자가 식별되면, 식별된 사용자의 발화 패턴을 추출하고, 상기 제1 신경망을 통해 상기 학습된 발화 패턴과 상기 추출된 발화 패턴이 차이가 있는지 여부를 판별한 후, 상기 학습된 발화 패턴과 상기 추출된 발화 패턴이 차이가 있으면, 차이가 있는 발화 패턴과 함께 발화 패턴 이상 신호를 출력하는 것을 특징으로 하는 모니터링하기 위한 장치
|
5 |
5
제1항에 있어서, 상기 발화분석부는 상기 관찰 음성으로부터 단위 시간 별로 발화 속도, 음성 신호의 톤 및 음성 신호의 피치 중 적어도 하나를 추출하여 발화 패턴을 생성하는 것을 특징으로 하는 모니터링하기 위한 장치
|
6 |
6
운동성 및 음성 분석을 통한 감정 변화를 모니터링하기 위한 장치에 있어서, 카메라부가 사용자의 소정의 공간을 지속적으로 촬영하여 관찰 영상을 생성하는 단계; 오디오부가 상기 공간 내의 음성을 지속적으로 수신하여 관찰 음성을 생성하는 단계; 운동성분석부가 상기 관찰 영상을 기초로 상기 사용자의 운동 패턴을 생성하고, 생성된 운동 패턴을 분석하는 단계; 발화분석부가 상기 관찰 음성을 기초로 상기 사용자의 발화 패턴을 생성하고, 생성된 발화 패턴을 분석하는 단계; 감정분석부가 상기 운동 패턴 및 상기 발화 패턴을 기초로 상기 운동 패턴 및 상기 발화 패턴에 대응하는 사용자의 감정 상태가 학습된 신경망을 통해 상기 사용자의 감정 상태를 분석하는 단계; 및 리포트부가 상기 분석된 감정 상태를 상기 통신부를 통해 보호자장치 및 원격진료장치로 전송하는 단계;를 포함하는 것을 특징으로 하는 모니터링하기 위한 방법
|
7 |
7
제6항에 있어서, 상기 운동 패턴을 분석하는 단계는 상기 운동성분석부가 실시간으로 입력되는 관찰 영상에서 이미지 인식을 통해 상기 사용자가 식별되면, 식별된 사용자의 운동 패턴을 추출하는 단계; 상기 운동성분석부가 상기 사용자의 일반적인 운동 패턴을 학습한 제1 신경망을 통해 상기 학습된 운동 패턴과 상기 추출된 운동 패턴이 차이가 있는지 여부를 판별하는 단계; 및 상기 운동성분석부가 상기 판별 결과, 상기 학습된 운동 패턴과 상기 추출된 운동 패턴이 차이가 있으면, 차이가 있는 운동 패턴과 함께 운동 패턴 이상 신호를 출력하는 단계;를 포함하는 것을 특징으로 하는 모니터링하기 위한 방법
|
8 |
8
제6항에 있어서, 상기 발화 패턴을 분석하는 단계는 상기 발화분석부가 실시간으로 입력되는 관찰 음성에서 음성 인식을 통해 상기 사용자가 식별되면, 식별된 사용자의 발화 패턴을 추출하는 단계; 상기 발화분석부가 상기 사용자의 일반적인 발화 패턴을 학습한 제2 신경망을 통해 상기 학습된 발화 패턴과 상기 추출된 발화 패턴이 차이가 있는지 여부를 판별하는 단계; 및 상기 발화분석부가 상기 학습된 발화 패턴과 상기 추출된 발화 패턴이 차이가 있으면, 차이가 있는 발화 패턴과 함께 발화 패턴 이상 신호를 출력하는 단계;를 포함하는 것을 특징으로 하는 모니터링하기 위한 방법
|