1 |
1
제1 사용자에 대한 제1 영상 데이터 및 제1 음성 데이터를 획득하고, 제2 사용자에 대한 제2 영상 데이터 및 제2 음성 데이터를 획득하도록 구성된 입력 장치;상기 제1 영상 데이터를 기반으로 상기 제1 음성 데이터를 학습하여 커널 데이터를 생성하는 학습 모듈 및 상기 제2 영상 데이터를 기반으로 상기 제2 음성 데이터를 추론하여 추론 결과 데이터를 출력하는 추론 모듈을 포함하는 프로세서;상기 커널 데이터를 환경 카테고리에 따라 저장하도록 구성된 메모리; 및상기 추론 결과 데이터를 기반으로 피드백 신호를 출력하도록 구성된 출력 장치를 포함하되,상기 학습 모듈은 상기 제1 영상 데이터를 기반으로 상기 제1 사용자에 대한 제1 환경 정보를 획득하고, 상기 제1 환경 정보를 기반으로 상기 제1 음성 데이터에 대한 학습을 수행하고, 상기 추론 모듈은 상기 제2 영상 데이터를 기반으로 상기 제2 사용자에 대한 제2 환경 정보를 획득하고, 상기 메모리부터 상기 제2 환경 정보에 대응하는 대응 커널 데이터를 선택하고, 상기 대응 커널 데이터를 기반으로 상기 제2 음성 데이터에 대한 연산을 수행하는 음성 인식 장치
|
2 |
2
제1 항에 있어서,상기 입력 장치는:상기 제1 영상 데이터 및 상기 제2 영상 데이터를 획득하는 카메라; 및상기 제1 음성 데이터 및 상기 제2 음성 데이터를 획득하는 마이크를 포함하고,상기 학습 모듈 및 상기 추론 모듈은 상기 마이크에 대한 마이크 정보를 검색하여 상기 마이크 정보를 상기 제1 환경 정보 및 상기 제2 환경 정보에 포함시키는 음성 인식 장치
|
3 |
3
제1 항에 있어서,상기 학습 모듈은:상기 제1 영상 데이터로부터 상기 제1 사용자의 신체적 특징들 및 상기 제1 사용자가 존재하는 공간의 특징들을 검출하고,상기 신체적 특징들 및 상기 공간의 특징들 중에서 검출 정확도가 기준 값 보다 낮은 특징들에 대해 상기 제1 사용자에게 질의하는 제1 질의 데이터를 출력하고, 및상기 제1 질의 데이터에 응답하여 수신된 제1 응답 데이터를 기반으로 상기 제1 환경 정보를 보완하는 음성 인식 장치
|
4 |
4
제3 항에 있어서,상기 학습 모듈은:상기 제1 음성 데이터에 상기 제1 환경 정보를 태깅하여 최종 음성 데이터를 생성하고,상기 제1 환경 정보를 기반으로 제1 환경 카테고리를 결정하고, 및상기 최종 음성 데이터를 상기 제1 환경 카테고리에 따라 분류하여 음성 데이터베이스를 생성하는 음성 인식 장치
|
5 |
5
제4 항에 있어서,상기 학습 모듈은:딥러닝을 기반으로 상기 제1 환경 카테고리에 따라 상기 음성 데이터베이스를 학습하여 상기 커널 데이터를 생성하고, 및상기 커널 데이터를 상기 제1 환경 카테고리에 따라 상기 메모리에 저장하여 커널 데이터베이스를 구축하는 음성 인식 장치
|
6 |
6
제1 항에 있어서,상기 추론 모듈은:상기 제2 영상 데이터로부터 상기 제2 사용자의 신체적 특징들 및 상기 제2 사용자가 존재하는 공간의 특징들을 검출하고,상기 신체적 특징들 및 상기 공간의 특징들 중에서 검출 정확도가 기준 값 보다 낮은 특징들에 대해 상기 제2 사용자에게 질의하는 제2 질의 데이터를 출력하고, 및상기 제2 질의 데이터에 응답하여 수신된 제2 응답 데이터를 기반으로 상기 제2 환경 정보를 보완하는 음성 인식 장치
|
7 |
7
제6 항에 있어서,상기 추론 모듈은 상기 제2 환경 정보를 기반으로 제2 환경 카테고리를 결정하고, 상기 학습 모듈에 상기 제2 환경 카테고리에 대한 정보를 제공하고,상기 학습 모듈은 상기 커널 데이터 중에서 상기 제2 환경 카테고리에 대응되는 대응 커널 데이터를 선택하여 상기 추론 모듈에 제공하는 음성 인식 장치
|
8 |
8
제7 항에 있어서,상기 추론 모듈은:상기 제2 환경 정보를 기반으로 상기 제2 음성 데이터 및 상기 대응 커널 데이터를 보정하여 보정된 음성 데이터 및 보정된 커널 데이터를 생성하는 음성 인식 장치
|
9 |
9
제8 항에 있어서,상기 추론 모듈은:딥러닝을 기반으로 상기 보정된 음성 데이터 및 상기 보정된 커널 데이터 간의 연산을 수행하고, 및상기 연산의 결과 값을 포함하는 상기 추론 결과 데이터를 기반으로 상기 제2 사용자의 요구 사항을 분석하는 음성 인식 장치
|
10 |
10
제1 항에 있어서,상기 출력 장치는:상기 추론 결과 데이터를 상기 제2 사용자에게 영상으로 전달하는 상기 피드백 신호를 출력하는 디스플레이; 및상기 추론 결과 데이터를 상기 제2 사용자에게 음성으로 전달하는 상기 피드백 신호를 출력하는 스피커를 포함하는 음성 인식 장치
|
11 |
11
음성 인식 장치의 음성 데이터 학습 방법에 있어서,카메라로부터 영상 데이터를 수신하는 단계;마이크로부터 음성 데이터를 수신하는 단계;상기 마이크로부터 마이크 정보를 획득하는 단계;상기 영상 데이터를 기반으로 사용자에 대한 환경 정보를 획득하는 단계; 상기 환경 정보 및 상기 마이크 정보를 기반으로 상기 음성 데이터를 분류하여 환경 카테고리에 따른 음성 데이터베이스를 생성하는 단계;상기 음성 데이터베이스를 학습하여 커널 데이터를 생성하는 단계; 및상기 커널 데이터를 상기 환경 카테고리별로 저장하여 커널 데이터베이스를 생성하는 단계를 포함하는 음성 데이터 학습 방법
|
12 |
12
제11 항에 있어서,상기 환경 정보를 획득하는 단계는:상기 영상 데이터로부터 상기 사용자를 특정하기 위한 위치 정보를 획득하는 단계; 및상기 영상 데이터 및 상기 위치 정보를 기반으로 상기 사용자의 신체적 특징들 및 상기 사용자가 존재하는 공간의 특징들을 검출하는 단계를 더 포함하는 음성 데이터 학습 방법
|
13 |
13
제12 항에 있어서,상기 환경 정보를 획득하는 단계는:상기 신체적 특징들 및 상기 공간의 특징들 중에서 검출 정확도가 기준 값 보다 낮은 특징들에 대해 상기 사용자에게 질의하는 질의 데이터를 출력하는 단계;상기 질의 데이터에 대한 응답 데이터를 수신하는 단계; 및상기 응답 데이터를 기반으로 상기 환경 정보를 보완하여 보완 환경 정보를 생성하는 단계를 더 포함하는 음성 데이터 학습 방법
|
14 |
14
제13 항에 있어서,상기 음성 데이터베이스를 생성하는 단계는:상기 음성 데이터에 상기 환경 정보 및 상기 마이크 정보를 태깅하여 최종 음성 데이터를 생성하는 단계;상기 환경 정보 및 상기 마이크 정보를 기반으로 상기 환경 카테고리를 결정하는 단계; 및상기 최종 음성 데이터를 상기 환경 카테고리에 따라 분류하여 상기 음성 데이터베이스를 생성하는 단계를 더 포함하는 음성 데이터 학습 방법
|
15 |
15
제14 항에 있어서,상기 커널 데이터를 생성하는 단계는:딥러닝 알고리즘을 사용하여 상기 환경 카테고리별로 상기 음성 데이터베이스를 학습하는 단계; 및상기 음성 데이터베이스에 대한 학습을 통해 음성 추론에 사용되는 상기 커널 데이터를 생성하는 단계를 더 포함하는 음성 데이터 학습 방법
|
16 |
16
음성 인식 장치의 음성 데이터 추론 방법에 있어서,카메라로부터 영상 데이터를 수신하는 단계;마이크로부터 음성 데이터를 수신하는 단계;상기 마이크로부터 마이크 정보를 획득하는 단계;상기 영상 데이터를 기반으로 사용자에 대한 환경 정보를 획득하는 단계; 상기 환경 정보 및 상기 마이크 정보를 기반으로, 기 저장된 환경 카테고리에 따른 커널 데이터베이스에서 대응 커널 데이터를 선택하는 단계; 상기 환경 정보를 기반으로 상기 음성 데이터 및 상기 대응 커널 데이터를 보정하는 단계;보정된 커널 데이터를 기반으로 보정된 음성 데이터를 연산하여 추론 결과 데이터를 생성하는 단계; 및상기 추론 결과 데이터를 기반으로 피드백 신호를 생성하는 단계를 포함하는 음성 데이터 추론 방법
|
17 |
17
제16 항에 있어서,상기 환경 정보를 획득하는 단계는:상기 영상 데이터로부터 상기 사용자의 신체적 특징들 및 상기 사용자가 존재하는 공간의 특징들을 검출하는 단계;상기 신체적 특징들 및 상기 공간의 특징들 중에서 검출 정확도가 기준 값 보다 낮은 특징들에 대해 상기 사용자에게 질의하는 질의 데이터를 출력하는 단계;상기 질의 데이터에 대한 응답 데이터를 수신하는 단계; 및상기 응답 데이터를 기반으로 상기 환경 정보를 보완하는 단계를 더 포함하는 음성 데이터 추론 방법
|
18 |
18
제17 항에 있어서,상기 대응 커널 데이터를 선택하는 단계는:상기 환경 정보 및 상기 마이크 정보를 기반으로 환경 카테고리를 결정하는 단계; 및상기 커널 데이터베이스에서 상기 결정된 환경 카테고리에 대응되는 커널 데이터인 상기 대응 커널 데이터를 선택하는 단계를 더 포함하는 음성 데이터 추론 방법
|
19 |
19
제18 항에 있어서,상기 음성 데이터 및 상기 대응 커널 데이터를 보정하는 단계는:상기 결정된 환경 카테고리와 상기 기 저장된 환경 카테고리가 일치하지 않을 때, 상기 환경 정보 및 상기 마이크 정보를 기반으로 상기 음성 데이터 및 상기 대응 커널 데이터를 보정하여 상기 보정된 음성 데이터 및 상기 보정된 커널 데이터를 생성하는 단계를 더 포함하는 음성 데이터 추론 방법
|
20 |
20
제19 항에 있어서,상기 추론 결과 데이터를 생성하는 단계는:딥러닝 알고리즘을 사용하여 상기 보정된 음성 데이터 및 상기 보정된 커널 데이터 간의 연산을 수행하는 단계; 및상기 연산의 결과 값을 포함하는 상기 추론 결과 데이터를 기반으로 상기 사용자의 요구 사항을 분석하는 단계를 더 포함하는 음성 데이터 추론 방법
|