맞춤기술찾기

이전대상기술

캘리브레이션 보정을 이용하여 E2E 음성 인식 모델을 생성하는 음성 인식 모델 생성 방법 및 장치

  • 기술번호 : KST2023005965
  • 담당센터 : 서울서부기술혁신센터
  • 전화번호 : 02-6124-6930
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 일 실시예에 따른 캘리브레이션 보정을 이용하여 E2E 음성 인식 모델을 생성하는 음성 인식 모델 생성 장치는, 음성 정보를 입력 정보로 하고, 상기 음성 정보에 대해 대응되는 제1텍스트 정보를 출력 정보로 하는 제1인공신경망 모듈을 포함하는 음향 모델(Acoustic Model), 상기 제1텍스트 정보를 입력 정보로 하고, 언어 모델의 특징에 기초하여 상기 제1텍스트 정보에 대응 되는 제2텍스트 정보를 출력 정보로 출력하는 제2인공신경망 모듈을 포함하는 언어 모델(Language Model) 및 상기 음향 모델이 출력하는 상기 음향 모델의 제1확률 분포 정보 및 상기 언어 모델이 출력하는 상기 언어 모델의 제2확률 분포를 기초로 결합 확률 분포를 생성하고, 상기 결합 확률 분포를 기초로 E2E(End-to-End) 음성 모델을 생성하는 E2E 음성 모델 생성부를 포함하고, 상기 E2E 음성 모델 생성부는, 상기 음향 모델 및 상기 언어 모델에 대해 각각 캘리브레이션을 진행한 후, 보정된 상기 음향 모델 및 상기 언어 모델에 기초하여 상기 E2E 음성 모델을 생성할 수 있다.
Int. CL G10L 15/14 (2006.01.01) G10L 15/183 (2013.01.01) G10L 15/06 (2006.01.01) G10L 21/02 (2006.01.01)
CPC G10L 15/14(2013.01) G10L 15/183(2013.01) G10L 15/063(2013.01) G10L 21/02(2013.01)
출원번호/일자 1020210185933 (2021.12.23)
출원인 한양대학교 산학협력단
등록번호/일자
공개번호/일자 10-2023-0096450 (2023.06.30) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 공개
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2021.12.23)
심사청구항수 10

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한양대학교 산학협력단 대한민국 서울특별시 성동구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 장준혁 서울특별시 성동구
2 이문학 서울특별시 성동구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 해움특허법인 대한민국 서울특별시 강남구 테헤란로 *** ,동관 ****호 ****호, ****호, ****호 (역삼동, 한신인터밸리**빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2021.12.23 수리 (Accepted) 1-1-2021-1492585-89
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
음성 정보를 입력 정보로 하고, 상기 음성 정보에 대해 대응되는 제1텍스트 정보를 출력 정보로 하는 제1인공신경망 모듈을 포함하는 음향 모델(Acoustic Model);상기 제1텍스트 정보를 입력 정보로 하고, 언어 모델의 특징에 기초하여 상기 제1텍스트 정보에 대응 되는 제2텍스트 정보를 출력 정보로 출력하는 제2인공신경망 모듈을 포함하는 언어 모델(Language Model); 및상기 음향 모델이 출력하는 상기 음향 모델의 제1확률 분포 정보 및 상기 언어 모델이 출력하는 상기 언어 모델의 제2확률 분포 정보를 기초로 결 확률 분포를 생성하고, 상기 결합 확률 분포를 기초로 E2E(End-to-End) 음성 모델을 생성하는 E2E 음성 모델 생성부;를 포함하고,상기 E2E 음성 모델 생성부는,상기 음향 모델 및 상기 언어 모델에 대해 각각 캘리브레이션을 진행한 후, 보정된 상기 음향 모델 및 상기 언어 모델에 기초하여 상기 E2E 음성 모델을 생성하는 캘리브레이션 보정을 이용하여 E2E 음성 인식 모델을 생성하는 음성 인식 모델 생성 장치
2 2
제 1항에 있어서,상기 E2E 음성 모델 생성부는,상기 제1확률 분포 정보에 대해 캘리브레이션을 수행하여 제1보정 파라미터를 생성한 후, 상기 제1보정 파라미터를 기초로 상기 결합 확률 분포를 생성하는,캘리브레이션 보정을 이용하여 E2E 음성 인식 모델을 생성하는 음성 인식 모델 생성 장치
3 3
제1항에 있어서,상기 E2E 음성 모델 생성부는,상기 제2확률 분포 정보에 대해 캘리브레이션을 수행하여 제2보정 파라미터)를 생성한 후, 상기 제2보정 파라미터를 기초로 상기 결합 확률 분포를 생성하는,캘리브레이션 보정을 이용하여 E2E 음성 인식 모델을 생성하는 음성 인식 모델 생성 장치
4 4
제 2항에 있어서,상기 E2E 음성 모델 생성부는,상기 제1확률 분포 정보에 대응되는 레퍼런스 데이터인 제1밸리데이션 세트(validation set)를 기초로 상기 제1확률 분포 정보에 대해 캘리브레이션을 진행하여 상기 제1보정 파라미터를 생성하는,캘리브레이션 보정을 이용하여 E2E 음성 인식 모델을 생성하는 음성 인식 모델 생성 장치
5 5
제 3항에 있어서,상기 E2E 음성 모델 생성부는,상기 제2확률 분포 정보에 대응되는 레퍼런스 데이터인 제2밸리데이션 세트(validation set)를 기초로 상기 제2확률 분포 정보에 대해 캘리브레이션을 진행하여 상기 제2보정 파라미터를 생성하는,캘리브레이션 보정을 이용하여 E2E 음성 인식 모델을 생성하는 음성 인식 모델 생성 장치
6 6
제1항에 있어서,상기 E2E 음성 모델 생성부는,상기 캘리브레이션을 진행하기 전에, 상기 음향 모델에 대해서는 상기 제1텍스트 정보에 대응되는 제1학습 세트(train set)를 기초로 상기 음향 모델의 손실 함수를 최소화하는 방향으로 학습을 수행하는, 캘리브레이션 보정을 이용하여 E2E 음성 인식 모델을 생성하는 음성 인식 모델 생성 장치
7 7
제6항에 있어서,상기 E2E 음성 모델 생성부는,상기 캘리브레이션을 진행하기 전에, 상기 음향 모델에 대해서는 상기 제2텍스트 정보에 대응되는 제2학습 세트(train set)를 기초로 상기 음향 모델의 손실 함수를 최소화하는 방향으로 학습을 수행하는, 캘리브레이션 보정을 이용하여 E2E 음성 인식 모델을 생성하는 음성 인식 모델 생성 장치
8 8
음성 정보를 입력 정보로 하고, 상기 음성 정보에 대해 대응되는 제1텍스트 정보를 출력 정보로 하는 제1인공신경망 모듈을 포함하는 음향 모델(Acoustic Model)을 이용하여 상기 음향 모델의 제1확률 분포 정보를 출력하는 단계;상기 제1텍스트 정보를 입력 정보로 하고, 언어 모델의 특징에 기초하여 상기 제1텍스트 정보에 대응 되는 제2텍스트 정보를 출력 정보로 출력하는 제2인공신경망 모듈을 포함하는 언어 모델(Language Model)를 이용하여 상기 언어 모델의 제2확률 분포 정보를 출력하는 단계;상기 제1확률 분포 정보 및 상기 제2확률 분포 정보를 기초로 결합 확률 분포를 생성하고, 상기 결합 확률 분포를 기초로 E2E(End-to-End) 모델을 생성하는 E2E 모델 음성 생성 단계를 포함하고,상기 E2E 음성 모델 생성 단계는, 상기 음향 모델 및 상기 언어 모델에 대해 각각 캘리브레이션을 진행한 후, 보정된 상기 음향 모델 및 상기 언어 모델에 기초하여 상기 E2E 음성 모델을 생성하는 단계를 포함하는, 캘리브레이션 보정을 이용하여 E2E 음성 인식 모델을 생성하는 음성 인식 모델 생성 방법
9 9
제 8항에 있어서,상기 E2E 모델 생성 단계는, 상기 제1확률 분포 정보에 대해 캘리브레이션을 수행하여 제1보정 파라미터(scaling parameter)를 생성한 후, 상기 제1보정 파라미터를 기초로 상기 결합 확률 분포를 생성하는 단계; 및상기 제2확률 분포 정보에 대해 캘리브레이션을 수행하여 제2보정 파라미터(scaling parameter)를 생성한 후, 상기 제2보정 파라미터를 기초로 상기 결합 확률 분포를 생성하는 단계;를 포함하는, 캘리브레이션 보정을 이용하여 E2E 음성 인식 모델을 생성하는 음성 인식 모델 생성 방법
10 10
제 9항에 있어서,상기 E2E 모델 생성 단계는, 상기 제1확률 분포 정보에 대응되는 레퍼런스 데이터인 제1밸리데이션 세트(validation set)를 기초로 상기 제1확률 분포 정보에 대해 캘리브레이션을 진행하여 상기 제1보정 파라미터를 생성하는 단계; 및상기 제2확률 분포 정보에 대응되는 레퍼런스 데이터인 제2밸리데이션 세트(validation set)를 기초로 상기 제2확률 분포 정보에 대해 캘리브레이션을 진행하여 상기 제2보정 파라미터를 생성하는 단계;를 포함하는,캘리브레이션 보정을 이용하여 E2E 음성 인식 모델을 생성하는 음성 인식 모델 생성 방법
지정국 정보가 없습니다
순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - 패밀리정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 US20230206901 US 미국 FAMILY

DOCDB 패밀리 정보

순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - DOCDB 패밀리 정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 US2023206901 US 미국 DOCDBFAMILY
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 과학기술정보통신부 한양대학교산학협력단 SW컴퓨팅산업원천기술개발(R&D,정보화) 원격 다자간 영상회의에서의 음성 품질 고도화 기술개발