맞춤기술찾기

이전대상기술

시계열 데이터 적응형 컨볼루션 기반 딥러닝 모델을 이용한 화자 인식 방법

  • 기술번호 : KST2023008105
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 시계열 데이터 적응형 컨볼루션 기반 딥러닝 모델을 이용한 화자 인식 방법이 개시된다. 일 실시예에 따른 화자 인식 시스템에 의해 수행되는 화자 인식 방법은, 음성 데이터를 시계열 적응형 컨볼루션 기반 딥러닝 모델에 입력받는 단계; 상기 시계열 적응형 컨볼루션 기반 딥러닝 모델을 이용하여 상기 음성 데이터로부터 각 시간 포인트에 대한 화자 임베딩을 추출하는 단계; 및 상기 추출된 각 시간 포인트에 대한 화자 임베딩을 통해 화자 정보를 인식하는 단계를 포함하고, 상기 시계열 적응형 컨볼루션 기반 딥러닝 모델은, 음성 데이터에 대한 시간 포인트마다 결정된 가중치를 음성 데이터와 컨볼루션을 진행하여 화자 임베딩이 추출되도록 학습된 것일 수 있다.
Int. CL G10L 17/02 (2013.01.01) G10L 17/08 (2013.01.01) G10L 17/04 (2013.01.01) G10L 15/04 (2006.01.01) G06N 3/08 (2023.01.01)
CPC G10L 17/02(2013.01) G10L 17/08(2013.01) G10L 17/04(2013.01) G10L 15/04(2013.01) G06N 3/08(2013.01)
출원번호/일자 1020220032079 (2022.03.15)
출원인 한국과학기술원
등록번호/일자
공개번호/일자 10-2023-0134818 (2023.09.22) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 공개
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2022.03.15)
심사청구항수 15

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국과학기술원 대한민국 대전광역시 유성구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 박용화 대전광역시 유성구
2 김성후 대전광역시 유성구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 양성보 대한민국 서울특별시 강남구 선릉로***길 ** (논현동) 삼성빌딩 *층(피앤티특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2022.03.15 수리 (Accepted) 1-1-2022-0278439-78
2 특허고객번호 정보변경(경정)신고서·정정신고서
2023.01.31 수리 (Accepted) 4-1-2023-5023571-05
3 특허고객번호 정보변경(경정)신고서·정정신고서
2023.05.04 수리 (Accepted) 4-1-2023-5110236-33
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
화자 인식 시스템에 의해 수행되는 화자 인식 방법에 있어서,음성 데이터를 시계열 적응형 컨볼루션 기반 딥러닝 모델에 입력받는 단계;상기 시계열 적응형 컨볼루션 기반 딥러닝 모델을 이용하여 상기 음성 데이터로부터 각 시간 포인트에 대한 화자 임베딩을 추출하는 단계; 및상기 추출된 각 시간 포인트에 대한 화자 임베딩을 통해 화자 정보를 인식하는 단계 를 포함하고, 상기 시계열 적응형 컨볼루션 기반 딥러닝 모델은,음성 데이터에 대한 시간 포인트마다 결정된 가중치를 음성 데이터와 컨볼루션을 진행하여 화자 임베딩이 추출되도록 학습된 것인, 화자 인식 방법
2 2
제1항에 있어서,상기 입력받는 단계는,1차원의 음성 신호로부터 각 시간 포인트에 대한 음성 특징을 추출하여 시간-특징의 2차원 이미지로 변환하는 단계를 포함하는 화자 인식 방법
3 3
제1항에 있어서,상기 각 시간 포인트에 대한 화자 임베딩을 추출하는 단계는,시계열 적응형 컨볼루션 기반 딥러닝 모델을 이용하여 상기 음성 데이터로부터 변환된 시간-특징의 2차원 이미지로부터 각 시간 포인트에 대한 화자 임베딩을 추출하는 단계를 포함하는 화자 인식 방법
4 4
제3항에 있어서,상기 각 시간 포인트에 대한 화자 임베딩을 추출하는 단계는,상기 추출된 각 시간 포인트에 대한 화자 임베딩을 이용하여 발화에 대한 화자 임베딩을 추출하는 단계를 포함하는 화자 인식 방법
5 5
제1항에 있어서,상기 화자 정보를 인식하는 단계는, 상기 추출된 각 시간 포인트에 대한 화자 임베딩을 이용하여 추출된 발화에 대한 화자 임베딩을 기 등록된 화자 임베딩 정보와의 유사도 비교를 통해 화자 정보를 인식하는 단계를 포함하는 화자 인식 방법
6 6
제4항에 있어서,상기 각 시간 포인트에 대한 화자 임베딩을 추출하는 단계는,음성 데이터에 대하여 가중치 결정 모델을 이용하여 각 시간 포인트마다의 컨볼루션의 가중치를 결정하는 단계를 포함하고,상기 가중치 결정 모델은, 음성 데이터 셋을 이용하여 컨볼루션의 가중치가 결정되도록 학습된 것인, 화자 인식 방법
7 7
제6항에 있어서,상기 각 시간 포인트에 대한 화자 임베딩을 추출하는 단계는,상기 결정된 각 시간 포인트마다의 컨볼루션의 가중치를 이용하여 음성 데이터와 컨볼루션하여 각 시간 포인트에 대한 화자 임베딩 특징을 추출하는 단계를 포함하는 화자 인식 방법
8 8
제7항에 있어서,상기 각 시간 포인트에 대한 화자 임베딩을 추출하는 단계는,상기 각 시간 포인트에 대한 화자 임베딩 특징을 추출하는 과정을 기 설정된 횟수만큼 반복하는 단계 를 포함하는 화자 인식 방법
9 9
화자 인식 시스템에 의해 수행되는 화자 인식 방법을 실행시키기 위해 컴퓨터 판독 가능한 저장매체에 저장된 컴퓨터 프로그램에 있어서,음성 데이터를 시계열 적응형 컨볼루션 기반 딥러닝 모델에 입력받는 단계;상기 시계열 적응형 컨볼루션 기반 딥러닝 모델을 이용하여 상기 음성 데이터로부터 각 시간 포인트에 대한 화자 임베딩을 추출하는 단계; 및상기 추출된 각 시간 포인트에 대한 화자 임베딩을 통해 화자 정보를 인식하는 단계 를 포함하고, 상기 시계열 적응형 컨볼루션 기반 딥러닝 모델은,음성 데이터에 대한 시간 포인트마다 결정된 가중치를 음성 데이터와 컨볼루션을 진행하여 화자 임베딩이 추출되도록 학습된 것인, 컴퓨터 판독 가능한 저장매체에 저장된 컴퓨터 프로그램
10 10
화자 인식 시스템에 있어서, 메모리에 포함된 컴퓨터 판독가능한 명령들을 실행하도록 구성된 적어도 하나의 프로세서를 포함하고,상기 적어도 하나의 프로세서는,음성 데이터를 시계열 적응형 컨볼루션 기반 딥러닝 모델에 입력받고,상기 시계열 적응형 컨볼루션 기반 딥러닝 모델을 이용하여 상기 음성 데이터로부터 각 시간 포인트에 대한 화자 임베딩을 추출하고, 상기 추출된 각 시간 포인트에 대한 화자 임베딩을 통해 화자 정보를 인식하는 것을 포함하고, 상기 시계열 적응형 컨볼루션 기반 딥러닝 모델은,음성 데이터에 대한 시간 포인트마다 결정된 가중치를 음성 데이터와 컨볼루션을 진행하여 화자 임베딩이 추출되도록 학습된 것인, 화자 인식 시스템
11 11
제10항에 있어서,상기 프로세서는, 1차원의 음성 신호로부터 각 시간 포인트에 대한 음성 특징을 추출하여 시간-특징의 2차원 이미지로 변환하는것을 특징으로 하는 화자 인식 시스템
12 12
제10항에 있어서,상기 프로세서는, 시계열 적응형 컨볼루션 기반 딥러닝 모델을 이용하여 상기 음성 데이터로부터 변환된 시간-특징의 2차원 이미지로부터 각 시간 포인트에 대한 화자 임베딩을 추출하는 것을 특징으로 하는 화자 인식 시스템
13 13
제12항에 있어서,상기 프로세서는, 상기 추출된 각 시간 포인트에 대한 화자 임베딩을 이용하여 발화에 대한 화자 임베딩을 추출하는 것을 특징으로 하는 화자 인식 시스템
14 14
제10항에 있어서,상기 프로세서는, 상기 추출된 각 시간 포인트에 대한 화자 임베딩을 이용하여 추출된 발화에 대한 화자 임베딩을 기 등록된 화자 임베딩 정보와의 유사도 비교를 통해 화자 정보를 인식하는 것을 특징으로 하는 화자 인식 시스템
15 15
제13항에 있어서,상기 프로세서는, 음성 데이터에 대하여 가중치 결정 모델을 이용하여 각 시간 포인트마다의 컨볼루션의 가중치를 결정하고, 결정된 각 시간 포인트마다의 컨볼루션의 가중치를 이용하여 음성 데이터와 컨볼루션하여 각 시간 포인트에 대한 화자 임베딩 특징을 추출하고, 상기 각 시간 포인트에 대한 화자 임베딩 특징을 추출하는 과정을 기 설정된 횟수만큼 반복하는 것을 포함하고,상기 가중치 결정 모델은, 음성 데이터 셋을 이용하여 컨볼루션의 가중치가 결정되도록 학습된 것인, 화자 인식 시스템
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 산업통상자원부 한국과학기술원 산업기술혁신사업 (N02210053)(RCMS)해상 복합 발전 시스템 융합 설계 및 운영 지능화 고급트랙(2021년도)