| 1 |
1
프로세서에 의해 수행되는 고 품질의 오디오 신호를 생성하기 위한 적대적 생성 신경망(Generative Adversarial Network) 기반의 오디오 신호 생성 모델에 있어서,외부의 입력으로 오디오 신호를 생성하는 생성자;상기 생성된 오디오 신호를 하모닉 성분 신호와 퍼커시브 성분 신호로 분리하는 하모닉-퍼커시브 분리 모델; 및상기 하모닉 성분 신호와 상기 퍼커시브 성분 신호 각각의 참/거짓을 판별하는 적어도 하나의 판별자를 포함하는,적대적 생성 신경망 기반의 오디오 신호 생성 모델
|
| 2 |
2
청구항 1에 있어서, 상기 적어도 하나의 판별자는 상기 하모닉 성분 신호의 참/거짓을 판별하는 제1 판별자와 상기 퍼커시브 성분 신호의 참/거짓을 판별하는 제2 판별자를 포함하는,적대적 생성 신경망 기반의 오디오 신호 생성 모델
|
| 3 |
3
청구항 2에 있어서, 상기 제1 판별자 및 상기 제2 판별자는 합성곱 신경망(Convolutional Neural Network, CNN)으로 구성되며,상기 제1 판별자의 수용장(Receptive Field)이 상기 제2 판별자의 수용장 보다 더 큰 것을 특징으로 하는,적대적 생성 신경망 기반의 오디오 신호 생성 모델
|
| 4 |
4
청구항 1에 있어서,상기 생성자 및 상기 적어도 하나의 판별자는 손실함수의 오차 역전파가 허용되는 것을 특징으로 하는,적대적 생성 신경망 기반의 오디오 신호 생성 모델
|
| 5 |
5
청구항 1에 있어서, 상기 하모닉-퍼커시브 분리 모델은,상기 생성된 오디오 신호를 스펙트로그램으로 변환시켜 주는 국소 푸리에 변환 모델;상기 스펙트로그램에 하모닉 성분과 퍼커시브 성분 각각을 마스킹하는 하모닉 마스킹 모델과 퍼커시브 마스킹 모델; 및상기 마스킹된 스펙트로그램을 오디오 신호로 변환시켜주는 역 국소 푸리에 변환 모델을 더 포함하는 것을 특징으로 하는,적대적 생성 신경망 기반의 오디오 신호 생성 모델
|
| 6 |
6
프로세서에 의해서 실행되는 적대적 생성 신경망(Generative Adversarial Network) 기반의 오디오 신호 생성 모델의 학습 방법에 있어서,생성자가 오디오 신호를 생성하는 단계(a);하모닉-퍼커시브 분리 모델을 이용하여 상기 생성된 오디오 신호를 하모닉 성분 신호와 퍼커시브 성분 신호로 분리하는 단계(b); 및적어도 하나의 판별자가 상기 하모닉 성분 신호와 상기 퍼커시브 성분 신호 각각의 참/거짓을 판별하는 단계(c)를 포함하고,상기 단계(a) 내지 상기 단계(c)의 과정이 반복적으로 수행되어 상기 생성자 및 상기 판별자가 오차역전파(Backward propagation) 방식으로 학습되는 것을 특징으로 하는,학습 방법
|
| 7 |
7
청구항 6에 있어서,상기 적어도 하나의 판별자는 상기 하모닉 성분 신호의 참/거짓을 판별하는 제1 판별자와 상기 퍼커시브 성분 신호의 참/거짓을 판별하는 제2 판별자를 포함하는,학습 방법
|
| 8 |
8
적대적 생성 신경망 (Generative Adversarial Network)을 이용하여 오디오 신호를 생성하는 장치로서,하나 이상의 명령들이 저장된 메모리(memory) 및상기 메모리에 저장된 하나 이상의 명령을 실행하는 프로세서를 포함하고,상기 하나 이상의 명령들은 프로세서가:하모닉 성분 신호를 추출한 데이터 및 퍼커시브 성분 신호를 추출한 데이터를 이용하여 학습된 적어도 하나의 판별자를 활용하여 실제 오디오 신호와 생성자가 생성한 신호를 비교하여 상기 생성자를 학습시키는 단계; 및상기 학습된 생성자를 활용하여 오디오 신호를 생성하는 단계를 수행하도록 하는,오디오 신호 생성 장치
|
| 9 |
9
청구항 8에 있어서,상기 적어도 하나의 판별자는 제1 판별자와 제2 판별자를 포함하고,상기 제1 판별자는 하모닉 성분 신호를 추출한 데이터를 이용하여 학습되고, 상기 제2 판별자는 퍼커시브 성분 신호를 추출한 데이터를 이용하여 학습된 것을 특징으로 하는,오디오 신호 생성 장치
|
| 10 |
10
청구항 9에 있어서,상기 제1 판별자 및 상기 제2 판별자는 합성곱 신경망(Convolutional Neural Network, CNN)으로 구성되며,상기 제1 판별자의 수용장(Receptive Field)이 상기 제2 판별자의 수용장 보다 더 큰 것을 특징으로 하는,오디오 신호 생성 장치
|
| 11 |
11
청구항 8에 있어서,상기 생성자 및 상기 적어도 하나의 판별자는 손실함수의 오차 역전파가 허용되는 것을 특징으로 하는,오디오 신호 생성 장치
|
