맞춤기술찾기

이전대상기술

배음 구조 및 성김 구조 제약조건을 이용한 화성악기와 타악기 소리의 분리 방법

  • 기술번호 : KST2019011553
  • 담당센터 : 서울동부기술혁신센터
  • 전화번호 : 02-2155-3662
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 배음 구조 및 성김 구조 제약조건을 이용한 화성악기와 타악기 소리의 분리 방법에 관한 것으로서, 보다 구체적으로는 (1) 오디오 신호를 스펙트로그램(spectrogram)으로 변환하는 단계; (2) 비음수 행렬 분해 알고리즘을 이용하여, 상기 변환된 스펙트로그램을 시간 축 기저 및 주파수 축 기저를 나타내는 행렬들의 곱으로 분석하되, 화성악기 소리에 대한 기저가 배음 구조 및 성김 구조를 갖도록 학습하고, 타악기 소리에 대한 기저가 비성김 구조를 갖도록 학습하는 단계; 및 (3) 상기 단계 (2)에서 학습된 화성악기 소리에 대한 기저와 타악기 소리에 대한 기저를 각각 분리하여 오디오 신호로 역변환하는 단계를 포함하는 것을 그 구성상의 특징으로 한다.본 발명에서 제안하고 있는 배음 구조 및 성김 구조 제약조건을 이용한 화성악기와 타악기 소리의 분리 방법에 따르면, 비음수 행렬 분해 알고리즘을 이용해 화성악기 소리에 대한 기저가 배음 구조 및 성김 구조를 갖도록 학습하고, 타악기 소리에 대한 기저가 비성김 구조를 갖도록 학습하여, 화성악기와 타악기 소리에 대한 기저를 각각 오디오 신호로 역변환 함으로써, 화성악기 소리에 대한 시간적인 연속성을 가정하지 않으므로, 목소리나 변주도 화성악기 소리로 성공적으로 분류할 수 있다.
Int. CL G10L 21/0272 (2013.01.01)
CPC G10L 21/0272(2013.01) G10L 21/0272(2013.01) G10L 21/0272(2013.01)
출원번호/일자 1020140182749 (2014.12.17)
출원인 서울대학교산학협력단
등록번호/일자 10-1621718-0000 (2016.05.11)
공개번호/일자
공고번호/일자 (20160517) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2014.12.17)
심사청구항수 7

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 서울대학교산학협력단 대한민국 서울특별시 관악구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 박정수 대한민국 서울특별시 관악구
2 이교구 대한민국 서울특별시 강남구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 김건우 대한민국 서울특별시 금천구 가산디지털*로 ***, 에이동 ***호 특허그룹덕원 (가산동, 우림 라이온스밸리)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 서울대학교산학협력단 서울특별시 관악구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2014.12.17 수리 (Accepted) 1-1-2014-1229264-05
2 [출원서등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2014.12.19 수리 (Accepted) 1-1-2014-1236743-27
3 직권정정안내서
Notification of Ex officio Correction
2015.01.02 발송처리완료 (Completion of Transmission) 1-5-2015-0000031-19
4 출원인정보변경(경정)신고서
Notification of change of applicant's information
2015.03.17 수리 (Accepted) 4-1-2015-5033829-92
5 출원인정보변경(경정)신고서
Notification of change of applicant's information
2015.05.13 수리 (Accepted) 4-1-2015-5062924-01
6 의견제출통지서
Notification of reason for refusal
2016.01.08 발송처리완료 (Completion of Transmission) 9-5-2016-0020706-86
7 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2016.03.07 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2016-0220992-16
8 등록결정서
Decision to grant
2016.04.29 발송처리완료 (Completion of Transmission) 9-5-2016-0316944-44
9 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.05.13 수리 (Accepted) 4-1-2019-5093546-10
10 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.05.23 수리 (Accepted) 4-1-2019-5101798-31
11 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.08.02 수리 (Accepted) 4-1-2019-5154561-59
12 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.11.25 수리 (Accepted) 4-1-2020-5265458-48
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
화성악기와 타악기 소리의 분리 방법으로서,(1) 오디오 신호를 스펙트로그램(spectrogram)으로 변환하는 단계;(2) 비음수 행렬 분해 알고리즘을 이용하여, 상기 변환된 스펙트로그램을 시간 축 기저 및 주파수 축 기저를 나타내는 행렬들의 곱으로 분석하되, 화성악기 소리에 대한 기저가 배음 구조 및 성김 구조를 갖도록 학습하고, 타악기 소리에 대한 기저가 비성김 구조를 갖도록 학습하는 단계; 및(3) 상기 단계 (2)에서 학습된 화성악기 소리에 대한 기저와 타악기 소리에 대한 기저를 각각 분리하여 오디오 신호로 역변환하는 단계를 포함하되,상기 단계 (2)에서는,디리클레 제약조건(Dirichlet constraint)을 이용하여, 상기 배음 구조, 성김 구조 및 비성김 구조에 대한 제약 조건을 갖도록 학습을 유도하는 것을 특징으로 하는, 배음 구조 및 성김 구조 제약조건을 이용한 화성악기와 타악기 소리의 분리 방법
2 2
삭제
3 3
제1항에 있어서, 상기 단계 (2)는,(2-1) 시간 축 기저 및 주파수 축 기저를 초기화하는 단계;(2-2) 시간 축 기저 및 주파수 축 기저를 학습하는 단계;(2-3) 주파수 축 기저들 중에 화성악기 소리에 대한 기저를 대상으로 배음 구조 및 성김 구조를 갖도록 변환하는 단계; 및(2-4) 상기 주파수 축 기저들 중에 타악기 소리에 대한 기저를 대상으로 비성김 구조를 갖도록 변환하는 단계를 포함하는 것을 특징으로 하는, 배음 구조 및 성김 구조 제약조건을 이용한 화성악기와 타악기 소리의 분리 방법
4 4
제3항에 있어서, 상기 단계 (2)에서는,상기 단계 (2-2) 내지 단계 (2-4)를 반복(iteration)하여, 상기 변환된 스펙트로그램을 시간 축 기저 및 주파수 축 기저를 나타내는 행렬들의 곱으로 분석하는 것을 특징으로 하는, 배음 구조 및 성김 구조 제약조건을 이용한 화성악기와 타악기 소리의 분리 방법
5 5
제3항에 있어서, 상기 단계 (2-3)은,(2-3-1) 주파수 축 기저들 중에 화성악기 소리에 대한 기저를 대상으로 배음 구조를 갖도록 변환하고, 변환 결과를 원본 기저에 가중합 하여 상기 화성악기 소리에 대한 기저가 배음 구조를 갖도록 학습하는 단계; 및(2-3-2) 주파수 축 기저들 중에 화성악기 소리에 대한 기저를 대상으로 성김 구조를 갖도록 변환하고, 변환 결과를 원본 기저에 가중합 하여 상기 화성악기 소리에 대한 기저가 성김 구조를 갖도록 학습하는 단계를 포함하는 것을 특징으로 하는, 배음 구조 및 성김 구조 제약조건을 이용한 화성악기와 타악기 소리의 분리 방법
6 6
제5항에 있어서, 상기 단계 (2-3-1)과 단계 (2-3-2) 사이에는,상기 단계 (2-3-1)을 거친 기저가 0보다 작으면 0으로 설정하는 단계를 더 포함하는 것을 특징으로 하는, 배음 구조 및 성김 구조 제약조건을 이용한 화성악기와 타악기 소리의 분리 방법
7 7
제3항에 있어서, 상기 단계 (2-4)는,주파수 축 기저들 중에 타악기 소리에 대한 기저를 대상으로 비성김 구조를 갖도록 변환하고, 변환 결과를 원본 기저에 가중합 하여 상기 타악기 소리에 대한 기저가 비성김 구조를 갖도록 학습하는 것을 특징으로 하는, 배음 구조 및 성김 구조 제약조건을 이용한 화성악기와 타악기 소리의 분리 방법
8 8
제1항에 있어서, 상기 단계 (3)은,(3-1) 상기 화성악기 소리에 대한 기저들과 타악기 소리에 대한 기저들을 이용해, 화성악기 소리와 타악기 소리에 대한 스펙트로그램을 각각 추정하는 단계; 및(3-2) 상기 단계 (3-1)에서 추정한 스펙트로그램을 오디오 신호로 역변환하여, 화성악기 소리와 타악기 소리를 각각 추정하는 단계를 포함하는 것을 특징으로 하는, 배음 구조 및 성김 구조 제약조건을 이용한 화성악기와 타악기 소리의 분리 방법
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 미래창조과학부 서울대학교 산학협력단 대학 IT 연구센터 육성지원사업(ITRC) 실감 오케스트라 서비스를 위한 입체음향 취득/재현 기술 개발