1 |
1
악보 영상을 이진화 전처리하는 전처리부;상기 전처리된 악보 영상에서 오선 정보를 추출하는 오선정보 추출부; 및상기 전처리된 악보 영상에서 잠재적인 가사영역을 설정하되, 구역 분할영역과 실행길이를 찾아 필터링하고, 후보 경계정보를 찾아 가사 영역을 추출하는 가사 라인 추출부;를 포함하며,상기 전처리부는 입력되는 악보영상을 이진화 처리하는 이진화 모듈; 및상기 이진화 처리결과, 오선과 마디선 정보를 이용하여 악보영상의 왜곡을 보정하도록 하는 보정모듈;을 포함하며,상기 보정모듈은 오선을 검출한 후, 악보 마디의 오선 특성을 이용하여 마디를 검출하고, 오선영역을 마디선 정보를 이용하여 마디와 마디 사이의 각 지역영역으로 나눈 후, 영역단위로 수평이 되도록 영역을 재배치하여 왜곡을 보정하는 것을 특징으로 하는 촬영된 음악 악보 영상의 자동연주를 위한 가사 영역 추출장치
|
2 |
2
삭제
|
3 |
3
제 1 항에 있어서,상기 오선정보 추출부는,오선을 감지하는 오선감지모듈; 및상기 오선의 공간과 높이정보를 평가하는 오선정보 추출모듈;을 포함하는 것을 특징으로 하는 촬영된 음악 악보 영상의 자동연주를 위한 가사 영역 추출장치
|
4 |
4
제 1 항에 있어서,상기 가사 라인 추출부는,오선과 오선 사이 영역을 잠재적인 가사영역으로 설정하는 가사영역 설정모듈;상기 가사영역 설정모듈을 통해 설정되는 잠재적인 가사영역을 N구역들로 분할하는 구역 분할모듈;상기 구역 분할모듈을 통해 분할된 구역에서 0이 아닌 연속적인 실행길이를 찾기 위해 수직 투영을 하되, 실행길이 사이의 공간이 오선 높이보다 작거나 같을 때, 실행길이를 하나의 구역으로 합하도록 하는 실행길이 탐색모듈;상기 전처리부의 이진화 처리 후 노이즈가 있는 경우, 후보 경계를 수정하여 추출하는 후보 경계정보 추출모듈;상기 후보 경계정보 추출모듈의 후보 경계를 필터링하는 후보 경계필터링 모듈; 및 상기 후보 경계필터링 모듈을 통해 필터링된 결과, 가사영역과 악보영역을 O 또는 I로 표시하도록 하는 가사영역 추출모듈; 을 포함하는 것을 특징으로 하는 촬영된 음악 악보 영상의 자동연주를 위한 가사 영역 추출장치
|
5 |
5
촬영된 음악 악보 영상의 자동연주를 위한 가사 영역 추출장치를 이용한 방법에 있어서,(a) 상기 가사 영역 추출장치의 제어부가 악보 영상을 전처리하도록 하는 단계;(b) 상기 제어부가 전처리된 악보 영상에서 오선 정보를 추출하도록 하는 단계; 및(c) 상기 제어부가 전처리된 악보 영상에서 잠재적인 가사영역을 설정하되, 구역 분할영역과 실행길이를 찾아 필터링하고, 후보 경계정보를 찾아 가사 영역을 추출하도록 하는 단계;를 포함하며,상기 제 (a) 단계는 (a-1) 상기 제어부가 입력되는 악보영상을 이진화 처리하도록 하는 단계; 및 (a-2) 상기 제어부가 이진화 처리결과, 오선과 마디선 정보를 이용하여 악보영상의 왜곡을 보정하도록 하는 단계;를 포함하며,상기 제 (a-2) 단계는 상기 제어부가 오선을 검출한 후, 악보 마디의 오선 특성을 이용하여 마디를 검출하고, 오선영역을 마디선 정보를 이용하여 마디와 마디 사이의 각 지역영역으로 나눈 후, 영역단위로 수평이 되도록 영역을 재배치하여 왜곡을 보정하도록 하는 것을 특징으로 하는 가사 영역 추출방법
|
6 |
6
삭제
|
7 |
7
제 5 항에 있어서,상기 제 (b) 단계는,(b-1) 상기 제어부가 오선을 감지하도록 하는 단계; 및(b-2) 상기 제어부가 오선의 공간과 높이정보를 평가하여 오선 정보를 추출하도록 하는 단계;를 포함하는 것을 특징으로 하는 가사 영역 추출방법
|
8 |
8
제 5 항에 있어서,상기 제 (c) 단계는,(c-1) 상기 제어부가 오선과 오선 사이 영역을 잠재적인 가사영역으로 설정하도록 하는 단계;(c-2) 상기 제어부가 설정되는 잠재적인 가사영역을 N구역들로 분할하도록 하는 단계;(c-3) 상기 제어부가 분할된 구역에서 0이 아닌 연속적인 실행길이를 찾기 위해 수직 투영을 하되, 실행길이 사이의 공간이 오선 높이보다 작거나 같을 때, 실행길이를 하나의 구역으로 합하도록 하는 단계;(c-4) 상기 제어부가 상기 제 (a) 단계의 전처리 과정 이후 노이즈가 있는 경우, 후보 경계를 수정하여 추출하도록 하는 단계;(c-5) 상기 제어부가 상기 제 (c-4) 단계의 후보 경계를 필터링하도록 하는 단계; 및(c-6) 상기 제어부가 상기 제 (c-5) 단계의 필터링 결과, 가사영역과 악보영역을 O 또는 I로 표시하도록 하는 단계;를 포함하는 것을 특징으로 하는 가사 영역 추출방법
|