| 1 |
1
미디 음악을 편곡하기 위한 장치에 있어서, 카메라장치를 통해 사용자의 제스처를 촬영한 제스처 영상을 수신하는 통신부; 미디 음악의 복수의 트랙에 대응하는 악기 이미지를 시각화한 가상 영상을 영사하는 영사부; 상기 제스처 영상의 3차원 좌표를 상기 가상 영상의 3차원 좌표로 변환한 후, 변환된 3차원 좌표에 따라 사용자의 제스처를 인식하는 제스처인식부; 및 상기 미디 음악을 재생하는 중 상기 인식된 사용자의 제스처에 따라 상기 미디 음악의 복수의 트랙을 편곡하는 가상편곡부;를 포함하는 것을 특징으로 하는 미디 음악을 편곡하기 위한 장치
|
| 2 |
2
제1항에 있어서, 상기 가상 영상은 가상의 무대와, 상기 가상의 무대에 배치되며, 상기 미디 음악의 복수의 트랙 각각에 대응하는 복수의 트랙 이미지와, 상기 미디 음악의 복수의 트랙 전체에 대응하는 전체 트랙 이미지와, 상기 가상의 무대의 테두리에 배치되는 버튼 이미지를 포함하며, 상기 트랙 이미지는 상기 트랙을 연주하는 악기를 나타내는 악기 이미지, 상기 트랙을 재생하는 볼륨의 크기를 나타내는 볼륨 이미지 및 상기 트랙이 선택되었는지 여부를 나타내는 선택 이미지를 포함하는 것을 특징으로 하는 미디 음악을 편곡하기 위한 장치
|
| 3 |
3
제2항에 있어서, 상기 제스처인식부가 상기 복수의 트랙 이미지 및 상기 전체 트랙 이미지 중 적어도 하나의 트랙을 선택하거나, 선택 해제하는 상기 사용자의 제스처를 인식하면, 상기 가상편곡부는 상기 인식된 사용자의 제스처에 따라 적어도 하나의 트랙을 선택하거나, 선택 해제하는 것을 특징으로 하는 미디 음악을 편곡하기 위한 장치
|
| 4 |
4
제2항에 있어서, 상기 제스처인식부가 지휘 제스처의 궤적의 방향이 변경되는 변곡점인 비트포인트의 수를 인식하면, 상기 가상편곡부는 상기 비트포인트의 수에 따라 상기 재생 중인 미디 음악의 박자를 변경하는 것을 특징으로 하는 미디 음악을 편곡하기 위한 장치
|
| 5 |
5
제2항에 있어서, 상기 제스처인식부가 한 번의 지휘 제스처가 완성되는 데에 소요되는 시간을 통해 지휘 제스처의 속도를 산출하면, 상기 가상편곡부는 상기 산출된 속도에 따라 상기 재생 중인 미디 음악의 템포를 변경하여 재생하는 것을 특징으로 하는 미디 음악을 편곡하기 위한 장치
|
| 6 |
6
제2항에 있어서, 상기 제스처인식부가 한 번의 지휘 제스처를 이루는 궤적의 총 길이를 N, 상기 궤적 상의 지점을 x, 지점 x에서의 제스처 속도를 s(x)라 할 때, 지휘 제스처의 궤적 중 비트포인트에서의 속도와 비트포인트 이외의 구간의 속도의 차이 D를 수학식을 통해 산출하면, 상기 가상편곡부는 산출된 속도의 차이에 따라 상기 재생 중인 미디 음악의 연주법을 변경하여 재생하는 것을 특징으로 하는 미디 음악을 편곡하기 위한 장치
|
| 7 |
7
제2항에 있어서, 상기 제스처인식부가 한 번의 지휘 제스처에서 인식되는 복수의 비트포인트 중 2 이상의 비트포인트 간의 거리를 통해 지휘 제스처의 크기를 산출하면, 상기 가상편곡부는 산출된 크기에 따라 상기 재생 중인 미디 음악의 볼륨을 변경하여 재생하는 것을 특징으로 하는 미디 음악을 편곡하기 위한 장치
|
| 8 |
8
제1항에 있어서, 복수의 악기 이미지를 저장하는 저장부를 더 포함하며, 상기 가상편곡부는 상기 미디 음악에서 복수의 트랙 각각에 대한 악기 정보를 추출하고, 상기 저장부에 복수의 악기 이미지 중 상기 미디 음악의 각 트랙의 악기 정보에 대응하는 악기 이미지가 존재하는지 여부를 판단하고, 상기 트랙의 악기 정보에 대응하는 악기 이미지가 존재하면, 상기 대응하는 악기 이미지를 선택하고, 상기 트랙의 악기 정보에 대응하는 악기 이미지가 존재하지 않으면, 해당 트랙을 재생하여 재생된 오디오 신호와 상기 저장부에 저장된 복수의 악기 이미지에 대응하는 가상 악기의 오디오 신호를 비교하여 오디오 신호의 유사도가 가장 높은 가상 악기의 악기 이미지를 선택하고, 선택된 악기 이미지를 이용하여 복수의 트랙을 시각화하여 상기 가상 영상을 생성하는 것을 특징으로 하는 미디 음악을 편곡하기 위한 장치
|
| 9 |
9
미디 음악을 편곡하기 위한 방법에 있어서, 미디 음악의 복수의 트랙에 대응하는 악기 이미지를 시각화한 가상 영상을 생성하고, 생성된 가상 영상을 영사하는 단계; 상기 미디 음악을 재생하는 단계; 카메라장치를 통해 사용자의 제스처를 촬영한 제스처 영상을 수신하는 단계; 및 상기 제스처 영상의 3차원 좌표를 상기 가상 영상의 3차원 좌표로 변환한 후, 변환된 3차원 좌표에 따라 사용자의 제스처를 인식하고, 상기 인식된 사용자의 제스처에 따라 상기 미디 음악을 편곡하는 단계;를 포함하는 것을 특징으로 하는 미디 음악을 편곡하기 위한 방법
|
| 10 |
10
제9항에 있어서, 상기 미디 음악을 편곡하는 단계는 지휘 제스처의 궤적의 방향이 변경되는 변곡점인 비트포인트의 수를 인식하면, 상기 비트포인트의 수에 따라 상기 재생 중인 미디 음악의 박자를 변경하는 것을 특징으로 하는 미디 음악을 편곡하기 위한 방법
|
| 11 |
11
제9항에 있어서, 상기 미디 음악을 편곡하는 단계는 한 번의 지휘 제스처가 완성되는 데에 소요되는 시간을 통해 지휘 제스처의 속도를 산출하면, 상기 산출된 속도에 따라 상기 재생 중인 미디 음악의 템포를 변경하여 재생하는 것을 특징으로 하는 미디 음악을 편곡하기 위한 방법
|
| 12 |
12
제9항에 있어서, 상기 미디 음악을 편곡하는 단계는 한 번의 지휘 제스처를 이루는 궤적의 총 길이를 N, 상기 궤적 상의 지점을 x, 지점 x에서의 제스처 속도를 s(x)라 할 때, 지휘 제스처의 궤적 중 비트포인트에서의 속도와 비트포인트 이외의 구간의 속도의 차이 D를 수학식을 통해 산출하면, 산출된 속도의 차이에 따라 상기 재생 중인 미디 음악의 연주법을 변경하여 재생하는 것을 특징으로 하는 미디 음악을 편곡하기 위한 방법
|
| 13 |
13
제9항에 있어서, 상기 미디 음악을 편곡하는 단계는 한 번의 지휘 제스처에서 인식되는 복수의 비트포인트 중 2 이상의 비트포인트 간의 거리를 통해 지휘 제스처의 크기를 산출하면, 산출된 크기에 따라 상기 재생 중인 미디 음악의 볼륨을 변경하여 재생하는 것을 특징으로 하는 미디 음악을 편곡하기 위한 방법
|
| 14 |
14
제9항에 있어서, 상기 가상 영상을 영사하는 단계는 상기 미디 음악에서 복수의 트랙 각각에 대한 악기 정보를 추출하는 단계; 기 저장된 복수의 악기 이미지 중 상기 미디 음악의 각 트랙의 악기 정보에 대응하는 악기 이미지가 존재하는지 여부를 판단하는 단계; 상기 판단 결과, 상기 트랙의 악기 정보에 대응하는 악기 이미지가 존재하면, 상기 대응하는 악기 이미지를 선택하고, 상기 판단 결과, 상기 트랙의 악기 정보에 대응하는 악기 이미지가 존재하지 않으면, 해당 트랙을 재생하여 재생된 오디오 신호와 기 저장된 복수의 악기 이미지에 대응하는 가상 악기의 오디오 신호를 비교하여 오디오 신호의 유사도가 가장 높은 가상 악기의 악기 이미지를 선택하는 단계; 상기 선택된 악기 이미지를 이용하여 복수의 트랙을 시각화하여 상기 가상 영상을 생성하는 단계;를 포함하는 것을 특징으로 하는 미디 음악을 편곡하기 위한 방법
|
| 15 |
15
미디 음악을 편곡하기 위한 방법을 수행하는 프로그램이 기록된 컴퓨터 판독 가능한 기록매체에 있어서, 미디 음악의 복수의 트랙에 대응하는 악기 이미지를 시각화한 가상 영상을 생성하고, 생성된 가상 영상을 영사하는 단계; 상기 미디 음악을 재생하는 단계; 카메라장치를 통해 사용자의 제스처를 촬영한 제스처 영상을 수신하는 단계; 및 상기 제스처 영상의 3차원 좌표를 상기 가상 영상의 3차원 좌표로 변환한 후, 변환된 3차원 좌표에 따라 사용자의 제스처를 인식하고, 상기 인식된 사용자의 제스처에 따라 상기 미디 음악을 편곡하는 단계;를 포함하는 것을 특징으로 하는 미디 음악을 편곡하기 위한 방법을 수행하는 프로그램이 기록된 컴퓨터 판독 가능한 기록매체
|
