맞춤기술찾기

이전대상기술

깊이 정보를 이용한 가상 피아노 이벤트 장치 및 구현 방법

  • 기술번호 : KST2017002374
  • 담당센터 : 부산기술혁신센터
  • 전화번호 : 051-606-6561
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 깊이 카메라를 이용하여 가상의 피아노를 생성하고 이를 이용한 피아노 연주 수행 방법에 관한 것으로서, 더욱 상세하게는 협소한 공간의 제약 사항에 관계없이 깊이 카메라를 이용하여 깊이 정보를 분석함으로써 벽면과 책상 등의 평면체 또는 곡면체 등의 평구조부를 피아노 연주 기반체로 사용하는 기술에 관한 것이다. 본 발명에 따른 깊이 정보를 이용한 가상 피아노 이벤트 장치 및 구현 방법은 깊이 카메라를 연주자가 원하는 위치에 설치하고 벽면 또는 책상과 같은 평면체 또는 완만한 곡면체 등의 평구조부를 가상 피아노 연주 기반체로 하여 객체를 인식시키고 빔 프로젝터와 같은 영상 송출 모듈로 가상의 피아노 건반을 생성한 후, 평구조부에 투사된 피아노 건반의 특정 위치를 터치하면 깊이 카메라가 피아노 건반 터치를 인식하여 DB 모듈에 입력된 건반 및 음역 정보 중, 해당 음역을 추출하여 소리 출력용 스피커 모듈로 음역 신호를 출력하는 알고리듬이 순차적으로 적용되고 상기한 개별 모듈이 하나의 시스템으로 구성되는 것을 특징으로 한다.
Int. CL G10H 1/00 (2006.01) G06F 3/03 (2006.01) G06F 3/00 (2006.01)
CPC G10H 1/00(2013.01) G10H 1/00(2013.01) G10H 1/00(2013.01)
출원번호/일자 1020150083938 (2015.06.15)
출원인 동의대학교 산학협력단
등록번호/일자
공개번호/일자 10-2016-0147334 (2016.12.23) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2015.06.15)
심사청구항수 4

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 동의대학교 산학협력단 대한민국 부산광역시 부산진구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 권순각 대한민국 부산광역시 부산진구
2 김태준 대한민국 부산광역시 영도구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 정병홍 대한민국 대전광역시 서구 청사로 ***(둔산동,매그놀리아) 매그놀리아 ***호(베스티안특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 동의대학교 산학협력단 대한민국 부산광역시 부산진구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2015.06.15 수리 (Accepted) 1-1-2015-0572242-68
2 [출원서등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2015.06.23 수리 (Accepted) 1-1-2015-0606345-04
3 [출원서등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2015.10.01 수리 (Accepted) 1-1-2015-0949950-17
4 선행기술조사의뢰서
Request for Prior Art Search
2016.02.12 수리 (Accepted) 9-1-9999-9999999-89
5 선행기술조사보고서
Report of Prior Art Search
2016.04.11 수리 (Accepted) 9-1-2016-0016742-87
6 의견제출통지서
Notification of reason for refusal
2016.04.29 발송처리완료 (Completion of Transmission) 9-5-2016-0316773-33
7 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2016.06.29 수리 (Accepted) 1-1-2016-0631927-87
8 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2016.06.29 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2016-0631933-51
9 거절결정서
Decision to Refuse a Patent
2016.11.28 발송처리완료 (Completion of Transmission) 9-5-2016-0854072-10
10 [명세서등 보정]보정서(재심사)
Amendment to Description, etc(Reexamination)
2017.01.04 보정승인 (Acceptance of amendment) 1-1-2017-0012597-40
11 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2017.01.04 수리 (Accepted) 1-1-2017-0012526-19
12 의견제출통지서
Notification of reason for refusal
2017.02.09 발송처리완료 (Completion of Transmission) 9-5-2017-0100435-07
13 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2017.04.10 수리 (Accepted) 1-1-2017-0350324-32
14 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2017.04.10 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2017-0350326-23
15 등록결정서
Decision to Grant Registration
2017.08.30 발송처리완료 (Completion of Transmission) 9-5-2017-0607871-92
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
삭제
2 2
삭제
3 3
삭제
4 4
삭제
5 5
삭제
6 6
삭제
7 7
카메라의 깊이 정보를 이용한 가상 피아노 이벤트 구현 방법에 있어서, 깊이 카메라 촬영 및 깊이 영상 데이터 획득을 수행할 가상 피아노 연주 기반체인 평면체 또는 완만한 곡면체의 평구조부를 선정하고 깊이 영상 촬영을 시작하는 단계(S100); 상기 S100 단계에서 선정된 평구조부에 가상 피아노 건반 영상을 투사하여 생성하는 단계(S200); 상기 S200 단계가 완료되면 평구조부에 투사 및 생성된 가상 피아노 건반 영상에서 가상 연주 영역 배경 데이터를 추출하는 단계(S210); 상기 S200 단계에서 상기 투사 및 생성된 가상 피아노 건반 영상과 가상 피아노 연주자 손 사이의 변위에 대한 깊이 정보를 취득하기 위하여 깊이 카메라로 가상 피아노 연주자의 손을 인식하는 객체 인식 단계(S300); 가상 피아노 연주자의 손가락이 가상 피아노 건반 영상의 흑건 및 백건 영역에 접근할 때, 깊이 카메라가 가상 피아노 연주자 손가락의 단위 시간(T)당 이동거리(S)를 인식하여 이 때의 속도(V1)를 산출하면 정지 속도 영점(V0)과의 차이로부터 수식(6)과 같이 가상 피아노 연주자 손가락의 가속도(A)를 연산할 수 있으므로 타건 강도를 산출할 수 있고 이를 음향 강도와 연계하여 출력음의 크기를 조절하는 단계; 수식(6) 상기 S300 단계에서 객체 인식 완료된 가상 피아노 연주자 손이 가상 피아노 건반 영상의 흑건(black key) 또는 백건(white key) 중 어느 위치를 터치하였는지 깊이 카메라로 타건 위치를 검출하는 단계(S400); 상기 S400 단계에서 검출된 타건 위치를 깊이 정보로 변환하는 단계(S500); 상기 S500 단계에서 깊이 정보로 변환 처리된 타건 위치와 DB 모듈 상에 내재된 음계/음역 데이터를 확인 및 일치시키는 과정인, 음계/음역 데이터 동기화 단계(S510); 상기 S510 단계에서 타건 위치에 대한 깊이 정보와 음계/음역 데이터가 동기화 된 코드(code)를 DB 모듈에 전송하는 단계(S600); 상기 S600 단계에서 전송된 코드를 DB 모듈 상에 내재된 해당 전자음으로 선택 및 추출하는 단계(S610); 상기 S610 단계에서 추출된 전자음을 소리 출력용 스피커 모듈로 전송하는 단계(S700)로 구성되는 것을 특징으로 하는 깊이 정보를 이용한 가상 피아노 이벤트 구현 방법
8 8
제 7 항에 있어서, 빔 프로젝터 영상 송출 모듈로부터 평구조부에 투사된 흑건 및 백건의 형상은 가상 피아노 연주자가 실제로 피아노를 연주하는 느낌을 구현하기 위하여 실제 목재식 또는 전자식 피아노 건반과 동일한 형상 및 크기로 영상 출력되는 것을 특징으로 하는 깊이 정보를 이용한 가상 피아노 이벤트 구현 방법
9 9
제 8 항에 있어서, 상기 빔 프로젝터 영상 송출 모듈은 어린이 혹은 편수자가 타건을 위한 행동 반경을 최소화하기 위한 목적으로 흑건 및 백건을 원형의 형상으로 조정하여 영상 출력하는 기능을 내재하는 것을 특징으로 하는 깊이 정보를 이용한 가상 피아노 이벤트 구현 방법
10 10
제 7 항에 있어서, 가상 피아노의 흑건 및 백건을 타건할 시 음의 높낮이를 조절하기 위하여 가상 피아노의 흑건 및 백건을 타건하는 가상 피아노 연주자의 손가락 움직임을 깊이 카메라로 촬영하고 이 때의 속도를 분석하여 음향 강도를 결정하는 알고리듬이 적용되는 것을 특징으로 하는 깊이 정보를 이용한 가상 피아노 이벤트 구현 방법
11 11
삭제
12 12
삭제
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 산업통상자원부-중소기업청 동의대학교 산학협력단 산학연협력 첫걸음 기술개발사업 차세대 관제시스템을 위한 깊이 정보 기반의 터치스크린 기술(중소기업산학협력센터)