1 |
1
오디오 신호(audio signal)로부터 햅틱 신호(haptic signal)를 생성하는 방법에 있어서,수신된 오디오 신호로부터 베이스(bass) 성분의 오디오 특성 정보와 트레블(treble) 성분의 오디오 특성 정보를 산출하는 단계;상기 베이스 성분의 오디오 특성 정보와 상기 트레블 성분의 오디오 특성 정보 각각에 대한 청각 주목도(auditory saliency)를 계산하는 단계; 및상기 베이스 성분의 오디오 특성 정보 및 상기 트레블 성분의 오디오 특성 정보에 각각 대응하는 청각 주목도와 상기 수신된 오디오 신호를 구성하는 음원(sound source)에 기반하여 햅틱 자극의 패턴을 결정하는 촉각 신호를 생성하는 단계를 포함하며,상기 오디오 특성 정보는, 상기 베이스 성분 및 상기 트레블 성분의 두 오디오 특성 정보에 각각 대응하는 각 주파수 대역의 오디오 신호를 기설정 스케일로 변환한 음고, 상기 각 주파수 대역의 전체 성분에 대한 진폭 또는 오디오 신호의 세기, 및 상기 각 주파수 대역의 오디오 신호의 에너지 크기의 정보를 포함하고,상기 청각 주목도를 계산하는 단계는, 상기 음고, 상기 세기 및 상기 에너지 크기 중 어느 하나에서 미리 정의되어 있거나, 상기 오디오 특성 정보로부터 산출되는 청각 주목도 가중치를 토대로 햅틱 장치의 진동의 변위 또는 주파수에 대응하는 상기 베이스 성분의 주파수 대역과 상기 트레블 성분의 주파수 대역에서의 청각 주목도를 각각 계산하는 오디오 기반 햅틱 신호 생성 방법
|
2 |
2
청구항 1에 있어서,상기 오디오 특성 정보는,상기 수신된 오디오 신호의 리듬(rhythm), 시간적 대비(temporal contrast), 가락(melody), 화성(harmony), 음색(timbre) 중 적어도 하나 이상의 정보를 더 포함하는 것을 특징으로 하는 오디오 기반 햅틱 신호 생성 방법
|
3 |
3
삭제
|
4 |
4
삭제
|
5 |
5
청구항 1에 있어서,상기 청각 주목도 가중치는 음향필터를 포함한 물리적 요소에 의해 결정되는 것을 특징으로 하는 오디오 기반 햅틱 신호 생성 방법
|
6 |
6
청구항 1에 있어서,상기 촉각 신호를 생성하는 단계는,상기 수신된 오디오 신호의 주파수를 변환(frequency conversion)하여 상기 촉각 신호를 생성하거나,상기 수신된 오디오 신호의 주파수 대역을 소정의 단위로 분할한 세부 주파수 대역별로 상기 세부 주파수 대역에 각각 대응되는 기준 진동 주파수를 토대로 상기 촉각 신호를 생성하는 것을 특징으로 하는 오디오 기반 햅틱 신호 생성 방법
|
7 |
7
청구항 6에 있어서,상기 촉각 신호를 생성하는 단계는,상기 베이스 성분의 오디오 특성 정보 및 상기 트레블 성분의 오디오 특성 정보에 각각 대응하는 청각 주목도에 따라 진폭을 결정함으로써, 상기 세부 주파수 대역에 대한 상기 기준 진동 주파수를 생성하는 것을 특징으로 하는 오디오 기반 햅틱 신호 생성 방법
|
8 |
8
청구항 7에 있어서,상기 촉각 신호를 생성하는 단계는,상기 기준 진동 주파수의 주파수 대역을 1KHz 이하의 낮은 진동 주파수 대역으로 변환하여 진동 신호를 생성하거나, 상기 세부 주파수 대역 별로 1KHz 이하의 기준 진동 주파수 하나씩을 대응시켜 상기 청각 주목도에 따른 기준 진동 주파수의 진폭 또는 주파수로 햅틱 신호를 생성하는 것을 특징으로 하는 오디오 기반 햅틱 신호 생성 방법
|
9 |
9
청구항 1에 있어서,상기 오디오 신호는,오디오 드라이버(audio driver)를 제어하는 운영 체제(Operating System)의 구성요소로부터 생성되는 것을 특징으로 하는 오디오 기반 햅틱 신호 생성 방법
|
10 |
10
청구항 1에 있어서,상기 촉각 신호를 생성하는 단계 이후에,상기 촉각 신호를 햅틱 자극을 발생시키는 장치에 전달하여 햅틱 자극을 발생시키는 단계를 더 포함하는 것을 특징으로 하는 오디오 기반 햅틱 신호 생성 방법
|
11 |
11
오디오 신호로부터 햅틱 신호를 생성하는 장치에 있어서,상기 오디오 신호를 수신하는 오디오 신호 수신부;상기 수신된 오디오 신호로부터 베이스(bass) 성분의 오디오 특성 정보와 트레블(treble) 성분의 오디오 특성 정보를 산출하는 오디오 특성 정보 산출부;상기 베이스 성분의 오디오 특성 정보와 상기 트레블 성분의 오디오 특성 정보 각각에 대한 청각 주목도를 계산하는 청각 주목도 산출부; 및상기 베이스 성분의 오디오 특성 정보 및 상기 트레블 성분의 오디오 특성 정보에 각각 대응하는 청각 주목도와 상기 수신된 오디오 신호를 구성하는 음원(sound source)에 기반하여 햅틱 자극의 패턴을 결정하는 촉각 신호를 생성하는 촉각 신호 산출부를 포함하며,상기 오디오 특성 정보는, 상기 베이스 성분 및 상기 트레블 성분의 두 오디오 특성 정보에 각각 대응하는 각 주파수 대역의 오디오 신호를 기설정 스케일로 변환한 음고, 상기 각 주파수 대역의 전체 성분에 대한 진폭 또는 오디오 신호의 세기, 및 상기 각 주파수 대역의 오디오 신호의 에너지 크기의 정보를 포함하며,상기 청각 주목도 산출부는, 상기 음고, 상기 세기 및 상기 에너지 크기 중 어느 하나에서 미리 정의되어 있거나, 상기 오디오 특성 정보로부터 산출되는 청각 주목도 가중치를 토대로 햅틱 장치의 진동의 변위 또는 주파수에 대응하는 상기 베이스 성분의 주파수 대역과 상기 트레블 성분의 주파수 대역에서의 청각 주목도를 각각 계산하는 오디오 기반 햅틱 신호 생성 장치
|
12 |
12
청구항 11에 있어서,상기 오디오 특성 정보는,상기 수신된 오디오 신호의 리듬, 시간적 대비, 가락, 화성, 음색 중 적어도 하나 이상의 정보를 더 포함하는 것을 특징으로 하는 오디오 기반 햅틱 신호 생성 장치
|
13 |
13
삭제
|
14 |
14
삭제
|
15 |
15
청구항 11에 있어서,상기 청각 주목도 가중치는 음향필터를 포함한 물리적 요소에 의해 결정되는 것을 특징으로 하는 오디오 기반 햅틱 신호 생성 장치
|
16 |
16
청구항 11에 있어서,상기 촉각 신호 산출부는,상기 수신된 오디오 신호의 주파수를 변환하여 상기 촉각 신호를 생성하거나, 상기 수신된 오디오 신호의 주파수 대역을 소정의 단위로 분할한 세부 주파수 대역별로 상기 세부 주파수 대역에 각각 대응되는 기준 진동 주파수를 생성하는 것을 특징으로 하는 오디오 기반 햅틱 신호 생성 장치
|
17 |
17
청구항 16에 있어서,상기 촉각 신호 산출부는,상기 베이스 성분의 오디오 특성 정보 및 상기 트레블 성분의 오디오 특성 정보에 각각 대응하는 청각 주목도에 따라 진폭을 결정함으로써, 상기 세부 주파수 대역에 대한 상기 기준 진동 주파수를 생성하는 것을 특징으로 하는 오디오 기반 햅틱 신호 생성 장치
|
18 |
18
청구항 17에 있어서,상기 촉각 신호 산출부는,상기 기준 진동 주파수의 주파수 대역을 1KHz 이하의 낮은 진동 주파수 대역으로 변환하여 진동 신호를 생성하거나, 상기 세부 주파수 대역 별로 1KHz 이하의 기준 진동 주파수 하나씩을 대응시켜 상기 청각 주목도에 따른 기준 진동 주파수의 진폭 또는 주파수로 햅틱 신호를 생성하는 것을 특징으로 하는 오디오 기반 햅틱 신호 생성 장치
|
19 |
19
청구항 11에 있어서,상기 오디오 신호는,오디오 드라이버를 제어하는 운영 체제의 구성요소로부터 생성되는 것을 특징으로 하는 오디오 기반 햅틱 신호 생성 장치
|
20 |
20
청구항 11에 있어서,상기 촉각 신호를 수신하여 햅틱 자극을 발생시키는 햅틱 자극 생성부를 더 포함하는 것을 특징으로 하는 오디오 기반 햅틱 신호 생성 장치
|