| 1 |
1
영상 디스플레이;사용자 얼굴의 2차원 영상을 입력하는 2차원 영상 입력 모듈;사용자 얼굴의 3차원 깊이 영상을 입력하는 3차원 깊이 영상 입력 모듈;상기 2차원 영상 및 상기 3차원 깊이 영상을 칼리브레이션(calibration)하는 2차원 영상 및 3차원 영상 칼리브레이션 모듈;상기 2차원 영상으로부터 사용자의 얼굴을 검출하는 2차원 영상 얼굴 검출 모듈;상기 검출된 사용자 얼굴의 깊이 정보를 이용한 쓰레드홀딩(thresholding)기법과, 상기 검출된 사용자 얼굴의 2차원 텍스쳐(texture) 정보를 이용하여 코, 눈, 귀 등의 각 콤포넌트(component)의 ROI(range of motion:관심영역)를 설정하는 얼굴 콤포넌트 ROI 설정 모듈;상기 3차원 깊이 정보를 이용하여 사용자 머리 자세(head pose)를 인식하는 머리 자세 인식 모듈;상기 머리 자세에 따른 가상 음원 위치를 정합하는 가상 음원 위치 정합 모듈; 및상기 정합된 가상 음원 위치에 따라 헤드폰을 통하여 3차원 음향을 재생하는 3차원 음향 재생 모듈을 포함하는 머리 위치에 따른 3차원 음향 구현장치
|
| 2 |
2
제 1항에 있어서,상기 2차원 영상 및 3차원 영상 칼리브레이션 모듈은;상기 영상 디스플레이와 연동하여 적응적으로 상기 2차원 영상 및 3차원 영상을 칼리브레이션하는 것을 특징으로 하는 머리 위치에 따른 3차원 음향 구현장치
|
| 3 |
3
제 1항에 있어서,상기 가상 음원 위치 정합 모듈은;상기 머리 자세에 따른 가상 음원 위치를 정한 뒤 각각의 임펄스 응답함수를 가지고 있으며 머리 자세에 따라 적응적으로 각각의 임펄스 응답함수를 바꿔서 음원의 위치를 머리 자세에 따라 정합하여 주는 것을 특징으로 하는 머리 위치에 따른 3차원 음향 구현장치
|
| 4 |
4
제 3항에 있어서,상기 3차원 음향 재생 모듈은;적응적으로 바뀐 임펄스 응답함수와 컨벌루션을 적용하여 실제 헤드폰에서 들을 수 있는 3D 음향 신호를 합성해 주는 것을 특징으로 하는 머리 위치에 따른 3차원 음향 구현장치
|
| 5 |
5
제 1항에 있어서,상기 3차원 음향 재생 모듈은;상기 인식된 사용자의 머리 자세에 따라 적응적으로 HRTF(Head Related Transfer Function:머리 연관 전달 함수)를 바꿔서 3차원 음향을 합성해 주는 것을 특징으로 하는 머리 위치에 따른 3차원 음향 구현장치
|
| 6 |
6
사용자 얼굴의 2차원 영상을 입력하는 2차원 영상 입력 단계;사용자 얼굴의 3차원 깊이 영상을 입력하는 3차원 깊이 영상 입력 단계;상기 2차원 영상 및 상기 3차원 깊이 영상을 칼리브레이션(calibration)하는 2차원 영상 및 3차원 영상 칼리브레이션 단계;상기 2차원 영상으로부터 사용자의 얼굴을 검출하는 2차원 영상 얼굴 검출 단계;상기 검출된 사용자 얼굴의 깊이 정보를 이용한 쓰레드홀딩(thresholding)기법과, 상기 검출된 사용자 얼굴의 2차원 텍스쳐(texture) 정보를 이용하여 코, 눈, 귀 등의 각 콤포넌트(component)의 ROI(range of motion:관심영역)를 설정하는 얼굴 콤포넌트 ROI 설정 단계;상기 3차원 깊이 정보를 이용하여 사용자 머리 자세(head pose)를 인식하는 머리 자세 인식 단계;상기 머리 자세에 따른 가상 음원 위치를 정합하는 가상 음원 위치 정합 단계; 및상기 정합된 가상 음원 위치에 따라 헤드폰을 통하여 3차원 음향을 재생하는 3차원 음향 재생 단계을 포함하는 머리 위치에 따른 3차원 음향 구현방법
|
| 7 |
7
제 6항에 있어서,상기 2차원 영상 및 3차원 영상 칼리브레이션 단계는;상기 영상 디스플레이와 연동하여 적응적으로 상기 2차원 영상 및 3차원 영상을 칼리브레이션하는 것을 특징으로 하는 머리 위치에 따른 3차원 음향 구현방법
|
| 8 |
8
제 6항에 있어서,상기 가상 음원 위치 정합 단계는;상기 머리 자세에 따른 가상 음원 위치를 정한 뒤 각각의 임펄스 응답함수를 가지고 있으며 머리 자세에 따라 적응적으로 각각의 임펄스 응답함수를 바꿔서 음원의 위치를 머리 자세에 따라 정합하여 주는 것을 특징으로 하는 머리 위치에 따른 3차원 음향 구현방법
|
| 9 |
9
제 8항에 있어서,상기 3차원 음향 재생 단계는;적응적으로 바뀐 임펄스 응답함수와 컨벌루션을 적용하여 실제 헤드폰에서 들을 수 있는 3D 음향 신호를 합성해 주는 것을 특징으로 하는 머리 위치에 따른 3차원 음향 구현방법
|
| 10 |
10
제 6항에 있어서,상기 3차원 음향 재생 단계는;상기 인식된 사용자의 머리 자세에 따라 적응적으로 HRTF(Head Related Transfer Function:머리 연관 전달 함수)를 바꿔서 3차원 음향을 합성해 주는 것을 특징으로 하는 머리 위치에 따른 3차원 음향 구현방법
|
