1 |
1
가상현실에서 씬(Scene)의 정보를 이용하여 가상 객체를 생성한 후, 가상 객체에 대한 색상 맵 및 깊이 맵을 생성하는 가상 환경 렌더링부;실제 환경의 정보를 이용하여 실제 객체에 대한 깊이 맵을 생성하는 깊이 렌더링부;상기 가상 환경 렌더링부로부터 수신된 상기 가상 객체에 대한 색상 맵 및 깊이 맵, 상기 깊이 렌더링부로부터 수신된 상기 실제 객체에 대한 깊이 맵 및 시스루 카메라로부터 수신된 상기 실제 객체에 대한 색상 맵을 이용하여 폐색 처리를 실행하는 폐색 처리부; 및상기 폐색 처리부로부터 수신된 상기 가상 객체의 색상 맵 및 시스루 카메라로부터 수신된 상기 실제 객체의 색상 맵을 이용하여 색상 이미지를 출력하는 디스플레이부를 포함하고,상기 깊이 렌더링부는상기 실제 환경의 실제 객체와 동일하게 모델링된 객체를 제공하는 실제 객체 모델 모듈;실제 환경을 스캔하여 실제 객체에 대한 포인트 클라우드 또는 메쉬 모델을 생성하는 환경 스캔 모듈;상기 실제 객체 모델 모듈로부터 수신된 실제 객체 모델 또는 환경 스캔 모듈로부터 수신된 메쉬 모델 또는 포인트 클라우드를 이용하여 깊이 레더링을 실행하여 깊이 맵을 생성하는 깊이 렌더링 모듈;상기 깊이 렌더링 모듈에서 깊이 렌더링을 통해 생성된 깊이 맵을 제공하는 깊이 맵 제공 모듈을 포함하는 것을 특징으로 하는 혼합현실 디스플레이 장치
|
2 |
2
제1항에 있어서,상기 가상 환경 렌더링부는가상 객체의 정보를 가지고 구성된 가상 환경을 제공하는 가상 환경 씬 모듈;가상 환경 씬 모듈에서 제공된 가상 객체에 대한 렌더링을 실행하여 렌더링 과정에서 가상 객체의 깊이 맵 및 색상 맵을 생성하는 렌더링 모듈;상기 렌더링 모듈에 의해 생성된 깊이 맵 및 색상 맵을 제공하는 색상/깊이 맵 제공 모듈을 포함하는 것을 특징으로 하는 혼합현실 디스플레이 장치
|
3 |
3
삭제
|
4 |
4
제1항에 있어서,상기 깊이 렌더링 모듈은상기 환경 스캔 모듈로부터 상기 포인트 클라우드가 수신되는 즉시 상기 포인트 클라우드 각각의 포인트를 픽셀과 매핑하여 깊이 맵을 생성하는 것을 특징으로 하는 혼합현실 디스플레이 장치
|
5 |
5
제1항에 있어서,상기 깊이 렌더링 모듈은상기 실제 객체 모델 모듈로부터 수신된 실제 객체와 동일하게 모델링한 객체를 사용하여 실제 환경과 동일한 씬을 구성하고, 상기 씬을 이용하여 깊이 맵을 생성하며, 상기 객체의 종류가 동적 객체인 경우 동적 객체의 위치 및 회전을 추적 및 예측하여 깊이 렌더링에서의 위치 및 회전을 동적으로 변경시키는혼합현실 디스플레이 장치
|
6 |
6
제1항에 있어서,상기 폐색 처리부는상기 실제 객체의 깊이 맵과 상기 가상 객체의 깊이 맵을 픽셀 단위로 비교하며 깊이가 상이한 픽셀이 존재하는지 여부를 확인하고, 상기 확인 결과 실제 객체의 깊이 맵 및 가상 객체의 깊이 맵 중 특정 픽셀의 깊이가 상이한 경우 깊이가 낮은 픽셀을 선택하고, 대응되는 객체의 색상 맵에서 해당 위치와 동일한 픽셀의 색상을 보여주는 것을 특징으로 하는 혼합현실 디스플레이 장치
|
7 |
7
제1항에 있어서,상기 폐색 처리부는상기 가상 환경 렌더링부로부터 수신된 상기 가상 객체에 대한 색상 맵 및 깊이 맵, 상기 깊이 렌더링부로부터 수신된 상기 실제 객체에 대한 깊이 맵 및 시스루 카메라로부터 수신된 상기 실제 객체에 대한 색상 맵을 이용하여 알파 맵을 생성하는 것을 특징으로 하는 혼합현실 디스플레이 장치
|
8 |
8
제7항에 있어서,상기 폐색 처리부로부터 수신된 상기 알파 맵에서 특정 픽셀의 형식이 마스크 형식이면 마스크 값에 따라 가상 객체의 색상 맵의 픽셀 또는 시스루 카메라로부터 수신된 실제 객체의 색상 맵의 픽셀을 출력하고, 상기 폐색 처리부로부터 수신된 상기 알파 맵에서 특정 픽셀의 형식이 알파 형식이면 알파 값에 따라 가상 객체의 색상 맵의 픽셀 또는 시스루 카메라로부터 수신된 실제 객체의 색상 맵의 픽셀을 동시에 출력하는 합성 처리부를 포함하는 것을 특징으로 하는혼합현실 디스플레이 장치
|
9 |
9
제8항에 있어서,상기 합성 처리부는상기 폐색 처리부로부터 수신된 상기 알파 맵에서 특정 픽셀의 형식이 마스크 형식이고 마스크 값이 0이면 상기 시스루 카메라로부터 수신된 실제 객체의 색상 맵의 픽셀을 출력하고, 상기 폐색 처리부로부터 수신된 상기 알파 맵에서 특정 픽셀의 형식이 마스크 형식이고 마스크 값이 1이면 시스루 카메라로부터 수신된 실제 객체의 색상 맵의 픽셀을 출력하는 것을 특징으로 하는혼합현실 디스플레이 장치
|
10 |
10
제8항에 있어서,상기 합성 처리부는상기 폐색 처리부로부터 수신된 상기 알파 맵에서 특정 픽셀의 형식이 알파 형식이고 알파 값에 따라 시스루 카메라로부터 수신된 실제 객체의 색상 맵의 픽셀 및 가상 객체의 색상 맵의 픽셀에 대한 블렌딩 계산을 실행하는 것을 특징으로 하는혼합현실 디스플레이 장치
|