| 1 |
1
렌즈의 화각에 들어오는 화상을 촬영하여 현실 영상을 출력하는 카메라;증강현실 영상을 디스플레이하는 디스플레이부;음성데이터를 스피커를 통해 가청음으로 출력하고, 마이크를 통해 입력되는 가청음을 음성데이터로 변환하여 출력하는 오디오 처리부;현재의 위치를 측정하기 위한 위치정보를 수신하여 출력하는 위치추적부;방향을 포함하는 자세를 측정하여 자세정보를 출력하는 자세 측정부;적어도 하나 이상의 캐릭터에 대한 영상정보 및 증강현실 시나리오를 저장하는 저장부; 및상기 위치정보로부터 현재 위치를 계산하고, 상기 위치 추적부에서 출력되는 현재 위치를 반영하여 상기 카메라를 통해 획득되는 현실 영상에 포함된 사물들의 위치를 분석하고, 분석된 사물의 위치 및 상기 방향을 포함하는 자세에 따라 사용자가 선택한 시나리오에 따른 캐릭터의 위치인 캐릭터 위치를 결정하고, 상기 현실 영상에 상기 결정된 캐릭터의 위치를 합성한 증강현실 영상을 생성하여 상기 디스플레이부에 표시한 후, 상기 시나리오에 따른 음성데이터 및 상기 오디오 처리부를 통해 입력되는 음성데이터에 대응하는 응답 음성데이터를 상기 캐릭터의 위치에 대응하는 오디오 처리를 수행한 후 상기 오디오 처리부의 스피커를 통해 출력하는 제어부를 포함하되,상기 자세 측정부는,상기 카메라의 렌즈가 향하는 방향에 대응하는 방향을 특정하여 출력하는 방향 측정부; 및중력 방향을 기준으로 한 기울기를 측정하여 출력하는 기울기 측정부를 포함하되,상기 제어부는,상기 캐릭터의 위치 결정 시 방향 및 기울기를 동시에 반영하여 캐릭터의 위치를 결정하고,상기 위치 추적부는,다수의 GPS 위성들 중 적어도 셋 이상의 GPS 위성으로부터 상기 위치정보인 위치데이터를 수신하여 출력하는 GPS 모듈; 및주변에 설치된 적어도 하나 이상의 기지국으로부터 무선통신신호를 수신하여 상기 위치정보인 상기 기지국의 위치정보 및 상기 무선통신신호의 수신신호전계강도를 상기 제어부로 출력하는 통신부 중 적어도 하나 이상을 포함하며, 상기 통신부는,이동통신망의 기지국으로부터 수신되는 이동통신망 기지국의 위치정보 및 상기 무선통신신호인 이동통신신호의 수신신호전계강도를 출력하는 제1무선통신부; 및와이파이망의 액세스 포인트로부터 수신되는 상기 액세스 포인트의 위치정보 및 상기 무선통신신호인 와이파이망 액세스 포인트 신호를 출력하는 제2무선통신부 중 적어도 어느 하나 이상을 포함하는 것을 특징으로 하는 캐릭터 위치 및 사물 위치를 반영한 증강현실 대화 시스템
|
| 2 |
2
렌즈의 화각에 들어오는 화상을 촬영하여 현실 영상을 출력하는 카메라;증강현실 영상을 디스플레이하는 디스플레이부;음성데이터를 스피커를 통해 가청음으로 출력하고, 마이크를 통해 입력되는 가청음을 음성데이터로 변환하여 출력하는 오디오 처리부;현재의 위치를 측정하기 위한 위치정보를 수신하여 출력하는 위치추적부;방향을 포함하는 자세를 측정하여 자세정보를 출력하는 자세 측정부;적어도 하나 이상의 캐릭터에 대한 영상정보 및 증강현실 시나리오를 저장하는 저장부; 및상기 위치정보로부터 현재 위치를 계산하고, 상기 위치 추적부에서 출력되는 현재 위치를 반영하여 상기 카메라를 통해 획득되는 현실 영상에 포함된 사물들의 위치를 분석하고, 분석된 사물의 위치 및 상기 방향을 포함하는 자세에 따라 사용자가 선택한 시나리오에 따른 캐릭터의 위치인 캐릭터 위치를 결정하고, 상기 현실 영상에 상기 결정된 캐릭터의 위치를 합성한 증강현실 영상을 생성하여 상기 디스플레이부에 표시한 후, 상기 시나리오에 따른 음성데이터 및 상기 오디오 처리부를 통해 입력되는 음성데이터에 대응하는 응답 음성데이터를 상기 캐릭터의 위치에 대응하는 오디오 처리를 수행한 후 상기 오디오 처리부의 스피커를 통해 출력하는 제어부를 포함하되,상기 자세 측정부는,상기 카메라의 렌즈가 향하는 방향에 대응하는 방향을 특정하여 출력하는 방향 측정부; 및중력 방향을 기준으로 한 기울기를 측정하여 출력하는 기울기 측정부를 포함하되,상기 제어부는,상기 캐릭터의 위치 결정 시 방향 및 기울기를 동시에 반영하여 캐릭터의 위치를 결정하고,상기 제어부는,디스플레이부에 상기 저장부에 저장되어 있는 증강현실 시나리오들 중 하나 및 캐릭터들 중 하나를 선택할 수 있는 시나리오 및 캐릭터 선택 사용자 인터페이스 수단을 제공하여 임의의 시나리오 및 캐릭터를 선택받아 설정하는 서비스 선택부;상기 위치정보로부터 현재 위치를 계산하고, 상기 카메라를 통해 획득되는 현실 영상을 상기 위치 추적부에서 출력되는 현재 위치를 반영하여 사물들의 위치를 분석하고, 분석된 사물의 위치 및 상기 방향을 포함하는 자세에 따라 사용자가 선택한 시나리오에 따른 캐릭터의 위치인 캐릭터 위치를 추적하는 캐릭터 위치 추적부;마이크를 통해 입력되는 음성신호에 대한 음성데이터를 상기 오디오 처리부로부터 입력받아 음성인식을 수행하여 음성 인식된 사용자 음성에 대한 텍스트 데이터를 출력하는 음성인식부;상기 음성인식부를 통해 입력된 텍스트 데이터에 대응하는 응답 음성데이터를 찾아 오디오 처리부에서 추적된 상기 캐릭터 위치를 반영한 오디오 처리를 수행한 후 스피커를 통해 음성으로 출력하는 대화 처리부;상기 선택된 캐릭터를 상기 추적된 캐릭터 위치에 따른 캐릭터 영상을 생성하여 출력하는 가상캐릭터 영상 생성부; 및상기 현실 영상에 상기 캐릭터 영상을 합성하여 증강현실 영상을 생성한 후 상기 디스플레이부에 표시하는 증강현실 영상획득부를 포함하는 것을 특징으로 하는 캐릭터 위치 및 사물 위치를 반영한 증강현실 대화 시스템
|
| 3 |
3
삭제
|
| 4 |
4
삭제
|
| 5 |
5
제2항에 있어서,상기 현실 영상에 포함된 사물들의 거리를 측정하는 거리 측정부를 더 포함하되,상기 제어부는,상기 거리측정부에 의해 측정되는 거리를 반영하여 상기 사물의 위치를 결정하는 것을 특징으로 하는 캐릭터 위치 및 사물 위치를 반영한 증강현실 대화 시스템
|
| 6 |
6
제5항에 있어서,상기 거리 측정부는,적외선 거리 측정기 및 초음파 거리 측정기 중 어느 하나 이상을 포함하는 것을 특징으로 하는 캐릭터 위치 및 사물 위치를 반영한 증강현실 대화 시스템
|
| 7 |
7
삭제
|
| 8 |
8
제2항에 있어서,상기 위치 추적부는,다수의 GPS 위성들 중 적어도 셋 이상의 GPS 위성으로부터 상기 위치정보인 위치데이터를 수신하여 출력하는 GPS 모듈; 및주변에 설치된 적어도 하나 이상의 기지국으로부터 무선통신신호를 수신하여 상기 위치정보인 상기 기지국의 위치정보 및 상기 무선통신신호의 수신신호전계강도를 상기 제어부로 출력하는 통신부를 포함하고,상기 캐릭터 위치 추적부는,상기 GPS 모듈로부터 입력되는 적어도 셋 이상의 위치데이터에 의해 현재 위치를 계산하는 GPS 위치 추적부;상기 통신부로부터 입력되는 기지국의 위치정보에 의한 기지국 위치 및 수신신호전계강도에 의한 현재 위치를 계산하는 무선통신 위치 추적부;상기 자세 측정부로부터 방향 및 기울기를 포함하는 자세정보를 획득하는 자세정보 획득부;상기 카메라를 통해 획득되는 현실 영상을 상기 위치 추적부에서 출력되는 현재 위치를 반영하여 사물들의 위치를 분석하는 사물 위치추적부; 및분석된 사물의 위치 및 상기 방향을 포함하는 자세에 따라 사용자가 선택한 시나리오에 따른 캐릭터의 위치인 캐릭터 위치를 결정하는 캐릭터 위치 결정부를 포함하는 것을 특징으로 하는 캐릭터 위치 및 사물 위치를 반영한 증강현실 대화 시스템
|
| 9 |
9
제8항에 있어서,상기 사물 위치 추적부는,현재 위치를 반영하여 사물들의 위치를 분석하되, 영상에서 사물과 사물의 경계 및 겹침에 의해 발생하는 경계선을 검출하고, 저장부에 미리 저장되어 있는 사물 패턴 특징 정보들에 의한 사물의 종류를 판단하고, 경계선과 상기 카메라의 중심점이 상기 경계선을 향할 때의 기울기 및 상기 카메라의 높이를 반영하여 상기 사물과의 거리를 결정하고, 상기 현재 위치, 상기 경계선, 상기 거리 및 사물의 종류의 판단에 의한 사물의 위치 및 구조를 결정하는 것을 특징으로 하는 캐릭터 위치 및 사물 위치를 반영한 증강현실 대화 시스템
|
| 10 |
10
제8항에 있어서,적외선을 조사하여 사물과의 거리를 측정하는 거리측정부를 더 포함하되,상기 사물 위치 추적부는,현재 위치를 반영하여 사물들의 위치를 분석하되, 영상에서 사물과 사물의 경계 및 겹침에 의해 발생하는 경계선을 검출하고, 저장부에 미리 저장되어 있는 사물 패턴 특징 정보들에 의한 사물의 종류를 판단하고, 상기 경계선을 기준으로 한 상기 거리 측정부로부터 출력되는 거리정보에 의해 상기 사물과의 거리를 결정하고, 상기 현재 위치, 상기 경계선, 상기 거리 및 사물의 종류의 판단에 의한 사물의 위치 및 구조를 결정하는 것을 특징으로 하는 캐릭터 위치 및 사물 위치를 반영한 증강현실 대화 시스템
|
| 11 |
11
제어부가 위치추적부에 의해 획득되는 위치정보로부터 현재 위치를 계산하는 위치 추적 과정;상기 제어부가 카메라를 통해 획득되는 현실 영상을 획득하는 현실 영상 획득 과정;상기 제어부가 자세 측정부를 통해 상기 카메라가 향한 방향을 포함하는 자세정보를 획득하는 자세정보 획득 과정;상기 제어부가 현재 위치를 반영하여 상기 획득된 현실 영상에 포함된 사물들의 위치를 분석하고, 분석된 사물의 위치 및 상기 방향을 포함하는 자세에 따라 사용자가 선택한 시나리오에 따른 캐릭터의 위치인 캐릭터 위치를 결정하는 사물 위치 결정 과정;상기 현실 영상에 상기 결정된 캐릭터의 위치를 합성한 증강현실 영상을 생성하여 디스플레이부에 표시하는 증강현실 영상 디스플레이 과정; 및상기 증강현실 영상을 디스플레이 한 후, 상기 시나리오에 따른 음성데이터 및 오디오 처리부를 통해 입력되는 음성데이터에 대응하는 응답 음성데이터를 상기 캐릭터의 위치에 대응하는 오디오 처리를 수행한 후 상기 오디오 처리부의 스피커를 통해 출력하는 증강현실 대화 과정을 포함하되,상기 사물 위치 결정 과정은,상기 제어부가 상기 제어부가 현재 위치를 반영하여 상기 획득된 현실 영상에 포함된 사물들의 위치를 분석하는 사물 위치 분석 단계; 및분석된 사물의 위치와, 상기 방향 및 기울기를 포함하는 자세에 따라 사용자가 선택한 시나리오에 따른 캐릭터의 위치인 캐릭터 위치를 결정하는 캐릭터 위치 단계를 포함하는 것을 특징으로 하는 캐릭터 위치 및 사물 위치를 반영한 증강현실 대화 방법
|
| 12 |
12
제11항에 있어서,상기 위치 추적 과정은,상기 제어부가 GPS 모듈을 통해 GPS 위성으로부터 상기 위치정보인 위치데이터가 수신되는지를 검사하는 GPS 신호 수신 여부 확인 단계;위치데이터가 수신되면 적어도 셋 이상의 GPS 위성에 대한 위치데이터에 의해 현재 위치를 계산하는 GPS 이용 현재 위치 계산 단계; 및위치데이터가 수신되지 않으면 통신부를 통해 수신되는 무선통신신호를 송신한 기지국 위치정보 및 상기 무선통신신호의 수신신호전계강도를 상기 위치정보로 이용하여 현재 위치를 계산하는 기지국 이용 현재 위치 계산 단계를 포함하는 것을 특징으로 하는 캐릭터 위치 및 사물 위치를 반영한 증강현실 대화 방법
|
| 13 |
13
제11항에 있어서,상기 자세정보 획득 과정은,상기 제어부가 자세 측정부의 방향측정부를 통해 상기 카메라가 향하는 방향을 측정하는 방향 측정 단계; 및상기 제어부가 자세 측정부의 기울기 측정부를 통해 상기 카메라가 기울어진 기울기를 측정하는 기울기 측정 단계를 포함하되,상기 사물 위치 결정 과정에서 상기 제어부가 상기 방향 및 기울기를 포함하는 자세에 따라 사용자가 선택한 시나리오에 따른 캐릭터의 위치인 캐릭터 위치를 결정하는 것을 특징으로 하는 캐릭터 위치 및 사물 위치를 반영한 증강현실 대화 방법
|
| 14 |
14
삭제
|
| 15 |
15
제11항에 있어서,상기 사물 위치 분석 단계는,영상에서 사물과 사물의 경계 및 겹침에 의해 발생하는 경계선을 검출하고, 저장부에 미리 저장되어 있는 사물 패턴 특징 정보들에 의한 사물의 종류를 판단하는 사물 종류 판단 단계;상기 경계선과 상기 카메라의 중심점이 상기 경계선을 향할 때의 기울기 및 상기 카메라의 높이를 반영하여 상기 사물과의 거리를 결정하는 사물간 거리 결정 단계; 및상기 현재 위치, 상기 경계선, 상기 거리 및 사물의 종류의 판단에 의한 사물의 위치 및 구조를 결정하는 사물 위치 및 구조 결정 단계를 포함하는 것을 특징으로 하는 캐릭터 위치 및 사물 위치를 반영한 증강현실 대화 방법
|
| 16 |
16
제11항에 있어서,상기 사물 위치 분석 단계는,영상에서 사물과 사물의 경계 및 겹침에 의해 발생하는 경계선을 검출하고, 저장부에 미리 저장되어 있는 사물 패턴 특징 정보들에 의한 사물의 종류를 판단하는 사물 종류 판단 단계;상기 경계선을 기준으로 한 거리 측정부로부터 출력되는 거리정보에 의해 상기 사물과의 거리를 결정하는 사물간 거리 결정 단계; 및상기 현재 위치, 상기 경계선, 상기 거리 및 사물의 종류의 판단에 의한 사물의 위치 및 구조를 결정하는 사물 위치 및 구조 결정 단계를 포함하는 것을 특징으로 하는 캐릭터 위치 및 사물 위치를 반영한 증강현실 대화 방법
|
