| 1 |
1
가상현실 콘텐츠를 수신하는 단계; 및미리 학습된 신경 불일치 모델에 기반한 뉴럴 네트워크를 이용하여 상기 수신된 가상현실 콘텐츠에 대한 가상현실 멀미를 정량적으로 평가하는 단계를 포함하는 가상현실 멀미 평가 방법
|
| 2 |
2
제1항에 있어서,상기 평가하는 단계는상기 신경 불일치 모델에 기초하여 상기 가상현실 콘텐츠의 입력 시각 신호에 대한 예상 시각 신호를 예측하는 단계;상기 신경 불일치 모델에 기초하여 상기 예측된 예상 시각 신호와 상기 예상 시각 신호에 대응하는 상기 가상현실 콘텐츠의 해당 프레임에 대한 입력 시각 신호 간의 신경 불일치 특징을 추출하는 단계; 및상기 신경 불일치 모델과 상기 추출된 신경 불일치 특징에 기초하여 상기 가상현실 멀미의 정도를 평가하는 단계를 포함하는 것을 특징으로 하는 가상현실 멀미 평가 방법
|
| 3 |
3
제2항에 있어서,상기 추출하는 단계는상기 예측된 예상 시각 신호와 상기 해당 프레임에 대한 입력 시각 신호 간의 차이 정보에 기초하여 상기 신경 불일치 특징을 추출하는 것을 특징으로 하는 가상현실 멀미 평가 방법
|
| 4 |
4
제2항에 있어서,상기 추출하는 단계는상기 예측된 예상 시각 신호와 상기 해당 프레임에 대한 입력 시각 신호 간의 차이 정보에 대한 차이 특징과 상기 해당 프레임에 대한 입력 시각 신호에 대한 시각적 특징을 획득하고, 상기 획득된 차이 특징과 상기 시각적 특징에 기초하여 상기 신경 불일치 특징을 추출하는 것을 특징으로 하는 가상현실 멀미 평가 방법
|
| 5 |
5
제2항에 있어서,상기 평가하는 단계는상기 가상현실 콘텐츠의 프레임별 예측된 예상 시각 신호와 상기 예상 시각 신호에 대응하는 상기 가상현실 콘텐츠의 해당 프레임에 대한 입력 시각 신호 간의 차이 정보에 기초하여 상기 가상현실 콘텐츠에 대한 차이 맵을 생성하는 단계를 더 포함하는 것을 특징으로 하는 가상현실 멀미 평가 방법
|
| 6 |
6
제1항에 있어서,상기 뉴럴 네트워크는미리 설정된 가상현실 콘텐츠들을 포함하는 데이터셋과 상기 가상현실 콘텐츠들 각각에 대해 평가된 SSQ(simulator sickness questionnaire) 점수에 기초하여 트레이닝됨으로써, 상기 신경 불일치 모델의 학습 모델이 형성되는 것을 특징으로 하는 가상현실 멀미 평가 방법
|
| 7 |
7
가상현실 콘텐츠를 수신하는 단계; 및미리 학습된 제1 학습 모델에 기반한 제1 뉴럴 네트워크를 이용하여 상기 가상현실 콘텐츠의 입력 시각 신호에 대한 예상 시각 신호를 예측하는 단계;미리 학습된 제2 학습 모델에 기반한 제2 뉴럴 네트워크를 이용하여 상기 예측된 예상 시각 신호와 상기 예상 시각 신호에 대응하는 상기 가상현실 콘텐츠의 해당 프레임에 대한 입력 시각 신호 간의 신경 불일치 특징을 추출하는 단계; 및미리 학습된 제3 학습 모델에 기반한 제3 뉴럴 네트워크를 이용하여 상기 추출된 신경 불일치 특징에 대응하는 가상현실 멀미의 정도를 평가하는 단계를 포함하고,상기 제1 학습 모델, 상기 제2 학습 모델 및 상기 제3 학습 모델에 의해 신경 불일치 모델이 형성되는 가상현실 멀미 평가 방법
|
| 8 |
8
제7항에 있어서,상기 추출하는 단계는상기 예측된 예상 시각 신호와 상기 해당 프레임에 대한 입력 시각 신호 간의 차이 정보에 기초하여 상기 신경 불일치 특징을 추출하는 것을 특징으로 하는 가상현실 멀미 평가 방법
|
| 9 |
9
제7항에 있어서,상기 추출하는 단계는상기 예측된 예상 시각 신호와 상기 해당 프레임에 대한 입력 시각 신호 간의 차이 정보에 대한 차이 특징과 상기 해당 프레임에 대한 입력 시각 신호에 대한 시각적 특징을 획득하고, 상기 획득된 차이 특징과 상기 시각적 특징에 기초하여 상기 신경 불일치 특징을 추출하는 것을 특징으로 하는 가상현실 멀미 평가 방법
|
| 10 |
10
제7항에 있어서,상기 가상현실 콘텐츠의 프레임별 예측된 예상 시각 신호와 상기 예상 시각 신호에 대응하는 상기 가상현실 콘텐츠의 해당 프레임에 대한 입력 시각 신호 간의 차이 정보에 기초하여 상기 가상현실 콘텐츠에 대한 차이 맵을 생성하는 단계를 더 포함하는 것을 특징으로 하는 가상현실 멀미 평가 방법
|
| 11 |
11
가상현실 콘텐츠를 수신하는 수신부; 및미리 학습된 신경 불일치 모델에 기반한 뉴럴 네트워크를 이용하여 상기 수신된 가상현실 콘텐츠에 대한 가상현실 멀미를 정량적으로 평가하는 평가부를 포함하는 가상현실 멀미 평가 장치
|
| 12 |
12
제11항에 있어서,상기 평가부는상기 신경 불일치 모델에 기초하여 상기 가상현실 콘텐츠의 입력 시각 신호에 대한 예상 시각 신호를 예측하고,상기 신경 불일치 모델에 기초하여 상기 예측된 예상 시각 신호와 상기 예상 시각 신호에 대응하는 상기 가상현실 콘텐츠의 해당 프레임에 대한 입력 시각 신호 간의 신경 불일치 특징을 추출하며,상기 신경 불일치 모델과 상기 추출된 신경 불일치 특징에 기초하여 상기 가상현실 멀미의 정도를 평가하는 것을 특징으로 하는 가상현실 멀미 평가 장치
|
| 13 |
13
제12항에 있어서,상기 평가부는상기 예측된 예상 시각 신호와 상기 해당 프레임에 대한 입력 시각 신호 간의 차이 정보에 기초하여 상기 신경 불일치 특징을 추출하는 것을 특징으로 하는 가상현실 멀미 평가 장치
|
| 14 |
14
제12항에 있어서,상기 평가부는상기 예측된 예상 시각 신호와 상기 해당 프레임에 대한 입력 시각 신호 간의 차이 정보에 대한 차이 특징과 상기 해당 프레임에 대한 입력 시각 신호에 대한 시각적 특징을 획득하고, 상기 획득된 차이 특징과 상기 시각적 특징에 기초하여 상기 신경 불일치 특징을 추출하는 것을 특징으로 하는 가상현실 멀미 평가 장치
|
| 15 |
15
제12항에 있어서,상기 가상현실 콘텐츠의 프레임별 예측된 예상 시각 신호와 상기 예상 시각 신호에 대응하는 상기 가상현실 콘텐츠의 해당 프레임에 대한 입력 시각 신호 간의 차이 정보에 기초하여 상기 가상현실 콘텐츠에 대한 차이 맵을 생성하는 생성부를 더 포함하는 것을 특징으로 하는 가상현실 멀미 평가 장치
|
| 16 |
16
제11항에 있어서,상기 뉴럴 네트워크는미리 설정된 가상현실 콘텐츠들을 포함하는 데이터셋과 상기 가상현실 콘텐츠들 각각에 대해 평가된 SSQ(simulator sickness questionnaire) 점수에 기초하여 트레이닝됨으로써, 상기 신경 불일치 모델의 학습 모델이 형성되는 것을 특징으로 하는 가상현실 멀미 평가 장치
|
| 17 |
17
가상현실 콘텐츠를 수신하는 수신부; 및미리 학습된 제1 학습 모델에 기반한 제1 뉴럴 네트워크를 이용하여 상기 가상현실 콘텐츠의 입력 시각 신호에 대한 예상 시각 신호를 예측하는 예측부;미리 학습된 제2 학습 모델에 기반한 제2 뉴럴 네트워크를 이용하여 상기 예측된 예상 시각 신호와 상기 예상 시각 신호에 대응하는 상기 가상현실 콘텐츠의 해당 프레임에 대한 입력 시각 신호 간의 신경 불일치 특징을 추출하는 추출부; 및미리 학습된 제3 학습 모델에 기반한 제3 뉴럴 네트워크를 이용하여 상기 추출된 신경 불일치 특징에 대응하는 가상현실 멀미의 정도를 평가하는 평가부를 포함하고,상기 제1 학습 모델, 상기 제2 학습 모델 및 상기 제3 학습 모델에 의해 신경 불일치 모델이 형성되는 가상현실 멀미 평가 장치
|
| 18 |
18
제17항에 있어서,상기 추출부는상기 예측된 예상 시각 신호와 상기 해당 프레임에 대한 입력 시각 신호 간의 차이 정보에 기초하여 상기 신경 불일치 특징을 추출하는 것을 특징으로 하는 가상현실 멀미 평가 장치
|
| 19 |
19
제17항에 있어서,상기 추출부는상기 예측된 예상 시각 신호와 상기 해당 프레임에 대한 입력 시각 신호 간의 차이 정보에 대한 차이 특징과 상기 해당 프레임에 대한 입력 시각 신호에 대한 시각적 특징을 획득하고, 상기 획득된 차이 특징과 상기 시각적 특징에 기초하여 상기 신경 불일치 특징을 추출하는 것을 특징으로 하는 가상현실 멀미 평가 장치
|
| 20 |
20
제17항에 있어서,상기 가상현실 콘텐츠의 프레임별 예측된 예상 시각 신호와 상기 예상 시각 신호에 대응하는 상기 가상현실 콘텐츠의 해당 프레임에 대한 입력 시각 신호 간의 차이 정보에 기초하여 상기 가상현실 콘텐츠에 대한 차이 맵을 생성하는 생성부를 더 포함하는 것을 특징으로 하는 가상현실 멀미 평가 장치
|
