| 1 |
1
전방 카메라와 사용자 눈 카메라를 이용하여, 3차원 공간 내에서 다수로 분할된 모든 분할 영역에 대한 선 학습 전방 좌표와 이들 좌표에 대응하는 사용자의 동공 중심 좌표인 선 학습 동공 좌표를 얻는 선 학습 단계; 상기 전방 카메라와 사용자 눈 카메라를 이용하여, 다수의 분할 영역이 포함되는 전체 영역의 좌표에 해당하는 전방 참고 좌표와 이에 대응하는 사용자 눈의 동공 중심 좌표에 해당하는 사용자 동공 참고 좌표를 획득하는 참고 좌표 획득 단계;상기 전체 영역의 전방 참고 좌표와 동공 참고 좌표를 이용하여, 상기 분할된 모든 영역에 대응하는 것으로 상기 참고 좌표 내에 위치하는 전방 자동 좌표 및 이에 대응하는 동공 중심에 대한 자동 생성 좌표를 생성하는 단계;상기 참고 좌표 및 자동 생성 좌표를 이용하여 실제 3차원 공간에 대한 사용자의 시선 위치를 결정하는 단계;를 포함하는 3차원 공간에서의 사용자 시선 추적 방법
|
| 2 |
2
제 1항에 있어서, 상기 자동 생성 좌표는 MLP(Multi-Layer Perception), SVR(Support Vector Regression), LR(Linear Regression)중의 어느 하나의 방법에 따른 학습 알고리즘에 의해 계산하는 것을 특징으로 하는 사용자 시선 추적 방법
|
| 3 |
3
제 1항에 있어서, 상기 전방 카메라에 의해 얻어지는 전방 영상으로부터 사용자 전방에 위치하는 물체의 특징 부를 추출하는 단계; 그리고 상기 시선 위치에 대응하는 상기 전방 영상 내의 물체를 선택하여 이를 인식하는 단계;를 포함하는 시선 추적 방법
|
| 4 |
4
제 3 항에 있어서, 상기 눈 영상과 전방 영상은 상기 동공 중심을 통과하는 수직선 상에 배치되는 카메라로부터 획득하는 것을 특징으로 하는 시선 추적 방법
|
| 5 |
5
제 1항 또는 제 2 항에 있어서, 상기 눈 영상과 전방 영상은 상기 동공 중심을 통과하는 수직선 상에 배치되는 카메라로부터 획득하는 것을 특징으로 하는 시선 추적 방법
|
| 6 |
6
제 5 항에 있어서, 상기 동공 중심 위치 검출하는 과정은; 상기 눈 영상으로부터, 원형 검출 알고리즘을 이용한 동공 위치 검출하는 단계; 그리고 지역 이진화, 컴포넌트 라벨링, 영역 채움 방법으로 동공 중심 검출 단계;를 포함하는 것을 특징으로 시선 추적 방법
|
| 7 |
7
제 1 항 내지 제 4 항 중의 어느 한 항에 있어서, 상기 눈 카메라로부터 얻어지는 눈 영상으로부터, 원형 검출 알고리즘을 이용한 동공 위치 검출하는 것을 특징으로 하는 시선 추적 방법
|
| 8 |
8
제 7 항에 있어서, 상기 동공 중심 위치 검출하는 과정은; 상기 눈 영상으로부터, 원형 검출 알고리즘을 이용한 동공 위치 검출하는 단계; 그리고 지역 이진화, 컴포넌트 라벨링, 영역 채움 방법으로 동공 중심 검출 단계;를 포함하는 것을 특징으로 시선 추적 방법
|
| 9 |
9
안경형 프레임; 상기 프레임에 설치되는 눈 카메라; 상기 프레임에 설치되는 전방 카메라; 그리고 상기 눈 카메라와 전방 카메라로부터 획득된 영상을 통하여 시선을 추적하는 시스템;을 구비하며, 상기 시스템은: 상기 전방 카메라와 사용자 눈 카메라를 이용하여, 3차원 공간 내에서 다수로 분할된 모든 분할 영역에 대한 선학습 전방 좌표와 이들 좌표에 대응하는 사용자의 동공 중심 좌표인 선학습 동공 좌표를 얻고; 상기 전방 카메라와 사용자 눈 카메라를 이용하여, 다수의 분할 영역이 포함되는 전체 영역의 좌표에 해당하는 전방 참고 좌표와 이에 대응하는 사용자 눈의 동공 중심 좌표에 해당하는 사용자 동공 참고 좌표를 획득하는 참고 좌표 획득하고; 상기 전체 영역의 전방 참고 좌표와 동공 참고 좌표를 이용하여, 상기 분할된 모든 영역에 대응하는 것으로 상기 참고 좌표 내에 위치하는 전방 자동 좌표 및 이에 대응하는 동공 중심에 대한 자동 생성 좌표를 생성하고; 상기 참고 좌표 및 자동 생성 좌표를 이용하여 실제 3차원 공간에 대한 사용자의 시선 위치를 결정하도록 되어 있는, 3차원 공간에서의 사용자 시선 추적 기반 포인팅 장치
|
| 10 |
10
제 9 항에 있어서, 상기 눈 카메라에 인접하여 상기 눈을 조명하는 조명부;를 더 구비하는 시선 추적기반 포인팅 장치
|
| 11 |
11
제 10 항에 있어서, 상기 조명부는 원적외선 램프를 포함하고, 상기 눈 카메라는 적외선 카메라인 것을 특징으로 하는 시선 추적 기반 포인팅 장치
|
| 12 |
12
제 9 항에 있어서, 상기 사용자가 수동은 물체를 선택하는 별도의 터치 패널을 더 구비하는 것을 특징으로 하는 시선 추적 기반 개체 포인팅 장치
|
| 13 |
13
제 9 항 내지 제 12 항 중 어느 한 항에 있어서, 상기 눈 카메라와 전방 카메라의 렌즈는 상기 사용자의 동공을 통과하는 수직선 상에 배치되는 것을 특징으로 시선 추적 기반 개체 포인팅 장치
|
| 14 |
14
제 13 항에 있어서, 상기 눈 카메라의 렌즈는 줌 렌즈인 것을 특징으로 하는 시선 추적 기반 개체 포인팅 장치
|
| 15 |
15
제 9 항 내지 제 12 항 중 어느 한 항에 있어서, 상기 눈 카메라의 렌즈는 줌 렌즈인 것을 특징으로 하는 시선 추적 기반 개체 포인팅 장치
|
