1 |
1
시선 추적기(Eye-Tracker)를 이용한 사용자 입력 데이터 분석 장치에 의해 수행되는 시선 추적 기반의 사용자 입력 데이터 분석 방법에 있어서,a) 손글씨로 작성된 손-쓰기 데이터를 저장한 제1 데이터베이스의 손-쓰기 데이터와 사용자의 시선 추적에 기반하여 작성된 시선-쓰기 데이터를 조합한 제2 데이터베이스를 제공하는 단계; 및 b) 상기 시선 추적기로부터 사용자의 시선 추적 정보가 입력되면, 상기 제2 데이터베이스에 기반하여 사용자의 시선 추적 정보를 통해 입력된 숫자를 분류하여 출력하는 단계를 포함하되,상기 제2 데이터베이스는 상기 제1 데이터베이스에 의해 분류 가능한 제1 패턴에 해당하는 숫자 이미지를 기초로 생성된 제1 시선-쓰기 특징 데이터, 상기 제1 데이터베이스에 의한 분류 가능성 또는 분류 불가능성이 혼재하는 제2 패턴에 해당하는 것으로, 시선- 쓰기 동작시 시선 변경 포인트에서 발생되는 시선 움직임의 잔상에 의한 제1 표시선을 해당 숫자에 추가한 숫자 이미지와 상기 시선 움직임의 잔상이 없는 숫자 이미지를 포함하는 제2 시선-쓰기 특징 데이터 및 상기 제1 데이터베이스에 의해 분류가 불가능한 제3 패턴에 해당하는 것으로, 시선-쓰기 동작시 시선 변경 포인트에서 발생되는 시선 움직임의 잔상에 의한 제2표시선을 추가한 숫자 이미지를 포함하는 제3 시선-쓰기 특징 데이터를 포함하는 것인 사용자 입력 데이터 분석 방법
|
2 |
2
제 1 항에 있어서,상기 제1 데이터베이스는 MNIST(Modified National Institute of Standards and Technology) 데이터베이스인, 시선 추적 기반의 사용자 입력 데이터 분석 방법
|
3 |
3
제 1 항에 있어서,상기 제2 데이터베이스는, 상기 제1 데이터베이스에 저장된 손-쓰기 데이터에 비해 각진 형태를 가지고, 상기 제1 데이터베이스에 의해 분류 가능한 일반 특징 패턴에 해당하는 숫자 이미지를 포함하는 제4시선-쓰기 특징 데이터를 포함하는 것인, 시선 추적 기반의 사용자 입력 데이터 분석 방법
|
4 |
4
제 3 항에 있어서,상기 제4 시선-쓰기 특징 데이터는 0, 2, 3, 6, 8, 9의 숫자 이미지에 해당하는 것인, 시선 추적 기반의 사용자 입력 데이터 분석 방법
|
5 |
5
제 1 항에 있어서,상기 제1패턴은 시선-쓰기 동작에 따라 숫자의 상단 또는 하단에 획이 추가 되어 적어도 하나 이상의 형태를 가지고, 상기 제1 시선-쓰기 특징 데이터는 1의 숫자 이미지에 해당하는 것인, 시선 추적 기반의 사용자 입력 데이터 분석 방법
|
6 |
6
제 1 항에 있어서,상기 제2 패턴은 상기 시선 움직임의 잔상이 없는 경우 상기 손-쓰기 데이터의 형태를 가지는 숫자 이미지이고, 상기 시선 움직임의 잔상이 있는 경우 숫자 인식이 불가능한 숫자 이미지이며, 상기 제2 시선-쓰기 특징 데이터는 5, 7의 숫자 이미지에 해당하는 것인, 시선 추적 기반의 사용자 입력 데이터 분석 방법
|
7 |
7
제 6 항에 있어서,상기 a) 단계는, a-1) 상기 제1 데이터베이스의 포맷에 적합한 그레이 스케일(Gray-scale)의 샘플 이미지를 사용하고, 상기 샘플 이미지를 복수 개의 구역으로 분할하는 단계;a-2) 상기 분할된 각 구역마다 무작위로 포인트를 설정한 후 각 포인트를 연결하여 각진 형태의 숫자 모양을 산출하는 단계; 및a-3) 상기 각진 형태의 숫자 모양에서 시선 변경 포인트에 해당하는 복수의 구역에 위치한 포인트를 서로 연결하여 제1 표시선을 추가하여 상기 제2 시선-쓰기 특징 데이터를 생성하는 단계를 더 포함하는 것인, 시선 추적 기반의 사용자 입력 데이터 분석 방법
|
8 |
8
제 7 항에 있어서,상기 제2 시선-쓰기 특징 데이터가 5숫자 이미지인 경우, 상기 제1 표시선은 5숫자 모양의 좌측 최하단에 위치한 포인트와 좌측 최상단에 위치한 포인트를 연결한 선분이고,상기 제2 시선-쓰기 특징 데이터가 7숫자 이미지인 경우, 상기 제1 표시선은 7 숫자 모양의 좌측 최상단에 위치한 포인트와 최하단에 위치한 포인트를 연결한 선분인, 시선 추적 기반의 사용자 입력 데이터 분석 방법
|
9 |
9
제 1 항에 있어서,상기 제3 패턴은 상기 시선 움직임의 잔상으로 인해 숫자 인식이 불가능한 숫자 이미지이고, 상기 제3 시선-쓰기 특징 데이터는 4의 숫자 이미지에 해당하는 것인, 시선 추적 기반의 사용자 입력 데이터 분석 방법
|
10 |
10
제 9 항에 있어서,상기 a) 단계는, a-4) 상기 제1 데이터베이스의 포맷에 적합한 그레이 스케일(Gray-scale)의 샘플 이미지를 제1 방향과 제2 방향으로 탐색하여 4 숫자 이미지의 시선 변경 포인트에 해당하는 복수의 구역의 포인트를 찾은 후, 해당 포인트를 연결한 제2 표시선을 추가하여 상기 제2 시선-쓰기 특징 데이터를 생성하는 단계를 더 포함하는 것인, 시선 추적 기반의 사용자 입력 데이터 분석 방법
|
11 |
11
제 10 항에 있어서,상기 제2 표시선은 4 숫자 모양의 우측 최외곽에 위치한 포인트와 최상단에 위치한 포인트를 연결한 선분인, 시선 추적 기반의 사용자 입력 데이터 분석 방법
|
12 |
12
시선 추적 기반의 사용자 입력 데이터 분석 장치에 있어서,시선 추적기를 이용한 입력 인터페이스를 제공하는 사용자 입력 데이터 분석 방법을 수행하기 위한 프로그램이 기록된 메모리; 및상기 프로그램을 실행하기 위한 프로세서를 포함하며,상기 프로세서는, 상기 프로그램의 실행에 의해,상기 프로그램의 데이터베이스 모듈을 통해 손글씨로 작성된 손-쓰기 데이터를 저장한 제1 데이터베이스의 손-쓰기 데이터와 사용자의 시선 추적에 기반하여 작성된 시선-쓰기 데이터를 조합한 제2 데이터베이스를 제공하고, 상기 프로그램의 시선-쓰기 입력 인터페이스 모듈을 통해 상기 시선 추적기로부터 사용자의 시선 추적 정보가 입력되면 상기 제2 데이터베이스에 기반하여 사용자의 시선 추적 정보를 통해 입력된 숫자를 분류하여 출력하되,상기 제2 데이터베이스는 상기 제1 데이터베이스에 의해 분류 가능한 제1 패턴에 해당하는 숫자 이미지를 기초로 생성된 제1 시선-쓰기 특징 데이터, 상기 제1 데이터베이스에 의한 분류 가능성 또는 분류 불가능성이 혼재하는 제2 패턴에 해당하는 것으로, 시선- 쓰기 동작시 시선 변경 포인트에서 발생되는 시선 움직임의 잔상에 의한 제1 표시선을 해당 숫자에 추가한 숫자 이미지와 상기 시선 움직임의 잔상이 없는 숫자 이미지를 포함하는 제2 시선-쓰기 특징 데이터 및 상기 제1 데이터베이스에 의해 분류가 불가능한 제3 패턴에 해당하는 것으로, 시선-쓰기 동작시 시선 변경 포인트에서 발생되는 시선 움직임의 잔상에 의한 제2표시선을 추가한 숫자 이미지를 포함하는 제3 시선-쓰기 특징 데이터를 포함하는 것인, 시선 추적 기반의 사용자 입력 데이터 분석 장치
|
13 |
13
제 12 항에 있어서,상기 시선-쓰기 입력 인터페이스 모듈은,사용자의 시선을 추적하여 사용자의 시선 추적 정보를 제공하는 시선 추적기;상기 제2 데이터베이스에 기초하여 시선-쓰기 데이터를 훈련하여 학습하기 위해 CNN 알고리즘을 사용하고, 상기 CNN 알고리즘을 통해 사용자의 시선 추적 정보를 통해 입력된 숫자를 분류하는 CNN 분류기; 및 상기 분류된 숫자를 사용자 단말과의 상호 인터랙션에 기반하여 사용자 단말에 제공하는 출력기를 포함하는 것인, 시선 추적 기반의 사용자 입력 데이터 분석 장치
|
14 |
14
제 12 항에 있어서,상기 제2 데이터베이스는, 상기 제1 데이터베이스에 저장된 손-쓰기 데이터에 비해 각진 형태를 가지고, 상기 제1 데이터베이스에 의해 분류 가능한 일반 특징 패턴에 해당하는 숫자 이미지를 포함하는 제4시선-쓰기 특징 데이터를 포함하는 것인, 시선 추적 기반의 사용자 입력 데이터 분석 장치
|
15 |
15
제 14 항에 있어서,상기 제4 시선-쓰기 특징 데이터는 0, 2, 3, 6, 8, 9의 숫자 이미지에 해당하는 것인, 시선 추적 기반의 사용자 입력 데이터 분석 장치
|
16 |
16
제 12 항에 있어서,상기 제1패턴은 시선-쓰기 동작에 따라 숫자의 상단 또는 하단에 획이 추가 되어 적어도 하나 이상의 형태를 가지고, 상기 제1 시선-쓰기 특징 데이터는 1의 숫자 이미지에 해당하는 것인, 시선 추적 기반의 사용자 입력 데이터 분석 장치
|
17 |
17
제 12 항에 있어서,상기 제2 패턴은 상기 시선 움직임의 잔상이 없는 경우 상기 손-쓰기 데이터의 형태를 가지는 숫자 이미지이고, 상기 시선 움직임의 잔상이 있는 경우 숫자 인식이 불가능한 숫자 이미지이며, 상기 제2 시선-쓰기 특징 데이터는 5, 7의 숫자 이미지에 해당하는 것인, 시선 추적 기반의 사용자 입력 데이터 분석 장치
|
18 |
18
제 17 항에 있어서,상기 제2 시선-쓰기 특징 데이터가 5숫자 이미지인 경우, 상기 제1 표시선은 5숫자 모양의 좌측 최하단에 위치한 포인트와 좌측 최상단에 위치한 포인트를 연결한 선분이고,상기 제2 시선-쓰기 특징 데이터가 7숫자 이미지인 경우, 상기 제1 표시선은 7 숫자 모양의 좌측 최상단에 위치한 포인트와 최하단에 위치한 포인트를 연결한 선분인, 시선 추적 기반의 사용자 입력 데이터 분석 장치
|
19 |
19
제 12 항에 있어서,상기 제3 패턴은 상기 시선 움직임의 잔상으로 인해 숫자 인식이 불가능한 숫자 이미지이고, 상기 제3 시선-쓰기 특징 데이터는 4의 숫자 이미지에 해당하는 것인, 시선 추적 기반의 사용자 입력 데이터 분석 장치
|
20 |
20
제 19 항에 있어서,상기 제3 시선-쓰기 특징 데이터의 표시선은 4 숫자 모양의 우측 최외곽에 위치한 포인트와 최상단에 위치한 포인트를 연결한 선분인, 시선 추적 기반의 사용자 입력 데이터 분석 장치
|