| 1 |
1
입력 데이터에 대한 어노테이션의 오류 가능성을 예측하는 장치로서,훈련용 입력 데이터에 대한 제1 어노테이션 및 평가용입력 데이터에 대한 제2 어노테이션을 알고리즘을 이용하여 생성하는 어노테이션 생성부,상기 제1 어노테이션 및 사용자로부터 수신된 상기 제1 어노테이션에 대한 교정 이력을 바탕으로 어노테이션 평가 모델을 학습하는 어노테이션 학습부, 그리고상기 어노테이션 평가 모델을 이용하여 상기 제2 어노테이션의 오류 가능성을 예측하는 어노테이션 오류 예측부를 포함하는 어노테이션 오류 예측 장치
|
| 2 |
2
제1항에서,상기 어노테이션 교정부는,상기 사용자로부터 상기 제1 어노테이션에 대한 교정 이력을 수신하거나 또는 상기 사용자에게 상기 제2 어노테이션의 오류 가능성을 제공하는 사용자 인터페이스, 그리고상기 교정 이력을 저장하는 저장부를 포함하는, 어노테이션 오류 예측 장치
|
| 3 |
3
제1항에서,상기 어노테이션 학습부는,상기 교정 이력을 바탕으로, 상기 훈련용 입력 데이터 중 교정이 발생한 훈련용 입력 데이터를 상기 제1 어노테이션의 오류가 발생한 부류로 예측하고, 교정이 발생하지 않은 훈련용 입력 데이터를 상기 제1 어노테이션의 오류가 발생하지 않은 부류로 예측하는 이진 분류 모델을 상기 어노테이션 평가 모델로 학습하는, 어노테이션 오류 예측 장치
|
| 4 |
4
제1항에서,상기 어노테이션 학습부는,상기 제1 어노테이션의 오류를 수정, 삭제, 추가, 오류 없음의 부류로 세분화하여 분류하는 다중 부류 분류 모델을 상기 어노테이션 평가 모델로 학습하는, 어노테이션 오류 예측 장치
|
| 5 |
5
제3항에서,상기 어노테이션 오류 예측부는,상기 제2 어노테이션에 오류가 있을 가능성을 수치로 예측하는, 어노테이션 오류 예측 장치
|
| 6 |
6
제4항에서,상기 어노테이션 오류 예측부는,상기 제2 어노테이션에 발생할 수 있는 오류 유형이 수정, 삭제, 추가 중 하나일 가능성을 수치로 예측하는, 어노테이션 오류 예측 장치
|
| 7 |
7
입력 데이터에 대한 어노테이션의 오류 가능성을 예측하는 방법으로서,훈련용 입력 데이터에 대한 제1 어노테이션을 알고리즘을 이용하여 생성하는 단계,상기 제1 어노테이션 및 사용자로부터 수신된 상기 제1 어노테이션에 대한 교정 이력을 바탕으로 어노테이션 평가 모델을 학습하는 단계, 평가용 입력 데이터에 대한 제2 어노테이션을 알고리즘을 이용하여 생성하는 단계, 그리고상기 어노테이션 평가 모델을 이용하여 상기 제2 어노테이션의 오류 가능성을 예측하는 단계를 포함하는 어노테이션 오류 예측 방법
|
| 8 |
8
제7항에서,상기 제2 어노테이션의 오류 가능성을 예측하는 단계 이후,상기 제2 어노테이션의 오류 가능성을 상기 사용자에게 제공하고, 상기 사용자로부터 상기 제2 어노테이션에 대한 교정 이력을 수신하는 단계를 더 포함하는, 어노테이션 오류 예측 방법
|
| 9 |
9
제7항에서,상기 어노테이션 평가 모델을 학습하는 단계는,상기 교정 이력을 바탕으로, 상기 훈련용 입력 데이터 중 교정이 발생한 훈련용 입력 데이터를 상기 제1 어노테이션의 오류가 발생한 부류로 예측하고, 교정이 발생하지 않은 훈련용 입력 데이터를 상기 제1 어노테이션의 오류가 발생하지 않은 부류로 예측하는 이진 분류 모델을 상기 어노테이션 평가 모델로 학습하는, 어노테이션 오류 예측 방법
|
| 10 |
10
제7항에서,상기 어노테이션 평가 모델을 학습하는 단계는,상기 제1 어노테이션의 오류를 수정, 삭제, 추가, 오류 없음의 부류로 세분화하여 분류하는 다중 부류 분류 모델을 상기 어노테이션 평가 모델로 학습하는, 어노테이션 오류 예측 방법
|
| 11 |
11
제9항에서,상기 제2 어노테이션의 오류 가능성을 예측하는 단계는,상기 제2 어노테이션에 오류가 있을 가능성을 수치로 예측하는, 어노테이션 오류 예측 방법
|
| 12 |
12
제10항에서,상기 제2 어노테이션의 오류 가능성을 예측하는 단계는,상기 제2 어노테이션에 발생할 수 있는 오류 유형이 수정, 삭제, 추가 중 하나일 가능성을 수치로 예측하는, 어노테이션 오류 예측 방법
|
| 13 |
13
입력 데이터에 대한 어노테이션의 오류 가능성을 예측하는 장치로서,프로세서 및 메모리를 포함하고,상기 프로세서는 상기 메모리에 저장된 프로그램을 실행하여,훈련용 입력 데이터에 대한 제1 어노테이션을 알고리즘을 이용하여 생성하는 단계,상기 제1 어노테이션 및 사용자로부터 수신된 상기 제1 어노테이션에 대한 교정 이력을 바탕으로 어노테이션 평가 모델을 학습하는 단계,평가용 입력 데이터에 대한 제2 어노테이션을 알고리즘을 이용하여 생성하는 단계, 그리고상기 어노테이션 평가 모델을 이용하여 상기 제2 어노테이션의 오류 가능성을 예측하는 단계를 수행하는 어노테이션 오류 예측 장치
|
