1 |
1
복수의 이미지들, 각 이미지에 관한 텍스트 및 특정 분야의 전문성 이식을 위한 전문성 쿼드(E-Quad)를 수신하는 분석데이터 수신부;상기 전문성 쿼드를 기초로 상기 복수의 이미지들 및 상기 텍스트에 관한 전이 학습을 수행하여 상기 특정 분야의 전문 이미지 해석을 위한 전문성 필터를 생성하는 전이 학습 수행부; 및특정 이미지에 대해 상기 전문성 필터를 적용하여 해당 특정 이미지에 관한 전문 이미지 해석을 생성하는 전문 이미지 해석부를 포함하되,상기 전문성 쿼드(E-Quad)는 상기 전문성 필터 및 상기 전문 이미지 해석의 생성 과정에 각각 독립적으로 사용되고,상기 전문 이미지 해석부는 상기 특정 이미지를 기초로 특성별 캡션 및 특성별 해석을 도출하여 상기 전문 이미지 해석을 생성하는 과정에서, 상기 특성별 캡션에서 유효 토큰을 식별하는 제1 단계와, 상기 유효 토큰을 기초로 해당 특성별 캡션의 대표 특성을 결정하는 제2 단계와, 상기 전문성 쿼드에서 상기 유효 토큰 및 상기 대표 특성의 조합에 매칭되는 해석을 결정하는 제3 단계를 수행함으로써 상기 특성별 해석을 도출하는 것을 특징으로 하는 전문성 이식을 통한 딥러닝 기반의 전문 이미지 해석 장치
|
2 |
2
제1항에 있어서, 상기 전문성 쿼드(E-Quad)는상기 특정 분야에 포함된 전문가 집단의 관찰과 해석에 따른 결과로서 생성되고 상기 관찰의 구조화 과정을 통해 도출되는 객체(Object), 특징(Feature) 및 상태(Status)의 조합과 상기 해석 간의 매칭 정보를 포함하는 것을 특징으로 하는 전문성 이식을 통한 딥러닝 기반의 전문 이미지 해석 장치
|
3 |
3
제1항에 있어서, 상기 전이 학습 수행부는입력 이미지를 인코딩하여 인코딩 데이터를 생성하는 인코더(Encoder);상기 입력 이미지에 관한 입력 텍스트에 상기 전문성 쿼드를 적용하여 특성별 캡션을 생성하는 전처리 모듈; 및상기 인코딩 데이터 및 상기 특성별 캡션을 입력으로 하여 사전학습 모델(Pre-trained Model)에 관한 미세 조정(Fine Tuning)을 통해 구축되는 디코더(Decoder)를 상기 전문성 필터로서 생성하는 전이 학습 모듈을 포함하는 것을 특징으로 하는 전문성 이식을 통한 딥러닝 기반의 전문 이미지 해석 장치
|
4 |
4
제3항에 있어서, 상기 인코더는상기 입력 이미지의 일반 특성을 추출하는 저수준 모듈과 상기 일반 특성을 기초로 전문 데이터에 대한 미세 조정을 통해 전문 특성을 추출하는 고수준 모듈로 구성되는 것을 특징으로 하는 전문성 이식을 통한 딥러닝 기반의 전문 이미지 해석 장치
|
5 |
5
제3항에 있어서, 상기 전처리 모듈은상기 입력 텍스트를 복수의 토큰들로 분해하고 상기 전문성 쿼드의 각 특성과의 연관성에 따라 추출된 토큰들을 재구성함으로써 상기 특성별 캡션을 생성하는 것을 특징으로 하는 전문성 이식을 통한 딥러닝 기반의 전문 이미지 해석 장치
|
6 |
6
제3항에 있어서, 상기 전이 학습 모듈은상기 특성별 캡션에 대해 특성 별로 미세 조정을 독립적으로 수행하여 특성 별로 구축되는 서브 디코더(Sub-Decoder)들의 집합을 상기 전문성 필터로서 생성하는 것을 특징으로 하는 전문성 이식을 통한 딥러닝 기반의 전문 이미지 해석 장치
|
7 |
7
제3항에 있어서, 상기 전이 학습 모듈은LSTM(Long Short-Term Memory)을 이용하여 상기 미세 조정을 수행하고 상기 특성별 캡션의 각 단어들을 상기 LSTM의 각 단계에 순차적으로 입력하는 것을 특징으로 하는 전문성 이식을 통한 딥러닝 기반의 전문 이미지 해석 장치
|
8 |
8
제1항에 있어서, 상기 전문 이미지 해석부는상기 특정 이미지의 인코딩 데이터를 상기 전문성 필터에 입력하여 출력된 결과로서 특성별 캡션을 획득하고 상기 전문성 쿼드를 이용하여 상기 특성별 캡션에 매칭되는 특성별 해석을 도출하며 상기 특성별 캡션 및 해석을 통합한 결과로서 상기 전문 이미지 해석을 생성하는 것을 특징으로 하는 전문성 이식을 통한 딥러닝 기반의 전문 이미지 해석 장치
|
9 |
9
삭제
|
10 |
10
제8항에 있어서, 상기 전문 이미지 해석부는상기 특성별 캡션 및 해석에 관한 통합 방법으로서 (a)캡션 및 해석의 쌍에 관한 테이블 생성, (b)캡션과 해석의 단순 결합 및 (c)텍스트 요약(Text Summarization) 적용 중 어느 하나를 사용하는 것을 특징으로 하는 전문성 이식을 통한 딥러닝 기반의 전문 이미지 해석 장치
|
11 |
11
제1항에 있어서, 상기 전문 이미지 해석부는상기 전문성 쿼드 및 상기 전문성 필터가 복수인 경우 각 분야 별로 상기 특정 이미지에 대한 전문 이미지 해석을 병렬적으로 생성하는 것을 특징으로 하는 전문성 이식을 통한 딥러닝 기반의 전문 이미지 해석 장치
|
12 |
12
제11항에 있어서, 상기 전문 이미지 해석부는특성별 캡션 및 상기 전문성 쿼드 간의 대응관계가 1:N인 경우에 있어서, 특성 간의 중복이면 상기 특성별 캡션에 대해 복수의 특성별 해석들을 생성하고 특성 내의 중복이면 상기 특성별 캡션에 대해 특성별 해석을 생성하지 않는 것을 특징으로 하는 전문성 이식을 통한 딥러닝 기반의 전문 이미지 해석 장치
|
13 |
13
전문 이미지 해석 장치에서 수행되는 방법에 있어서,복수의 이미지들, 각 이미지에 관한 텍스트 및 특정 분야의 전문성 이식을 위한 전문성 쿼드(E-Quad)를 수신하는 단계;상기 전문성 쿼드를 기초로 상기 복수의 이미지들 및 상기 텍스트에 관한 전이 학습을 수행하여 상기 특정 분야의 전문 이미지 해석을 위한 전문성 필터를 생성하는 단계; 및특정 이미지에 대해 상기 전문성 필터를 적용하여 해당 특정 이미지에 관한 전문 이미지 해석을 생성하는 단계를 포함하되,상기 전문성 쿼드(E-Quad)는 상기 전문성 필터 및 상기 전문 이미지 해석의 생성 과정에 각각 독립적으로 사용되고,상기 전문 이미지 해석을 생성하는 단계는 상기 특정 이미지를 기초로 특성별 캡션 및 특성별 해석을 도출하여 상기 전문 이미지 해석을 생성하는 과정에서, 상기 특성별 캡션에서 유효 토큰을 식별하는 제1 단계와, 상기 유효 토큰을 기초로 해당 특성별 캡션의 대표 특성을 결정하는 제2 단계와, 상기 전문성 쿼드에서 상기 유효 토큰 및 상기 대표 특성의 조합에 매칭되는 해석을 결정하는 제3 단계를 수행함으로써 상기 특성별 해석을 도출하는 단계를 포함하는 것을 특징으로 하는 전문성 이식을 통한 딥러닝 기반의 전문 이미지 해석 방법
|