1 |
1
굴곡성기관지내시경 이미지를 이용하여 해부학적 위치를 판별하는 방법으로서, 이미지획득 모듈에 의하여, 굴곡성기관지내시경 이미지를 획득하는 단계; 및 신경망 모델에 의하여, 상기 굴곡성기관지내시경 이미지의 전체 프레임에서 대상 영역에 표현된 객체를 기관용골, 좌측 주기관지 및 우측 주기관지 중 하나로 판별하는 단계; 를 포함하는, 해부학적 위치를 판별하는 방법
|
2 |
2
제1항에 있어서, 상기 신경망 모델은 복수의 훈련 샘플로 이루어진 제1 세트을 이용하여 굴곡성기관지내시경 이미지들이 입력되면 기관용골(carina), 좌측 주기관지 및 우측 주기관지 중 하나로 판별하도록 학습된 것이고, 상기 제1 세트의 복수의 훈련 샘플 각각은: 훈련 이미지 및 레이블 데이터를 포함하고, 각 훈련 이미지는 해당 훈련용 환자의 환자정보의 텍스트 및 굴곡성기관지내시경 이미지를 포함한 원시이미지에서 굴곡성기관지내시경 표시 영역의 적어도 일부 영역을 크로핑한 이미지이고, 각 훈련 이미지에 대한 레이블 데이터는 해당 훈련 이미지가 포함하는, 기관용골, 좌측 주기관지 및 우측 주기관지 중 어느 하나의 객체의 해부학적 위치를 가리키는 것을 특징으로 하는, 해부학적 위치를 판별하는 방법
|
3 |
3
제2항에 있어서, 상기 레이블 데이터는 상기 원시이미지에서 상기 환자정보의 텍스트를 문자 인식 엔진(character recognition engine)에 의해 인식한 결과인 것을 특징으로 하는, 해부학적 위치를 판별하는 방법
|
4 |
4
제2항에 있어서, 상기 신경망 모델은 복수의 훈련 샘플로 이루어진 제2 세트를 이용하여 추가로 훈련되며, 상기 제2 세트의 상기 훈련 이미지는 굴곡성기관지내시경 표시 영역을 적어도 일부 크로핑한 이미지를 랜덤하게 회전하고 랜덤 반경의 원으로 추가 크로핑한 것을 포함하는 것을 특징으로 하는, 해부학적 위치를 판별하는 방법
|
5 |
5
제3항에 있어서, 상기 레이블 데이터는 상기 원시이미지에서 컬러를 그레이(grey) 톤으로 변환한 후, 이진 임계화(binary threshold)를 적용된 이미지로부터 인식된 것을 특징으로 하는, 해부학적 위치를 판별하는 방법
|
6 |
6
제3항에 있어서, 환자정보를 포함하는 텍스트로부터 기관용골, 좌측 주기관지 및 우측 주기관지 중 어느 하나에 대응하는 문자열을 추출하는 것이 실패할 경우, 상기 원시이미지에 표시된 텍스트를 확대하여 상기 대응하는 문자열을 추출하여 상기 레이블 데이터를 획득하는 것을 특징으로 하는, 해부학적 위치를 판별하는 방법
|
7 |
7
제6항에 있어서,상기 원시이미지에 표시된 텍스트를 사이즈 대비 2배 내지 10배로 순차적으로 확대하여 대응하는 문자열을 추출하여 상기 레이블 데이터를 획득하는 것을 특징으로 하는, 해부학적 위치를 판별하는 방법
|
8 |
8
제1항에 있어서, 상기 신경망 모델은 굴곡성기관지내시경 이미지로부터 특징을 추출하고, 추출된 특징에 기초하여 기관용골, 좌측 주기관지 및 우측 주기관지 중 하나로 판별하고, 상기 신경망 모델은: 추출되는 특징이 이미지 내 기관지 연골 및 후방 근육을 기하학적으로 형상화된 제1 특징일 경우, 이미지의 객체를 기관용골로 판별하고, 추출되는 특징이 이미지 내 2차 및 3차 기관지 사이의 접합부를 포함하는 깊이 구조를 기하학적으로 형상화한 제2 특징일 경우, 이미지의 객체를 좌측 주기관지 또는 우측 주기관지로 판별하는 것을 특징으로 하는, 해부학적 위치를 판별하는 방법
|
9 |
9
제1항에 있어서, 상기 신경망 모델이 판별한 객체의 부분을 디스플레이 상의 굴곡성기관지내시경 이미지에 표시하여 시각화하는 단계를 더 포함하는 것을 특징으로 하는, 해부학적 위치를 판별하는 방법
|
10 |
10
제9항에 있어서, 상기 시각화하는 단계는 Grad-CAM(Gradient-weighted CAM) 모델을 이용하는 것을 특징으로 하는, 해부학적 위치를 판별하는 방법
|
11 |
11
제1항에 있어서, 상기 신경망 모델은 CNN 모델인 것을 특징으로 하는, 해부학적 위치를 판별하는 방법
|
12 |
12
굴곡성기관지내시경 이미지를 이용하여 해부학적 위치를 판별하는 장치로서, 굴곡성기관지내시경 이미지를 획득하는 이미지획득 모듈; 및 상기 굴곡성기관지내시경 이미지의 전체 프레임에서 대상 영역에 표현된 객체를 기관용골, 좌측 주기관지 및 우측 주기관지 중 하나로 판별하는 신경망 모델; 및상기 신경망 모델이 판별한 객체의 부분을 굴곡성기관지내시경 이미지에 표시하여 시각화하는 디스플레이; 를 포함하는 것을 특징으로 하는, 해부학적 위치 판별 장치
|
13 |
13
제12항의 장치를 포함하는 굴곡성기관지내시경검사(fiberoptic bronchoscopy) 장치
|