맞춤기술찾기

이전대상기술

인코더를 이용한 이미지의 특이 영역 분석 방법 및 장치

  • 기술번호 : KST2021002756
  • 담당센터 : 부산기술혁신센터
  • 전화번호 : 051-606-6561
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명의 일 실시예에 따른 이미지의 특이 영역 분석 방법은, 입력되는 이미지를 기초로 특징 벡터를 생성하는 인코더를 이용하여 쿼리 이미지에 대한 특징 벡터를 생성하는 단계와, 입력되는 특징 벡터의 오리지날 이미지(original image)와 소정의 유사도를 갖는 정상 이미지를 생성하도록 학습된 제1 기계학습 모델에 상기 생성된 특징 벡터가 입력됨에 기초하여 상기 쿼리 이미지와 관련된 복수의 정상 이미지를 생성하는 단계와, 상기 복수의 정상 이미지 각각에 대해 상기 쿼리 이미지와의 차이를 나타내는 특이 영역을 포함하는 어텐션맵(attention map)을 생성하는 단계를 포함할 수 있다.
Int. CL G06T 7/00 (2017.01.01) G06T 7/11 (2017.01.01) G06N 3/04 (2006.01.01) G06N 3/08 (2006.01.01)
CPC G06T 7/0014(2013.01) G06T 7/11(2013.01) G06N 3/0454(2013.01) G06N 3/08(2013.01) G06T 2207/20081(2013.01) G06T 2207/20084(2013.01)
출원번호/일자 1020190087668 (2019.07.19)
출원인 울산대학교 산학협력단, 재단법인 아산사회복지재단
등록번호/일자
공개번호/일자 10-2021-0010769 (2021.01.28) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 공개
심사진행상태 수리
심판사항
구분
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2019.07.19)
심사청구항수 18

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 울산대학교 산학협력단 대한민국 울산광역시 남구
2 재단법인 아산사회복지재단 대한민국 서울특별시 송파구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 김남국 서울특별시 송파구
2 배현진 경기도 고양시 일산서구
3 서준범 서울특별시 송파구
4 이상민 서울특별시 영등포구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 제일특허법인(유) 대한민국 서울특별시 서초구 마방로 ** (양재동, 동원F&B빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2019.07.19 수리 (Accepted) 1-1-2019-0743372-00
2 보정요구서
Request for Amendment
2019.07.30 발송처리완료 (Completion of Transmission) 1-5-2019-0124996-65
3 [지정기간연장]기간연장(단축, 경과구제)신청서
[Designated Period Extension] Application of Period Extension(Reduction, Progress relief)
2019.08.30 수리 (Accepted) 1-1-2019-0897681-14
4 [출원서 등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2019.09.06 수리 (Accepted) 1-1-2019-0919258-20
5 [출원서 등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2019.11.06 수리 (Accepted) 1-1-2019-1140303-62
6 선행기술조사의뢰서
Request for Prior Art Search
2020.04.08 수리 (Accepted) 9-1-9999-9999999-89
7 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.07.10 수리 (Accepted) 4-1-2020-5154267-54
8 선행기술조사보고서
Report of Prior Art Search
2020.07.14 발송처리완료 (Completion of Transmission) 9-6-2020-0197832-21
9 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.07.31 수리 (Accepted) 4-1-2020-5172343-48
10 [출원서 등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2020.11.02 수리 (Accepted) 1-1-2020-1167567-98
11 의견제출통지서
Notification of reason for refusal
2020.12.16 발송처리완료 (Completion of Transmission) 9-5-2020-0884459-51
12 [거절이유 등 통지에 따른 의견]의견서·답변서·소명서
2021.02.04 수리 (Accepted) 1-1-2021-0147045-19
13 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2021.02.04 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2021-0147046-65
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
입력되는 이미지를 기초로 특징 벡터를 생성하는 인코더를 이용하여 쿼리 이미지에 대한 특징 벡터를 생성하는 단계와, 입력되는 특징 벡터의 오리지날 이미지(original image)와 소정의 유사도를 갖는 정상 이미지를 생성하도록 학습된 제1 기계학습 모델에 상기 생성된 특징 벡터가 입력됨에 기초하여 상기 쿼리 이미지와 관련된 복수의 정상 이미지를 생성하는 단계와, 상기 복수의 정상 이미지 각각에 대해 상기 쿼리 이미지와의 차이를 나타내는 특이 영역을 포함하는 어텐션맵(attention map)을 생성하는 단계를 포함하는 이미지의 특이 영역 분석 방법
2 2
제1항에 있어서, 상기 인코더는, 상기 제1 기계학습 모델의 입력단에 상기 인코더를 배치하고 상기 인코더에 학습용 이미지를 입력시켜 상기 인코더에 의해 생성되는 상기 학습용 이미지의 특징 벡터가 상기 제1 기계학습 모델로 입력되도록 하여 출력 이미지를 생성하도록 하고, 역전파(back propagation)를 이용하여 상기 제1 기계학습 모델의 출력 이미지와 상기 학습용 이미지 간의 차이가 최소화되도록 하고, 상기 제1 기계학습 모델의 출력단에 상기 인코더를 재배치하고, 상기 인코더를 통해 상기 출력 이미지를 특징 벡터로 변환하여, 역전파를 이용하여 상기 변환된 출력 이미지의 특징 벡터와 상기 제1 기계학습 모델로 입력되는 특징 벡터 간의 차이가 최소화되도록 함으로써 학습되어 있는이미지의 특이 영역 분석 방법
3 3
제1항에 있어서, 상기 특징 벡터를 생성하는 단계는, 상기 쿼리 이미지의 특징 벡터를 생성하는 단계와, 데이터베이스에 기저장되어 있는 복수의 학습용 정상 이미지 각각에 대한 특징 벡터 중 상기 쿼리 이미지의 특징 벡터와 가장 유사한 특징 벡터를 상기 쿼리 이미지에 대한 특징 벡터로 결정하는 단계를 포함하는이미지의 특이 영역 분석 방법
4 4
제3항에 있어서, 상기 생성된 복수의 정상 이미지 중 상기 쿼리 이미지와 유사도가 높은 순서대로 적어도 하나 이미지를 선택하는 단계를 더 포함하고, 상기 어텐션맵을 생성하는 단계는, 상기 선택된 이미지와 상기 쿼리 이미지와의 차이와 관련된 특이 영역을 포함하는 어텐션맵을 생성하는 단계를 포함하는 이미지의 특이 영역 분석 방법
5 5
제1항에 있어서,상기 제1 기계학습 모델은, 생성형 기계학습 모델에 기초하여, 복수의 학습용 정상 이미지를 이용하여 소정의 특징 벡터가 입력되면 소정의 특징 벡터가 나타내는 이미지와 유사한 정상 이미지를 생성하도록 학습이 수행되어 있으며,상기 생성형 기계학습 모델은 적대적생성네트워크(generative adversarial network)를 포함하는 이미지의 특이 영역 분석 방법
6 6
제1항에 있어서, 오류를 제거하도록 학습된 제2 기계학습 모델을 이용하여 상기 복수의 정상 이미지 각각에 대해 생성된 어텐션맵 중 오류를 제거함에 기초하여, 최종 어텐션맵을 생성하는 단계를 더 포함하는 이미지의 특이 영역 분석 방법
7 7
제6항에 있어서, 상기 제2 기계학습 모델은, 컨벌루션뉴럴네트워크(convolution neural network)에 기초하여, 복수의 학습용 어텐션맵을 입력값으로 하고, 오류의 학습용 어텐션맵을 정답값으로하여 입력된 학습용 어텐션맵의 오류 여부를 판별하도록 지도 학습이 수행되어 있는이미지의 특이 영역 분석 방법
8 8
제6항에 있어서,상기 제2 기계학습 모델은, 복수의 학습용 어텐션맵에 대한 비지도 학습이 수행되는이미지의 특이 영역 분석 방법
9 9
제1항에 있어서, 상기 쿼리 이미지는, 질환을 가지는 환자로부터 획득됨에 기초하여 상기 질환에 의해 나타나는 비정상 영역의 적어도 일부에 대한 비정상 영역 이미지를 포함하는 비정상 촬상 이미지이고, 상기 복수의 정상 이미지는, 상기 쿼리 이미지의 상기 비정상 영역 이미지에 대응하는 영역이 정상 상태에 대한 정보를 포함하는 정상 영역 이미지이되 상기 쿼리 이미지와의 유사도가 소정 값 이상의 가짜(fake) 이미지인이미지의 특이 영역 분석 방법
10 10
제9항에 있어서, 상기 정상 이미지는, 상기 질환을 갖지 않는 정상인의 정상 상태를 나타나는 정상 영역의 적어도 일부에 대한 정상 영역 이미지를 포함하는 이미지의 특이 영역 분석 방법
11 11
입력되는 이미지를 기초로 특징 벡터를 생성하는 인코더를 이용하여 쿼리 이미지에 대한 특징 벡터를 생성하는 특징 벡터 생성부와, 입력되는 특징 벡터의 오리지날 이미지(original image)와 소정의 유사도를 가지는 정상 이미지를 생성하도록 학습된 제1 기계학습 모델에 상기 생성된 특징 벡터가 입력됨에 기초하여 상기 쿼리 이미지와 관련된 복수의 정상 이미지를 생성하는 정상 이미지 생성부와, 상기 복수의 정상 이미지 각각에 대해 상기 쿼리 이미지와의 차이를 나타내는 특이 영역을 포함하는 어텐션맵(attention map)을 생성하는 어텐션맵 생성부를 포함하는이미지의 특이 영역 분석 장치
12 12
제11항에 있어서, 상기 인코더는, 상기 제1 기계학습 모델의 입력단에 상기 인코더를 배치하고 상기 인코더에 학습용 이미지를 입력시켜 상기 인코더에 의해 생성되는 상기 학습용 이미지의 특징 벡터가 상기 제1 기계학습 모델로 입력되도록 하여 출력 이미지를 생성하도록 하고, 역전파(back propagation)를 이용하여 상기 제1 기계학습 모델의 출력 이미지와 상기 학습용 이미지 간의 차이가 최소화되도록 하고, 상기 제1 기계학습 모델의 출력단에 상기 인코더를 재배치하고, 상기 인코더를 통해 상기 출력 이미지를 특징 벡터로 변환하여, 역전파를 이용하여 상기 변환된 출력 이미지의 특징 벡터와 상기 제1 기계학습 모델로 입력되는 특징 벡터 간의 차이가 최소화되도록 함으로써 학습되어 있는이미지의 특이 영역 분석 장치
13 13
제11항에 있어서, 상기 특징 벡터 생성부는, 상기 쿼리 이미지의 특징 벡터를 생성하고, 데이터베이스에 기저장되어 있는 복수의 학습용 정상 이미지 각각에 대한 특징 벡터 중 상기 쿼리 이미지의 특징 벡터와 가장 유사한 특징 벡터를 상기 쿼리 이미지에 대한 특징 벡터로 결정하는 이미지의 특이 영역 분석 장치
14 14
제13항에 있어서, 상기 생성된 복수의 정상 이미지 중 상기 쿼리 이미지와 유사도가 높은 순서대로 적어도 하나 이미지를 선택하는 유사 이미지 선택부를 더 포함하고, 상기 어텐션맵 생성부는, 상기 선택된 이미지와 상기 쿼리 이미지와의 차이와 관련된 특이 영역을 포함하는 어텐션맵을 생성하는 이미지의 특이 영역 분석 장치
15 15
제11항에 있어서,상기 제1 기계학습 모델은, 생성형 기계학습 모델에 기초하여, 복수의 학습용 정상 이미지를 이용하여 소정의 특징 벡터가 입력되면 소정의 특징 벡터가 나타내는 이미지와 유사한 정상 이미지를 생성하도록 학습이 수행되어 있으며,상기 생성형 기계학습 모델은 적대적생성네트워크(generative adversarial network)를 포함하는 이미지의 특이 영역 분석 장치
16 16
제11항에 있어서, 오류를 제거하도록 학습된 제2 기계학습 모델을 이용하여 상기 복수의 정상 이미지 각각에 대해 생성된 어텐션맵 중 오류를 제거함에 기초하여, 최종 어텐션맵을 생성하는 최종 어텐션맵 생성부를 더 포함하는이미지의 특이 영역 분석 장치
17 17
제16항에 있어서, 상기 제2 기계학습 모델은, 컨벌루션뉴럴네트워크(convolution neural network)에 기초하여, 복수의 학습용 어텐션맵을 입력값으로 하고, 오류의 학습용 어텐션맵을 정답값으로하여 입력된 학습용 어텐션맵의 오류 여부를 판별하도록 지도 학습이 수행되어 있는이미지의 특이 영역 분석 장치
18 18
제16항에 있어서,상기 제2 기계학습 모델은, 복수의 학습용 어텐션맵에 대한 비지도 학습이 수행되는이미지의 특이 영역 분석 장치
19 19
제11항에 있어서, 상기 쿼리 이미지는, 질환을 가지는 환자로부터 획득됨에 기초하여 상기 질환에 의해 나타나는 비정상 영역의 적어도 일부에 대한 비정상 영역 이미지를 포함하는 비정상 촬상 이미지이고, 상기 복수의 정상 이미지는, 상기 쿼리 이미지의 상기 비정상 영역 이미지에 대응하는 영역이 정상 상태에 대한 정보를 포함하는 정상 영역 이미지이되 상기 쿼리 이미지와의 유사도가 소정 값 이상의 가짜(fake) 이미지인이미지의 특이 영역 분석 장치
20 20
제19항에 있어서, 상기 정상 이미지는, 상기 질환을 갖지 않는 정상인의 정상 상태를 나타나는 정상 영역의 적어도 일부에 대한 정상 영역 이미지를 포함하는 이미지의 특이 영역 분석 장치
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 보건복지부 서울아산병원 연구중심병원육성(R&D) 4차 산업혁명 HCT* 진료-Care 신산업 생태계 구축(*Human-centered Convergence Techmology:사람중심 융합기술)
2 보건복지부 서울아산벙원 첨단의료기술개발사업 응급 및 실시간 진단 인공지능 시스템을 위한 연구개발 및 실용화 오픈플랫폼