맞춤기술찾기

이전대상기술

이미지 세그멘테이션 방법, 장치 및 컴퓨터 프로그램

  • 기술번호 : KST2020017016
  • 담당센터 : 서울동부기술혁신센터
  • 전화번호 : 02-2155-3662
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 이미지 세그멘테이션 방법, 장치 및 컴퓨터 프로그램에 관한 것이다. 본 발명은 이미지 세그멘테이션 장치에 있어서, 하나 이상의 잔차 블록을 포함하는 인공 신경망을 이용하여 입력 이미지에 대해 해상도가 상이한 복수의 특징맵을 획득하는 인코딩 모듈, 상기 복수의 특징맵 중 인접한 특징맵 쌍들을 이용하여 하나의 예측맵을 생성하는 디코딩 모듈을 포함하고, 상기 디코딩 모듈은 한 번 이상의 디코딩 라운드를 수행하며, 각 디코딩 라운드는 이전 라운드에서 생성된 특징맵 중 인접한 특징맵 한 쌍 중 높은 해상도를 갖는 고해상도 특징맵과 낮은 해상도를 갖는 저해상도 특징맵을 이용하여 결합 특징맵을 생성하는 ATF 모듈을 하나 이상 포함하고, 상기 디코딩 라운드는 상기 하나의 예측맵이 생성될 때까지 반복 수행되는 것을 일 특징으로 한다. 본 발명에 의하면, 로컬 정보와 글로벌 컨텍스트를 균형있게 결합할 수 있다.
Int. CL G06T 7/10 (2017.01.01) G06T 3/40 (2006.01.01) G06T 5/50 (2006.01.01)
CPC G06T 7/10(2013.01) G06T 3/4046(2013.01) G06T 5/50(2013.01) G06T 2207/20084(2013.01) G06T 2207/20016(2013.01)
출원번호/일자 1020190056000 (2019.05.14)
출원인 경희대학교 산학협력단
등록번호/일자
공개번호/일자 10-2020-0131417 (2020.11.24) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2019.05.14)
심사청구항수 12

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 경희대학교 산학협력단 대한민국 경기도 용인시 기흥구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 이승룡 경기도 성남시 분당구
2 후아 캄 하오 경기도 용인시 기흥구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인도담 대한민국 경기도 성남시 분당구 판교역로 ***, 에스동 ***호(삼평동,에이치스퀘어)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2019.05.14 수리 (Accepted) 1-1-2019-0488943-00
2 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.08.19 수리 (Accepted) 4-1-2019-5164254-26
3 선행기술조사의뢰서
Request for Prior Art Search
2020.02.14 수리 (Accepted) 9-1-9999-9999999-89
4 선행기술조사보고서
Report of Prior Art Search
2020.05.15 수리 (Accepted) 9-1-2020-0020043-58
5 의견제출통지서
Notification of reason for refusal
2020.07.21 발송처리완료 (Completion of Transmission) 9-5-2020-0496020-87
6 [지정기간연장]기간 연장신청서·기간 단축신청서·기간 경과 구제신청서·절차 계속신청서
2020.09.21 수리 (Accepted) 1-1-2020-0998074-25
7 [거절이유 등 통지에 따른 의견]의견서·답변서·소명서
2020.10.21 수리 (Accepted) 1-1-2020-1114953-88
8 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2020.10.21 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2020-1114927-01
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
피드 전송(feed-forward) 인공 신경망을 이용하여 입력 이미지에 대해 해상도가 상이한 복수의 특징맵을 획득하는 인코딩 단계;상기 복수의 특징맵에서 인접한 특징맵 한 쌍 중 높은 해상도를 갖는 고해상도 특징맵과 낮은 해상도를 갖는 저해상도 특징맵을 업샘플링(upsampling) 한 업샘플링 저해상도 특징맵을 결합하여 결합 특징맵을 생성하는 단계;상기 결합 특징맵 생성 단계의 출력으로 하나의 예측맵이 산출될 때까지 재귀적으로 상기 결합 특징맵 생성 단계를 반복 수행하는 디코딩 단계;상기 예측맵을 이용하여 상기 입력 이미지에 포함된 하나 이상의 객체를 분류하는 단계를 포함하는 이미지 세그멘테이션 방법
2 2
제1항에 있어서, 상기 결합 특징맵을 생성하는 단계는상기 저해상도 특징맵을 업샘플링하는 단계;상기 저해상도 특징맵에 복수의 활성 함수 레이어를 적용하여 상기 저해상도 특징맵의 컨텍스트 정보를 수집하고, 이를 이용하여 상기 고해상도 특징맵을 재조정하는 단계;상기 고해상도 특징맵과 상기 재조정된 고해상도 특징맵과 상기 업샘플링된 저해상도 특징맵을 합산하는 단계를 포함하는 이미지 세그멘테이션 방법
3 3
제1항에 있어서,상기 해상도가 상이한 복수의 특징맵은상기 피드 전송 인공 신경망을 구성하는 컨볼루션 레이어 또는 하나 이상의 잔차 블록에서 출력되는 특징맵으로, 상기 잔차 블록에서 출력되는 특징맵은 상기 잔차 블록의 입력맵과 상기 입력맵을 필터링한 결과를 합산한 것인 이미지 세그멘테이션 방법
4 4
제1항에 있어서, 상기 예측맵은 상기 복수의 특징맵 중 가장 높은 해상도를 갖는 특징맵과 동일한 해상도를 갖는 이미지 세그멘테이션 방법
5 5
제1항에 있어서, 상기 객체를 분류하는 단계는, 상기 예측맵을 업샘플링 하여 상기 입력 이미지와 동일한 크기의 최종 예측맵을 생성하는 단계;출력 이미지의 픽셀에 상기 최종 예측맵의 깊이 차원을 따라 가장 높은 값을 갖는 클래스를 레이블링하는 단계를 포함하는 이미지 세그멘테이션 방법
6 6
하나 이상의 잔차 블록을 포함하는 인공 신경망을 이용하여 입력 이미지에 대해 해상도가 상이한 복수의 특징맵을 획득하는 인코딩 모듈;상기 복수의 특징맵 중 인접한 특징맵 쌍들을 이용하여 하나의 예측맵을 생성하는 디코딩 모듈을 포함하고, 상기 디코딩 모듈은 한 번 이상의 디코딩 라운드를 수행하며,각 디코딩 라운드는 이전 라운드에서 생성된 특징맵을 구성하는 인접한 특징맵 한 쌍 중 높은 해상도를 갖는 고해상도 특징맵과 낮은 해상도를 갖는 저해상도 특징맵을 이용하여 결합 특징맵을 생성하는 ATF 모듈을 하나 이상 포함하고, 상기 디코딩 라운드는 상기 하나의 예측맵이 생성될 때까지 반복 수행되는 것을 특징으로 하는 이미지 세그멘테이션 장치
7 7
제6항에 있어서,상기 ATF 모듈은 상기 저해상도 특징맵을 업샘플링(upsampling) 한 업샘플링 저해상도 특징맵과 상기 고해상도 특징맵을 결합하여 상기 결합 특징맵을 생성하는 이미지 세그멘테이션 장치
8 8
제6항에 있어서,상기 업샘플링 저해상도 특징맵은 다음 수학식을 이용하여 산출되는 이미지 세그멘테이션 장치[수학식]: 저해상도 특징맵: 업샘플링 저해상도 특징맵: 부분적으로 스트라이드된 컨볼루션 연산: 크기를 갖는 d/c 훈련 가능한 전치 컨벌루션 필터(trainable transposed convolution filter):업샘플링된 편향(bias) 파라미터
9 9
제6항에 있어서,상기 ATF 모듈은상기 저해상도 특징맵을 업샘플링하는 업샘플링부;상기 저해상도 특징맵에 복수의 활성 함수 레이어를 적용하여 상기 저해상도 특징맵의 컨텍스트 정보를 수집하고, 이를 이용하여 상기 고해상도 특징맵을 재조정하는 재조정부;상기 고해상도 특징맵과 상기 재조정된 고해상도 특징맵과 상기 업샘플링된 저해상도 특징맵을 합산하는 합산부를 포함하는 이미지 세그멘테이션 장치
10 10
제9항에 있어서, 상기 합산부는상기 합산된 결과물에 적용되는 컨벌루션 레이어를 더 포함하는 이미지 세그멘테이션 장치
11 11
제9항에 있어서, 상기 복수의 활성 함수 레이어는전역 풀링(Global Pooling) 레이어, ReLU 레이어와 FC(Full Connected) 레이어를 포함하는 히든 레이어 또는 시그모이드 함수 중 적어도 하나를 포함하는 이미지 세그멘테이션 장치
12 12
제11항에 있어서, 상기 전역 풀링 레이어의 결과 벡터 g는 다음 수학식에 따라 산출되는 이미지 세그멘테이션 장치
13 13
제9항에 있어서, 상기 재조정부의 출력은 다음 수학식에 대응되는 이미지 세그멘테이션 장치
14 14
제9항에 있어서, 상기 합산부는 다음 수학식에 따라 상기 결합 특징맵()을 산출하는 이미지 세그멘테이션 장치
15 15
제6항에 있어서, 상기 디코딩 모듈은상기 예측맵을 업샘플링하여 최종 예측맵을 생성하는 업샘플링 레이어를 더 포함하는 이미지 세그멘테이션 장치
16 16
제15항에 있어서, 출력 이미지의 픽셀에 상기 최종 예측맵의 깊이 차원을 따라 가장 높은 값을 갖는 클래스를 레이블링하는 예측 블록을 더 포함하는 이미지 세그멘테이션 장치
17 17
하드웨어와 결합되어 제 1 항 내지 제 5 항의 방법 중 어느 하나의 방법을 실행시키기 위하여 컴퓨터 판독 가능한 기록매체에 저장된 이미지 세그멘테이션 프로그램
지정국 정보가 없습니다
순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - 패밀리정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 JP32187721 JP 일본 FAMILY

DOCDB 패밀리 정보

순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - DOCDB 패밀리 정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
DOCDB 패밀리 정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 과학기술정보통신부 경희대학교산학협력단 연구개발고급인력지원 지능형 의료 플랫폼 개발
2 과학기술정보통신부 경희대학교산학협력단 디지털콘텐츠원천기술개발 다양한 디지털 제품의 UX 평가를 위한 Lean UX 핵심기술 및 플랫폼