맞춤기술찾기

이전대상기술

CNN을 이용한 이미지 디헤이징 방법 및 그 시스템(METHOD AND SYSTEM FOR DEHAZING IMAGE USING CONVOLUTIONAL NEURAL NETWORK)

  • 기술번호 : KST2018005997
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 CNN을 이용한 이미지 디헤이징 방법 및 그 시스템이 개시된다. 이미지 디헤이징 방법은, CNN(convolutional neural network) 모델을 이용하여 입력 이미지에서 빛의 전달량(transmission map)과 환경광(ambient light)을 추정하는 단계; 및 상기 전달량과 상기 환경광에 기초하여 상기 입력 이미지에서 디헤이징 처리된 복원 영상을 생성하는 단계를 포함할 수 있다.
Int. CL G06T 15/06 (2011.01.01) G06T 15/50 (2006.01.01) G06N 3/04 (2006.01.01)
CPC G06T 15/06(2013.01) G06T 15/06(2013.01) G06T 15/06(2013.01) G06T 15/06(2013.01)
출원번호/일자 1020160147352 (2016.11.07)
출원인 한국과학기술원
등록번호/일자
공개번호/일자 10-2018-0050832 (2018.05.16) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2016.11.07)
심사청구항수 6

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국과학기술원 대한민국 대전광역시 유성구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 김아영 대한민국 대전광역시 유성구
2 신영식 대한민국 대전광역시 유성구
3 조영근 대한민국 대전광역시 유성구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 양성보 대한민국 서울특별시 강남구 선릉로***길 ** (논현동) 삼성빌딩 *층(피앤티특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 한국과학기술원 대한민국 대전광역시 유성구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2016.11.07 수리 (Accepted) 1-1-2016-1084581-20
2 선행기술조사의뢰서
Request for Prior Art Search
2017.09.13 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2017.10.13 수리 (Accepted) 9-1-2017-0033659-73
4 의견제출통지서
Notification of reason for refusal
2018.08.08 발송처리완료 (Completion of Transmission) 9-5-2018-0539201-38
5 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2018.10.05 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2018-0982460-79
6 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2018.10.05 수리 (Accepted) 1-1-2018-0982459-22
7 등록결정서
Decision to grant
2018.12.24 발송처리완료 (Completion of Transmission) 9-5-2018-0884273-18
8 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.04.24 수리 (Accepted) 4-1-2019-5081392-49
9 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.05.15 수리 (Accepted) 4-1-2020-5108396-12
10 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.06.12 수리 (Accepted) 4-1-2020-5131486-63
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
컴퓨터로 구현되는 이미지 디헤이징(dehazing) 방법에 있어서,수중 환경에서 촬영된 수중 이미지에 대하여 CNN(convolutional neural network) 모델을 이용하여 상기 수중 이미지에서 빛의 전달량(transmission map)과 환경광(ambient light)을 추정하는 단계; 및상기 전달량과 상기 환경광에 기초하여 상기 수중 이미지에서 디헤이징 처리된 복원 영상을 생성하는 단계를 포함하고,상기 추정하는 단계는,상기 수중 이미지의 차원 축소를 위한 멀티-스케일 융합 단계(multi-scale fusion stage), 상기 수중 이미지의 헤이즈(haze)-관련 특성들을 추출하기 위한 멀티-스케일 특성 추출 단계(multi-scale feature extraction stage), 상기 전달량과 상기 환경광의 추정을 위한 비선형 회귀 단계(nonlinear regression stage)를 포함하는 상기 CNN 모델을 통해 상기 전달량과 상기 환경광을 추정하고,상기 멀티-스케일 융합 단계는: 서로 다른 사이즈 필터를 가진 복수의 컨볼루션 레이어(convolution layer)로 구성되고, 마지막 과정에서 픽셀의 엘리먼트-와이즈 합(element-wise summation) 연산을 수행하고,상기 멀티-스케일 특성 추출 단계는: 상기 수중 이미지의 심도(depth) 방향에서 특성을 추출하기 위한 최대 유닛(maxout unit)과, 헤이즈-관련 특성을 추출하기 위한 적어도 하나의 컨볼루션 레이어(convolution layer)로 구성되고, 상기 컨볼루션 레이어 다음으로 공간적으로 변하지 않는 특성을 추출하기 위한 최대-풀링 레이어(max-pooling layer)로 구성되고, 상기 컨볼루션 레이어 각각은 ReLU(Rectified Linear Unit) 활성화 기능을 가지며,상기 비선형 회귀 단계는: 컨볼루션 레이어(convolution layer)가 단일 필터로 구성되고, 상기 컨볼루션 레이어의 뒤에 ReLU(Rectified Linear Unit) 레이어가 추가되고,상기 CNN 모델에 해당되는 공통된 모델 구조를 이용하여 상기 전달량과 상기 환경광을 각각 추정하는 것으로,랜덤 전달량과 랜덤 환경광을 가지는 헤이즈-프리 이미지 패치로부터 트레이닝에 필요한 헤이즈 이미지 패치를 생성하여 각 헤이즈 이미지 패치 및 해당 헤이즈 이미지 패치에 대응하는 헤이즈-프리 정보 쌍을 상기 CNN 모델을 학습하기 위한 트레이닝 데이터로 사용하는 것을 특징으로 하는 이미지 디헤이징 방법
2 2
제1항에 있어서,상기 추정하는 단계는,상기 CNN 모델에서 상기 전달량과 상기 환경광 중 어느 하나를 고정시키고 다른 하나를 트레이닝 하는 단계를 포함하는 이미지 디헤이징 방법
3 3
삭제
4 4
삭제
5 5
삭제
6 6
삭제
7 7
삭제
8 8
삭제
9 9
삭제
10 10
삭제
11 11
제1항에 있어서,상기 생성하는 단계는,수학식 1을 통해 상기 복원 영상을 생성하는 것을 특징으로 하는 이미지 디헤이징 방법
12 12
삭제
13 13
컴퓨터로 구현되는 이미지 디헤이징(dehazing) 시스템에 있어서,상기 컴퓨터에서 판독 가능한 명령을 실행하도록 구현되는 적어도 하나의 프로세서를 포함하고,상기 적어도 하나의 프로세서는,수중 환경에서 촬영된 수중 이미지에 대하여 CNN(convolutional neural network) 모델을 이용하여 상기 수중 이미지에서 빛의 전달량(transmission map)과 환경광(ambient light)을 추정한 후,상기 전달량과 상기 환경광에 기초하여 상기 수중 이미지에서 디헤이징 처리된 복원 영상을 생성하고,상기 적어도 하나의 프로세서는,상기 수중 이미지의 차원 축소를 위한 멀티-스케일 융합 단계(multi-scale fusion stage), 상기 수중 이미지의 헤이즈(haze)-관련 특성들을 추출하기 위한 멀티-스케일 특성 추출 단계(multi-scale feature extraction stage), 상기 전달량과 상기 환경광의 추정을 위한 비선형 회귀 단계(nonlinear regression stage)를 포함하는 상기 CNN 모델을 통해 상기 전달량과 상기 환경광을 추정하고,상기 멀티-스케일 융합 단계는: 서로 다른 사이즈 필터를 가진 복수의 컨볼루션 레이어(convolution layer)로 구성되고, 마지막 과정에서 픽셀의 엘리먼트-와이즈 합(element-wise summation) 연산을 수행하고,상기 멀티-스케일 특성 추출 단계는: 상기 수중 이미지의 심도(depth) 방향에서 특성을 추출하기 위한 최대 유닛(maxout unit)과, 헤이즈-관련 특성을 추출하기 위한 적어도 하나의 컨볼루션 레이어(convolution layer)로 구성되고, 상기 컨볼루션 레이어 다음으로 공간적으로 변하지 않는 특성을 추출하기 위한 최대-풀링 레이어(max-pooling layer)로 구성되고, 상기 컨볼루션 레이어 각각은 ReLU(Rectified Linear Unit) 활성화 기능을 가지며,상기 비선형 회귀 단계는: 컨볼루션 레이어(convolution layer)가 단일 필터로 구성되고, 상기 컨볼루션 레이어의 뒤에 ReLU(Rectified Linear Unit) 레이어가 추가되고,상기 CNN 모델에 해당되는 공통된 모델 구조를 이용하여 상기 전달량과 상기 환경광을 각각 추정하는 것으로,랜덤 전달량과 랜덤 환경광을 가지는 헤이즈-프리 이미지 패치로부터 트레이닝에 필요한 헤이즈 이미지 패치를 생성하여 각 헤이즈 이미지 패치 및 해당 헤이즈 이미지 패치에 대응하는 헤이즈-프리 정보 쌍을 상기 CNN 모델을 학습하기 위한 트레이닝 데이터로 사용하는 것을 특징으로 하는 이미지 디헤이징 시스템
14 14
제13항에 있어서,상기 적어도 하나의 프로세서는,상기 CNN 모델에서 상기 전달량과 상기 환경광 중 어느 하나를 고정시키고 다른 하나를 트레이닝 하는 것을 특징으로 하는 이미지 디헤이징 시스템
15 15
삭제
16 16
삭제
17 17
삭제
18 18
삭제
19 19
삭제
20 20
제13항에 있어서,상기 적어도 하나의 프로세서는,수학식 2를 통해 상기 복원 영상을 생성하는 것을 특징으로 하는 이미지 디헤이징 시스템
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 미래창조과학부 한국과학기술원 이공분야기초연구사업 수중 로봇의 인프라 모니터링을 위한 광학센서와 소나센서의 강건성과 실시간성 연구