맞춤기술찾기

이전대상기술

뉴럴 네트워크를 이용한 비매칭 저화질 영상 처리 방법 및 그 장치

  • 기술번호 : KST2022009103
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 뉴럴 네트워크를 이용한 비매칭 저화질 영상 처리 방법 및 그 장치가 개시된다. 본 발명의 일 실시예에 따른 영상 처리 방법은 입력 영상에 대한 웨이블릿 서브밴드 영상을 수신하는 단계; 웨이블릿 서브밴드에 대한 사이클 일관성(cycle consistency)을 가지는 비지도 학습 기반의 뉴럴 네트워크를 이용하여 상기 수신된 웨이블릿 서브밴드 영상에서 노이즈를 제거함으로써, 상기 노이즈가 제거된 웨이블릿 서브밴드 영상을 획득하는 단계; 및 상기 수신된 웨이블릿 서브밴드 영상과 상기 노이즈가 제거된 웨이블릿 서브밴드 영상에 기초하여 상기 입력 영상에서 노이즈가 제거된 고화질의 출력 영상을 복원하는 단계를 포함한다.
Int. CL G06T 3/40 (2006.01.01) G06T 5/00 (2019.01.01) G06N 3/08 (2006.01.01) G06N 3/04 (2006.01.01)
CPC G06T 3/4076(2013.01) G06T 5/002(2013.01) G06N 3/08(2013.01) G06N 3/04(2013.01) G06T 2207/20081(2013.01) G06T 2207/20084(2013.01) G06T 2207/20064(2013.01)
출원번호/일자 1020200179776 (2020.12.21)
출원인 한국과학기술원
등록번호/일자
공개번호/일자 10-2022-0089284 (2022.06.28) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 공개
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2020.12.21)
심사청구항수 17

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국과학기술원 대한민국 대전광역시 유성구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 예종철 대전광역시 유성구
2 송준영 대전광역시 유성구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 양성보 대한민국 서울특별시 강남구 선릉로***길 ** (논현동) 삼성빌딩 *층(피앤티특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2020.12.21 수리 (Accepted) 1-1-2020-1388914-11
2 선행기술조사의뢰서
Request for Prior Art Search
2022.03.15 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2022.05.18 발송처리완료 (Completion of Transmission) 9-6-2022-0102814-85
4 의견제출통지서
Notification of reason for refusal
2022.06.15 발송처리완료 (Completion of Transmission) 9-5-2022-0438400-54
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
입력 영상에 대한 웨이블릿 서브밴드 영상을 수신하는 단계;웨이블릿 서브밴드에 대한 사이클 일관성(cycle consistency)을 가지는 비지도 학습 기반의 뉴럴 네트워크를 이용하여 상기 수신된 웨이블릿 서브밴드 영상에서 노이즈를 제거함으로써, 상기 노이즈가 제거된 웨이블릿 서브밴드 영상을 획득하는 단계; 및상기 수신된 웨이블릿 서브밴드 영상과 상기 노이즈가 제거된 웨이블릿 서브밴드 영상에 기초하여 상기 입력 영상에서 노이즈가 제거된 고화질의 출력 영상을 복원하는 단계를 포함하는 영상 처리 방법
2 2
제1항에 있어서,상기 복원하는 단계는상기 수신된 웨이블릿 서브밴드 영상과 상기 노이즈가 제거된 웨이블릿 서브밴드 영상을 이용하여 노이즈 패턴을 추정하고, 상기 추정된 노이즈 패턴과 상기 입력 영상을 이용하여 상기 고화질의 출력 영상을 복원하는 것을 특징으로 하는 영상 처리 방법
3 3
제1항에 있어서,상기 수신하는 단계는상기 입력 영상을 웨이블릿 변환(wavelet transform)하여 노이즈가 포함된 밴드만을 재구성함으로써, 상기 노이즈가 포함된 웨이블릿 서브밴드 영상을 수신하는 것을 특징으로 하는 영상 처리 방법
4 4
제1항에 있어서,상기 획득하는 단계는상기 뉴럴 네트워크를 이용하여 상기 수신된 웨이블릿 서브밴드 영상에서 수직 스트라이프 노이즈 또는 수평 파동 노이즈를 제거함으로써, 상기 노이즈가 제거된 웨이블릿 서브밴드 영상을 획득하는 것을 특징으로 하는 영상 처리 방법
5 5
제1항에 있어서,상기 뉴럴 네트워크는비매칭 데이터를 포함하는 트레이닝 데이터셋을 이용하여 학습되는 것을 특징으로 하는 영상 처리 방법
6 6
제1항에 있어서,상기 뉴럴 네트워크는노이즈를 포함하고 있는 저화질의 제1 웨이블릿 서브밴드 영상을 입력으로 상기 제1 웨이블릿 서브밴드 영상을 노이즈가 제거된 고화질의 제2 웨이블릿 서브밴드 영상으로 변환하는 제1 뉴럴 네트워크;상기 제2 웨이블릿 서브밴드 영상을 입력으로 상기 제2 웨이블릿 서브밴드 영상을 노이즈가 포함된 저화질의 제3 웨이블릿 서브밴드 영상으로 변환하는 제2 뉴럴 네트워크;상기 제1 웨이블릿 서브밴드 영상과 상기 제1 웨이블릿 서브밴드 영상에 대응하는 고화질의 실제 영상인 제3 웨이블릿 서브밴드 영상에 노이즈를 포함시킨 제4 웨이블릿 서브밴드 영상을 구별하는 제3 뉴럴 네트워크; 및상기 제2 웨이블릿 서브밴드 영상과 상기 제3 웨이블릿 서브밴드 영상을 구별하는 제4 뉴럴 네트워크를 포함하는 것을 특징으로 하는 영상 처리 방법
7 7
제1항에 있어서,상기 뉴럴 네트워크는저품질의 웨이블릿 서브밴드 영상과 고품질의 웨이블릿 서브밴드 영상에 대하여, 미리 정의된 사이클 손실(cyclic loss), 적대적 손실(adversarial loss) 및 식별 손실(identity loss)에 기초하여 학습되는 것을 특징으로 하는 영상 처리 방법
8 8
제1항에 있어서,상기 뉴럴 네트워크는컨볼루션 프레임렛(convolution framelet) 기반의 뉴럴 네트워크 및 풀링 레이어와 언풀링 레이어를 포함하는 뉴럴 네트워크 중 어느 하나의 뉴럴 네트워크를 포함하는 것을 특징으로 하는 영상 처리 방법
9 9
의료 영상에 대한 웨이블릿 서브밴드 영상을 수신하는 단계;웨이블릿 서브밴드에 대한 사이클 일관성(cycle consistency)을 가지는 비지도 학습 기반의 뉴럴 네트워크를 이용하여 상기 수신된 웨이블릿 서브밴드 영상에서 노이즈를 제거함으로써, 상기 노이즈가 제거된 웨이블릿 서브밴드 영상을 획득하는 단계; 및상기 수신된 웨이블릿 서브밴드 영상과 상기 노이즈가 제거된 웨이블릿 서브밴드 영상에 기초하여 상기 의료 영상에서 노이즈가 제거된 고화질의 출력 영상을 복원하는 단계를 포함하는 의료 영상 처리 방법
10 10
입력 영상에 대한 웨이블릿 서브밴드 영상을 수신하는 수신부;웨이블릿 서브밴드에 대한 사이클 일관성(cycle consistency)을 가지는 비지도 학습 기반의 뉴럴 네트워크를 이용하여 상기 수신된 웨이블릿 서브밴드 영상에서 노이즈를 제거함으로써, 상기 노이즈가 제거된 웨이블릿 서브밴드 영상을 획득하는 획득부; 및상기 수신된 웨이블릿 서브밴드 영상과 상기 노이즈가 제거된 웨이블릿 서브밴드 영상에 기초하여 상기 입력 영상에서 노이즈가 제거된 고화질의 출력 영상을 복원하는 복원부를 포함하는 영상 처리 장치
11 11
제10항에 있어서,상기 복원부는상기 수신된 웨이블릿 서브밴드 영상과 상기 노이즈가 제거된 웨이블릿 서브밴드 영상을 이용하여 노이즈 패턴을 추정하고, 상기 추정된 노이즈 패턴과 상기 입력 영상을 이용하여 상기 고화질의 출력 영상을 복원하는 것을 특징으로 하는 영상 처리 장치
12 12
제10항에 있어서,상기 수신부는상기 입력 영상을 웨이블릿 변환(wavelet transform)하여 노이즈가 포함된 밴드만을 재구성함으로써, 상기 노이즈가 포함된 웨이블릿 서브밴드 영상을 수신하는 것을 특징으로 하는 영상 처리 장치
13 13
제10항에 있어서,상기 획득부는상기 뉴럴 네트워크를 이용하여 상기 수신된 웨이블릿 서브밴드 영상에서 수직 스트라이프 노이즈 또는 수평 파동 노이즈를 제거함으로써, 상기 노이즈가 제거된 웨이블릿 서브밴드 영상을 획득하는 것을 특징으로 하는 영상 처리 장치
14 14
제10항에 있어서,상기 뉴럴 네트워크는비매칭 데이터를 포함하는 트레이닝 데이터셋을 이용하여 학습되는 것을 특징으로 하는 영상 처리 장치
15 15
제10항에 있어서,상기 뉴럴 네트워크는노이즈를 포함하고 있는 저화질의 제1 웨이블릿 서브밴드 영상을 입력으로 상기 제1 웨이블릿 서브밴드 영상을 노이즈가 제거된 고화질의 제2 웨이블릿 서브밴드 영상으로 변환하는 제1 뉴럴 네트워크;상기 제2 웨이블릿 서브밴드 영상을 입력으로 상기 제2 웨이블릿 서브밴드 영상을 노이즈가 포함된 저화질의 제3 웨이블릿 서브밴드 영상으로 변환하는 제2 뉴럴 네트워크;상기 제1 웨이블릿 서브밴드 영상과 상기 제1 웨이블릿 서브밴드 영상에 대응하는 고화질의 실제 영상인 제3 웨이블릿 서브밴드 영상에 노이즈를 포함시킨 제4 웨이블릿 서브밴드 영상을 구별하는 제3 뉴럴 네트워크; 및상기 제2 웨이블릿 서브밴드 영상과 상기 제3 웨이블릿 서브밴드 영상을 구별하는 제4 뉴럴 네트워크를 포함하는 것을 특징으로 하는 영상 처리 장치
16 16
제10항에 있어서,상기 뉴럴 네트워크는저품질의 웨이블릿 서브밴드 영상과 고품질의 웨이블릿 서브밴드 영상에 대하여, 미리 정의된 사이클 손실(cyclic loss), 적대적 손실(adversarial loss) 및 식별 손실(identity loss)에 기초하여 학습되는 것을 특징으로 하는 영상 처리 장치
17 17
제10항에 있어서,상기 뉴럴 네트워크는컨볼루션 프레임렛(convolution framelet) 기반의 뉴럴 네트워크 및 풀링 레이어와 언풀링 레이어를 포함하는 뉴럴 네트워크 중 어느 하나의 뉴럴 네트워크를 포함하는 것을 특징으로 하는 영상 처리 장치
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 과학기술정보통신부 한국과학기술원 정보통신.방송 연구개발사업 상대방의 감성을 추론, 판단하여 그에 맞추어 대화하고 대응할 수 있는 감성 지능 연구개발(2020)