맞춤기술찾기

이전대상기술

딥러닝 기반의 초해상화 이미지 처리 시스템과 방법 및 이를 위한 컴퓨터 프로그램

  • 기술번호 : KST2022015874
  • 담당센터 : 서울동부기술혁신센터
  • 전화번호 : 02-2155-3662
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 딥러닝(deep learning) 기반의 초해상화(super-resolution) 이미지 처리 시스템은, 무인 비행체에 의해 촬영된 이미지를 입력받고, 이미지 데이터를 송신 큐(queue)에 할당하여 송신하도록 구성된 무인 비행체 시스템; 및 각각 수신 큐를 갖는 하나 이상의 송수신기를 포함하며, 상기 하나 이상의 송수신기를 통하여 상기 무인 비행체 시스템으로부터 상기 이미지 데이터를 수신하고, 초해상화 모델에 기초한 딥러닝 연산을 통하여 상기 이미지 데이터에 상응하는 초해상화 이미지를 생성하도록 구성된 모바일 엣지 컴퓨팅(Mobile Edge Computing; MEC) 센터를 포함할 수 있다. 상기 무인 비행체 시스템은 상기 송신 큐와 상기 수신 큐의 데이터량 차이에 기초하여 상기 이미지 데이터를 전송할 상기 송수신기를 결정할 수 있다. 또한, 상기 MEC 센터는, 상기 이미지 데이터에 초해상화 모델을 적용하였을 때의 품질 평가값 및 상기 수신 큐의 큐 안정성값을 이용하여 리아푸노프 최적화(Lyapunov optimization)에 의해 정의되는 시간 평균 초해상화 성능이 최대화되도록 상기 이미지 데이터에 적용할 초해상화 모델을 결정할 수 있다.
Int. CL G06T 3/40 (2006.01.01) H04L 47/00 (2022.01.01)
CPC G06T 3/4053(2013.01) H04L 47/6255(2013.01) G06T 2207/20016(2013.01) G06T 2207/20081(2013.01) G06T 2207/20084(2013.01)
출원번호/일자 1020210014331 (2021.02.01)
출원인 고려대학교 산학협력단, 제주대학교 산학협력단
등록번호/일자
공개번호/일자 10-2022-0111111 (2022.08.09) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 공개
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2021.02.01)
심사청구항수 13

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 고려대학교 산학협력단 대한민국 서울특별시 성북구
2 제주대학교 산학협력단 대한민국 제주특별자치도 제주시 제주

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 김중헌 서울특별시 동작구
2 강영은 서울특별시 동작구
3 박수현 인천광역시 연수구
4 최민석 제주특별자치도 제주시 제주대학

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 윤귀상 대한민국 서울특별시 금천구 디지털로*길 ** ***호 (가산동, 한신IT타워*차)(디앤특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2021.02.01 수리 (Accepted) 1-1-2021-0130499-36
2 [출원서 등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2021.02.03 수리 (Accepted) 1-1-2021-0137873-17
3 선행기술조사의뢰서
Request for Prior Art Search
2022.03.15 수리 (Accepted) 9-1-9999-9999999-89
4 선행기술조사보고서
Report of Prior Art Search
2022.05.18 발송처리완료 (Completion of Transmission) 9-6-2022-0111793-14
5 의견제출통지서
Notification of reason for refusal
2022.06.30 발송처리완료 (Completion of Transmission) 9-5-2022-0481773-66
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
무인 비행체에 의해 촬영된 이미지를 입력받고, 이미지 데이터를 송신 큐에 할당하여 송신하도록 구성된 무인 비행체 시스템; 및 각각 수신 큐를 갖는 하나 이상의 송수신기를 포함하며, 상기 하나 이상의 송수신기를 통하여 상기 무인 비행체 시스템으로부터 상기 이미지 데이터를 수신하고, 초해상화 모델에 기초한 딥러닝 연산을 통하여 상기 이미지 데이터에 상응하는 초해상화 이미지를 생성하도록 구성된 모바일 엣지 컴퓨팅 센터를 포함하되, 상기 무인 비행체 시스템은 상기 송신 큐와 상기 수신 큐의 데이터량 차이에 기초하여 상기 이미지 데이터를 전송할 상기 송수신기를 결정하도록 더 구성된 딥러닝 기반의 초해상화 이미지 처리 시스템
2 2
제1항에 있어서, 상기 무인 비행체 시스템은, 촬영 수단으로부터 상기 이미지를 입력받도록 구성된 입력부; 및 상기 송신 큐를 포함하며, 상기 송신 큐의 대기열에 있는 데이터량과 상기 수신 큐의 대기열에 있는 데이터량의 차이를 가중치로 이용한 스케줄링에 의해 상기 이미지 데이터를 전송할 상기 송수신기를 결정하도록 구성된 송신부를 포함하는 딥러닝 기반의 초해상화 이미지 처리 시스템
3 3
제2항에 있어서, 상기 무인 비행체 시스템은, 상기 입력부에 입력된 상기 이미지에 대한 계층화를 통하여 상기 송신 큐에 할당되기 위한 상기 이미지 데이터를 생성하도록 구성된 계층화부를 더 포함하는 딥러닝 기반의 초해상화 이미지 처리 시스템
4 4
제1항에 있어서, 상기 모바일 엣지 컴퓨팅 센터는, 상기 수신 큐의 여유 공간에 기초하여 상기 수신 큐를 통해 수신된 상기 이미지 데이터에 적용할 초해상화 모델을 결정하고, 결정된 초해상화 모델을 이용하여 상기 초해상화 이미지를 생성하도록 구성된 초해상화 모듈을 포함하는 딥러닝 기반의 초해상화 이미지 처리 시스템
5 5
제4항에 있어서, 상기 초해상화 모듈은,처리 속도 및 처리 품질 중 하나 이상이 상이한 복수 개의 초해상화 모델을 저장하도록 구성된 저장부; 및싱기 이미지 데이터에 대한 시간 평균 초해상화 성능을 최대화하도록 상기 복수 개의 초해상화 모델 중 상기 이미지 데이터에 적용할 초해상화 모델을 결정하도록 구성된 제어부를 포함하는 딥러닝 기반의 초해상화 이미지 처리 시스템
6 6
제5항에 있어서, 상기 제어부는, 상기 이미지 데이터에 초해상화 모델을 적용하였을 때의 품질 평가값 및 상기 수신 큐의 큐 안정성값을 이용하여 리아푸노프 최적화에 의해 정의되는 시간 평균 초해상화 성능이 최대화되도록 상기 이미지 데이터에 적용할 초해상화 모델을 결정하도록 더 구성된 딥러닝 기반의 초해상화 이미지 처리 시스템
7 7
무인 비행체 시스템이 촬영 이미지를 입력받는 단계; 상기 무인 비행체 시스템이 상기 촬영 이미지에 상응하는 이미지 데이터를 송신 큐에 할당하는 단계; 상기 무인 비행체 시스템이, 초해상화 모델에 기초한 딥러닝 연산을 통하여 상기 이미지 데이터에 상응하는 초해상화 이미지를 생성하기 위한 모바일 엣지 컴퓨팅 센터에 포함된 하나 이상의 송수신기의 수신 큐의 상태 정보를 수신하는 단계; 상기 무인 비행체 시스템이 상기 송신 큐와 상기 수신 큐의 데이터량 차이에 기초하여 상기 이미지 데이터를 전송할 상기 송수신기를 결정하는 단계; 및 상기 무인 비행체 시스템이 결정된 상기 송수신기에 상기 이미지 데이터를 전송하는 단계를 포함하는 딥러닝 기반의 초해상화 이미지 처리 방법
8 8
제7항에 있어서, 상기 이미지 데이터를 전송할 상기 송수신기를 결정하는 단계는, 상기 무인 비행체 시스템이, 상기 송신 큐의 대기열에 있는 데이터량과 상기 수신 큐의 대기열에 있는 데이터량의 차이를 가중치로 이용한 스케줄링에 의해 상기 이미지 데이터를 전송할 상기 송수신기를 결정하는 단계를 포함하는 딥러닝 기반의 초해상화 이미지 처리 방법
9 9
제7항에 있어서, 상기 이미지 데이터를 송신 큐에 할당하는 단계 전에, 상기 무인 비행체 시스템이, 상기 촬영 이미지에 대한 계층화를 통하여 상기 송신 큐에 할당되기 위한 상기 이미지 데이터를 생성하는 단계를 더 포함하는 딥러닝 기반의 초해상화 이미지 처리 방법
10 10
각각 수신 큐를 갖는 하나 이상의 송수신기를 포함하는 모바일 엣지 컴퓨팅 센터가, 상기 하나 이상의 송수신기를 통하여 무인 비행체 시스템으로부터 이미지 데이터를 수신하는 단계; 상기 모바일 엣지 컴퓨팅 센터가, 상기 하나 이상의 수신 큐 각각의 여유 공간에 기초하여 상기 수신 큐를 통해 수신된 상기 이미지 데이터에 적용할 초해상화 모델을 결정하는 단계; 및 상기 모바일 엣지 컴퓨팅 센터가, 결정된 상기 초해상화 모델에 기초한 딥러닝 연산을 통하여 상기 이미지 데이터에 상응하는 초해상화 이미지를 생성하는 단계를 포함하는 딥러닝 기반의 초해상화 이미지 처리 시스템
11 11
제10항에 있어서, 처리 속도 및 처리 품질 중 하나 이상이 상이한 복수 개의 초해상화 모델을 상기 모바일 엣지 컴퓨팅 센터에 저장하는 단계를 더 포함하되,상기 이미지 데이터에 적용할 초해상화 모델을 결정하는 단계는, 상기 모바일 엣지 컴퓨팅 센터가, 상기 이미지 데이터에 대한 시간 평균 초해상화 성능을 최대화하도록 상기 복수 개의 초해상화 모델 중 상기 이미지 데이터에 적용할 초해상화 모델을 결정하는 단계를 포함하는 딥러닝 기반의 초해상화 이미지 처리 시스템
12 12
제11항에 있어서, 상기 복수 개의 초해상화 모델 중 상기 이미지 데이터에 적용할 초해상화 모델을 결정하는 단계는, 상기 모바일 엣지 컴퓨팅 센터가, 상기 이미지 데이터에 초해상화 모델을 적용하였을 때의 품질 평가값 및 상기 수신 큐의 큐 안정성값을 이용하여 리아푸노프 최적화에 의해 정의되는 시간 평균 초해상화 성능이 최대화되는 초해상화 모델을 결정하는 단계를 포함하는 딥러닝 기반의 초해상화 이미지 처리 방법
13 13
하드웨어와 결합되어 제7항 내지 제12항 중 어느 한 항에 따른 딥러닝 기반의 초해상화 이미지 처리 방법을 실행하도록 컴퓨터로 판독 가능한 기록매체에 저장된 컴퓨터 프로그램
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 과학기술정보통신부 고려대학교 개인기초연구(과기정통부)(R&D) mmWave 레이더 및 심층 강화학습 기반 최적 정책 자율주행 연구