맞춤기술찾기

이전대상기술

HDR 이미지 생성 장치 및 방법

  • 기술번호 : KST2022002794
  • 담당센터 : 경기기술혁신센터
  • 전화번호 : 031-8006-1570
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 HDR 이미지 생성 장치 및 방법이 개시된다. 일 실시예에 따르면 HDR 이미지 생성 장치는, 원본 이미지에 포함된 각 픽셀의 밝기 값에 기초하여 상기 원본 이미지에서 상기 밝기 값이 특정 값 이상인 영역을 포함하는 제1 이미지 및 상기 원본 이미지에서 상기 특정 값 이상인 영역을 제외한 나머지 영역을 포함하는 제2 이미지를 생성하는 입력 이미지 생성부; 제1 신경망, 제2 신경망 및 제3 신경망을 포함하는 사전 학습된 모델을 이용하여 상기 제1 이미지 및 상기 제2 이미지로부터 상기 원본 이미지의 다이내믹 레인지(Dynamic range)를 확장시킨 HDR(High Dynamic Range) 이미지를 생성하는 HDR 이미지 생성부를 포함하고, 상기 제1 신경망은, 상기 제1 이미지에 기초하여 밝기 값이 증가되는 방향으로 상기 제1 이미지의 밝기 값의 범위를 확장시킨 제3 이미지를 출력하도록 사전 학습되고, 상기 제2 신경망은, 상기 제2 이미지에 기초하여 밝기 값을 감소하는 방향으로 상기 제2 이미지의 밝기 값의 범위를 확장시킨 제4 이미지를 출력하도록 사전 학습되고, 상기 제3 신경망은, 상기 제3 이미지 및 상기 제4 이미지에 기초하여 상기 HDR 이미지를 생성하도록 사전 학습된다.
Int. CL G06T 5/00 (2019.01.01) G06N 3/08 (2006.01.01)
CPC G06T 5/007(2013.01) G06T 5/004(2013.01) G06N 3/08(2013.01) G06T 2207/20208(2013.01) G06T 2207/20081(2013.01) G06T 2207/20084(2013.01)
출원번호/일자 1020210001617 (2021.01.06)
출원인 아주대학교산학협력단
등록번호/일자 10-2374069-0000 (2022.03.08)
공개번호/일자
공고번호/일자 (20220311) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2021.01.06)
심사청구항수 14

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 아주대학교산학협력단 대한민국 경기도 수원시 영통구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 선우명훈 서울특별시 서초구
2 이병대 경기도 용인시 수지구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 두호특허법인 대한민국 서울특별시 강남구 언주로***, *층(논현동,시그너스빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 아주대학교산학협력단 경기도 수원시 영통구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2021.01.06 수리 (Accepted) 1-1-2021-0016887-07
2 선행기술조사의뢰서
Request for Prior Art Search
2021.06.18 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2021.09.17 발송처리완료 (Completion of Transmission) 9-6-2021-0213761-99
4 의견제출통지서
Notification of reason for refusal
2021.11.22 발송처리완료 (Completion of Transmission) 9-5-2021-0913067-72
5 [거절이유 등 통지에 따른 의견]의견서·답변서·소명서
2022.01.20 수리 (Accepted) 1-1-2022-0076646-30
6 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2022.01.20 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2022-0076647-86
7 등록결정서
Decision to grant
2022.02.08 발송처리완료 (Completion of Transmission) 9-5-2022-0103563-19
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
원본 이미지에 포함된 각 픽셀의 밝기 값에 기초하여 상기 원본 이미지에서 상기 밝기 값이 특정 값 이상인 영역을 포함하는 제1 이미지 및 상기 원본 이미지에서 상기 특정 값 이상인 영역을 제외한 나머지 영역을 포함하는 제2 이미지를 생성하는 단계; 및제1 신경망, 제2 신경망 및 제3 신경망을 포함하는 사전 학습된 모델을 이용하여 상기 제1 이미지 및 상기 제2 이미지로부터 상기 원본 이미지의 다이내믹 레인지(Dynamic range)를 확장시킨 HDR(High Dynamic Range) 이미지를 생성하는 단계를 포함하고,상기 제1 신경망은, 상기 제1 이미지에 기초하여 밝기 값이 증가되는 방향으로 상기 제1 이미지의 밝기 값의 범위를 확장시킨 제3 이미지를 출력하도록 사전 학습되고,상기 제2 신경망은, 상기 제2 이미지에 기초하여 밝기 값을 감소하는 방향으로 상기 제2 이미지의 밝기 값의 범위를 확장시킨 제4 이미지를 출력하도록 사전 학습되고,상기 제3 신경망은, 상기 제3 이미지 및 상기 제4 이미지에 기초하여 상기 HDR 이미지를 생성하도록 사전 학습되며, 상기 제1 이미지 및 상기 제2 이미지를 생성하는 단계는,상기 각 픽셀의 밝기 값에 기초하여 마스크(mask)를 생성하는 단계;상기 마스크를 이용하여 상기 원본 이미지를 마스킹(masking)하여 상기 제1 이미지를 생성하는 단계; 및 상기 제1 이미지의 밝기를 반전시켜 상기 제2 이미지를 생성하는 단계를 포함하고, 상기 마스크를 생성하는 단계는, 하기 수학식 1을 이용하여 상기 마스크를 생성하는, HDR 이미지 생성 방법
2 2
삭제
3 3
삭제
4 4
청구항 1항에 있어서, 상기 임계 값은, 상기 각 픽셀의 밝기 평균 값에 기초하여 설정되는, HDR 이미지 생성 방법
5 5
청구항 1항에 있어서, 상기 제1 신경망은, 상기 제1 이미지에 컨볼루션(Convolution) 연산을 수행하여 상기 제1 이미지에 대한 제1 특징 벡터를 출력하는 제1 컨볼루션 층(Convolution layer) 및 상기 제1 특징 벡터에 대한 최대 풀링(max pooling)을 수행하는 제1 풀링 층(pooling layer)을 포함하고, 상기 제2 신경망은, 상기 제2 이미지에 컨볼루션 연산을 수행하여 상기 제2 이미지에 대한 제2 특징 벡터를 출력하는 제2 컨볼루션 층 및 상기 제2 특징 벡터에 대한 최소 풀링(min pooling)을 수행하는 제2 풀링층을 포함하는, HDR 이미지 생성 방법
6 6
청구항 1항에 있어서, 상기 제3 신경망은, 상기 제3 이미지 및 상기 제4 이미지를 합성한 제5 이미지로부터 제3 특징 벡터를 추출하고, 상기 추출된 제3 특징 벡터에 기초하여 상기 HDR 이미지를 생성하도록 사전 학습되는, HDR 이미지 생성 방법
7 7
원본 이미지에 포함된 각 픽셀의 밝기 값에 기초하여 상기 원본 이미지에서 상기 밝기 값이 특정 값 이상인 영역을 포함하는 제1 이미지 및 상기 원본 이미지에서 상기 특정 값 이상인 영역을 제외한 나머지 영역을 포함하는 제2 이미지를 생성하는 단계; 및제1 신경망, 제2 신경망 및 제3 신경망을 포함하는 사전 학습된 모델을 이용하여 상기 제1 이미지 및 상기 제2 이미지로부터 상기 원본 이미지의 다이내믹 레인지(Dynamic range)를 확장시킨 HDR(High Dynamic Range) 이미지를 생성하는 단계를 포함하고,상기 제1 신경망은, 상기 제1 이미지에 기초하여 밝기 값이 증가되는 방향으로 상기 제1 이미지의 밝기 값의 범위를 확장시킨 제3 이미지를 출력하도록 사전 학습되고,상기 제2 신경망은, 상기 제2 이미지에 기초하여 밝기 값을 감소하는 방향으로 상기 제2 이미지의 밝기 값의 범위를 확장시킨 제4 이미지를 출력하도록 사전 학습되고,상기 제3 신경망은, 상기 제3 이미지 및 상기 제4 이미지에 기초하여 상기 HDR 이미지를 생성하도록 사전 학습되며,상기 사전 학습된 모델은, 상기 원본 이미지에 대한 서브 샘플링(sub-sampling)을 수행하여 상기 원본 이미지에 대한 특징 벡터를 생성하도록 사전 학습된 제4 신경망을 더 포함하는, HDR 이미지 생성 방법
8 8
청구항 7항에 있어서, 상기 제1 신경망은, 상기 제1 이미지에 대한 제1 특징 벡터를 추출하고, 상기 제1 이미지에 대한 제1 특징 벡터 및 상기 원본 이미지에 대한 특징 벡터에 기초하여 상기 제3 이미지를 생성하도록 사전 학습되며, 상기 제2 신경망은, 상기 제2 이미지에 대한 제2 특징 벡터를 추출하고, 상기 제2 이미지에 대한 제2 특징 벡터 및 상기 원본 이미지에 대한 특징 벡터에 기초하여 상기 제4 이미지를 생성하도록 사전 학습되는, HDR 이미지 생성 방법
9 9
청구항 7항에 있어서, 상기 제3 신경망은, 상기 제3 이미지 및 상기 제4 이미지를 합성한 제5 이미지로부터 제3 특징 벡터를 추출하고, 상기 제3 특징 벡터와 상기 원본 이미지에 대한 특징 벡터에 기초하여 상기 HDR 이미지를 생성하도록 사전 학습되는, HDR 이미지 생성 방법
10 10
원본 이미지에 포함된 각 픽셀의 밝기 값에 기초하여 상기 원본 이미지에서 상기 밝기 값이 특정 값 이상인 영역을 포함하는 제1 이미지 및 상기 원본 이미지에서 상기 특정 값 이상인 영역을 제외한 나머지 영역을 포함하는 제2 이미지를 생성하는 입력 이미지 생성부; 및제1 신경망, 제2 신경망 및 제3 신경망을 포함하는 사전 학습된 모델을 이용하여 상기 제1 이미지 및 상기 제2 이미지로부터 상기 원본 이미지의 다이내믹 레인지(Dynamic range)를 확장시킨 HDR(High Dynamic Range) 이미지를 생성하는 HDR 이미지 생성부를 포함하고,상기 제1 신경망은, 상기 제1 이미지에 기초하여 밝기 값이 증가되는 방향으로 상기 제1 이미지의 밝기 값의 범위를 확장시킨 제3 이미지를 출력하도록 사전 학습되고,상기 제2 신경망은, 상기 제2 이미지에 기초하여 밝기 값을 감소하는 방향으로 상기 제2 이미지의 밝기 값의 범위를 확장시킨 제4 이미지를 출력하도록 사전 학습되고,상기 제3 신경망은, 상기 제3 이미지 및 상기 제4 이미지에 기초하여 상기 HDR 이미지를 생성하도록 사전 학습되며, 상기 입력 이미지 생성부는,상기 각 픽셀의 밝기 값에 기초하여 마스크(mask)를 생성하고 상기 마스크로 상기 원본 이미지를 마스킹(masking)하여 상기 제1 이미지를 생성하며, 상기 제1 이미지의 밝기를 반전시켜 상기 제2 이미지를 생성하되, 하기 수학식 1을 이용하여 상기 마스크를 생성하는, HDR 이미지 생성 장치
11 11
삭제
12 12
삭제
13 13
청구항 10항에 있어서, 상기 임계 값은, 상기 각 픽셀의 밝기 평균 값에 기초하여 설정되는, HDR 이미지 생성 장치
14 14
청구항 10항에 있어서, 상기 제1 신경망은, 상기 제1 이미지에 컨볼루션(Convolution) 연산을 수행하여 상기 제1 이미지에 대한 제1 특징 벡터를 출력하는 제1 컨볼루션 층(Convolution layer) 및 상기 제1 특징 벡터에 대한 최대 풀링(max pooling)을 수행하는 제1 풀링 층(pooling layer)을 포함하고, 상기 제2 신경망은, 상기 제2 이미지에 컨볼루션 연산을 수행하여 상기 제2 이미지에 대한 제2 특징 벡터를 출력하는 제2 컨볼루션 층 및 상기 제2 특징 벡터에 대한 최소 풀링(min pooling)을 수행하는 제2 풀링층을 포함하는, HDR 이미지 생성 장치
15 15
청구항 10항에 있어서, 상기 제3 신경망은, 제3 이미지 및 상기 제4 이미지를 합성한 제5 이미지로부터 제3 특징 벡터를 추출하고, 상기 추출된 제3 특징 벡터에 기초하여 상기 HDR 이미지를 생성하도록 사전 학습되는, HDR 이미지 생성 장치
16 16
원본 이미지에 포함된 각 픽셀의 밝기 값에 기초하여 상기 원본 이미지에서 상기 밝기 값이 특정 값 이상인 영역을 포함하는 제1 이미지 및 상기 원본 이미지에서 상기 특정 값 이상인 영역을 제외한 나머지 영역을 포함하는 제2 이미지를 생성하는 입력 이미지 생성부; 및제1 신경망, 제2 신경망 및 제3 신경망을 포함하는 사전 학습된 모델을 이용하여 상기 제1 이미지 및 상기 제2 이미지로부터 상기 원본 이미지의 다이내믹 레인지(Dynamic range)를 확장시킨 HDR(High Dynamic Range) 이미지를 생성하는 HDR 이미지 생성부를 포함하고,상기 제1 신경망은, 상기 제1 이미지에 기초하여 밝기 값이 증가되는 방향으로 상기 제1 이미지의 밝기 값의 범위를 확장시킨 제3 이미지를 출력하도록 사전 학습되고,상기 제2 신경망은, 상기 제2 이미지에 기초하여 밝기 값을 감소하는 방향으로 상기 제2 이미지의 밝기 값의 범위를 확장시킨 제4 이미지를 출력하도록 사전 학습되고,상기 제3 신경망은, 상기 제3 이미지 및 상기 제4 이미지에 기초하여 상기 HDR 이미지를 생성하도록 사전 학습되며, 상기 사전 학습된 모델은, 상기 원본 이미지에 대한 서브 샘플링(sub-sampling)을 수행하여, 상기 원본 이미지에 대한 특징 벡터를 생성하도록 사전 학습된 제4 신경망을 더 포함하는, HDR 이미지 생성 장치
17 17
청구항 16항에 있어서, 상기 제1 신경망은, 상기 제1 이미지에 대한 제1 특징 벡터를 추출하고, 상기 제1 특징 벡터 및 상기 원본 이미지에 대한 특징 벡터에 기초하여 상기 제3 이미지를 생성하도록 사전 학습되며, 상기 제2 신경망은, 상기 제2 이미지에 대한 제2 특징 벡터를 추출하고, 상기 제2 특징 벡터 및 상기 원본 이미지에 대한 특징 벡터에 기초하여 상기 제4 이미지를 생성하도록 사전 학습되는, HDR 이미지 생성 장치
18 18
청구항 16항에 있어서, 상기 제3 신경망은, 상기 제3 이미지 및 상기 제4 이미지를 합성한 제5 이미지로부터 제3 특징 벡터를 추출하고, 상기 제3 특징 벡터와 상기 원본 이미지에 대한 특징 벡터에 기초하여 상기 HDR 이미지를 생성하도록 사전 학습되는, HDR 이미지 생성 장치
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 산업통상자원부 인하대학교산학협력단 소재부품산업미래성장동력(R&D) CMOS Image Sensor 영상 처리를 위한 저전력 deep learning HW IP 설계 기술 개발
2 과학기술정보통신부 아주대학교산학협력단 정보통신방송혁신인재양성(R&D) 지능형 의료영상 진단 솔루션 개발
3 과학기술정보통신부 서울대학교 시스템반도체융합전문인력육성(R&D) 인공지능 반도체 융합전문인력육성사업