맞춤기술찾기

이전대상기술

칼라-모노 듀얼카메라 촬영 영상의 융합 방법, 시스템 및 컴퓨터-판독가능 매체

  • 기술번호 : KST2019037168
  • 담당센터 : 인천기술혁신센터
  • 전화번호 : 032-420-3580
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 칼라-모노 듀얼카메라 촬영 영상의 융합 방법, 시스템 및 컴퓨터-판독가능 매체에 관한 것으로서, 더욱 상세하게는 두 개의 분리된 카메라를 통해 촬영된 칼라영상 및 모노영상을 융합함으로써 저조도 촬영의 화질을 향상시킬 수 있는 칼라-모노 듀얼카메라 촬영 영상의 융합 방법, 시스템 및 컴퓨터-판독가능 매체에 관한 것이다.
Int. CL H04N 5/265 (2006.01.01) H04N 5/217 (2016.01.01) H04N 5/232 (2006.01.01) G06T 5/00 (2019.01.01) G06T 5/50 (2006.01.01) G06T 11/00 (2006.01.01)
CPC H04N 5/265(2013.01) H04N 5/265(2013.01) H04N 5/265(2013.01) H04N 5/265(2013.01) H04N 5/265(2013.01) H04N 5/265(2013.01)
출원번호/일자 1020180028725 (2018.03.12)
출원인 가천대학교 산학협력단
등록번호/일자 10-2020464-0000 (2019.09.04)
공개번호/일자
공고번호/일자 (20190910) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2018.03.12)
심사청구항수 14

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 가천대학교 산학협력단 대한민국 경기도 성남시 수정구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 정용주 대전광역시 서구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 강정빈 대한민국 서울특별시 서초구 양재천로 **길 *, *층 (양재동, 화암빌딩)(아이픽스특허법률사무소)
2 심찬 대한민국 서울특별시 서초구 양재천로**길 *(양재동) *층(아이픽스특허법률사무소)
3 송두현 대한민국 서울특별시 서초구 양재천로**길 *, *층(양재동, 화암빌딩)(아이픽스특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 가천대학교 산학협력단 경기도 성남시 수정구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2018.03.12 수리 (Accepted) 1-1-2018-0246670-97
2 선행기술조사의뢰서
Request for Prior Art Search
2018.09.07 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2018.12.07 수리 (Accepted) 9-1-2018-0068820-72
4 의견제출통지서
Notification of reason for refusal
2019.02.25 발송처리완료 (Completion of Transmission) 9-5-2019-0136334-40
5 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2019.04.08 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2019-0357085-02
6 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2019.04.08 수리 (Accepted) 1-1-2019-0357101-45
7 등록결정서
Decision to grant
2019.08.28 발송처리완료 (Completion of Transmission) 9-5-2019-0619574-31
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
칼라-모노 듀얼카메라 촬영 영상의 융합 방법으로서,칼라-모노 듀얼카메라를 통해 촬영된 모노영상 및 칼라영상을 입력 받는 영상입력단계;입력 받은 상기 모노영상 및 상기 칼라영상에 대해 전처리를 수행하는 전처리단계;전처리를 수행한 상기 칼라영상 및 전처리를 수행한 상기 모노영상으로부터 시차를 추정하는 시차추정단계;전처리를 수행한 상기 모노영상에 기초하여 전처리를 수행한 상기 칼라영상의 노이즈를 제거하여 디노이즈드칼라영상을 생성하는 조인트디노이징단계; 및상기 디노이즈드칼라영상으로부터 전처리를 수행한 상기 모노영상으로 색상정보를 전달하여 화질이 개선된 개선칼라영상을 생성하는 색상정보전달단계; 를 포함하고,상기 색상정보전달단계는,시차 오류의 가능성이 기설정된 기준 이하인 영역에 대해 상기 모노영상으로 색상정보를 전달하고, 시차 오류의 가능성이 기설정된 기준을 초과하는 영역에 대해 기 전달된 상기 색상정보에 기초하여 색상정보를 도출하는, 칼라-모노 듀얼카메라 촬영 영상의 융합 방법
2 2
칼라-모노 듀얼카메라 촬영 영상의 융합 방법으로서,칼라-모노 듀얼카메라를 통해 촬영된 모노영상 및 칼라영상을 입력 받는 영상입력단계;입력 받은 상기 모노영상 및 상기 칼라영상에 대해 전처리를 수행하는 전처리단계;전처리를 수행한 상기 칼라영상 및 전처리를 수행한 상기 모노영상으로부터 시차를 추정하는 시차추정단계;전처리를 수행한 상기 모노영상에 기초하여 전처리를 수행한 상기 칼라영상의 노이즈를 제거하여 디노이즈드칼라영상을 생성하는 조인트디노이징단계; 및상기 디노이즈드칼라영상으로부터 전처리를 수행한 상기 모노영상으로 색상정보를 전달하여 화질이 개선된 개선칼라영상을 생성하는 색상정보전달단계; 를 포함하고,상기 색상정보전달단계는,전처리를 수행한 상기 칼라영상에 대한 전처리를 수행한 상기 모노영상의 부분영역별 상이도에 기초하여, 전처리를 수행한 상기 모노영상의 부분영역의 색상정보에 추정된 상기 시차를 고려하여 대응되는 상기 디노이즈드칼라영상의 부분영역의 색상정보를 입력하여 부분영역별 시차보상색상정보를 생성하는 시차보상색상정보생성단계;상기 부분영역별 시차보상색상정보 중 색상정보가 입력되지 않은 부분영역인 칼라 홀에, 1 이상의 색상정보가 입력된 다른 부분영역의 시차보상색상정보에 기초하여 도출된 색상정보를 채워 넣는 칼라홀필링단계; 및상기 칼라홀필링단계를 통해 색상정보가 채워진 부분영역별 시차보상색상정보를 전처리를 수행한 상기 모노영상에 병합하여 개선칼라영상을 생성하는 영상병합단계; 를 포함하는, 칼라-모노 듀얼카메라 촬영 영상의 융합 방법
3 3
청구항 2에 있어서,상기 시차보상색상정보생성단계는,상기 디노이즈드칼라영상 및 상기 모노영상의 동일 좌표의 부분영역의 상이도가, 양안 영상의 차이 구별을 나타내는 BJND 모델의 BJND값 미만인 경우 상기 부분영역에 마스킹을 생성하는 마스킹생성단계; 및상기 마스킹이 생성된 영역에 대해 추정된 상기 시차를 고려하여 상기 디노이즈드칼라영상의 색상정보를 입력하여 시차보상색상정보를 생성하는 시차보상색상정보전달단계; 를 포함하는, 칼라-모노 듀얼카메라 촬영 영상의 융합 방법
4 4
청구항 2에 있어서,상기 칼라홀필링단계는,인공 신경망 알고리즘에 기초하여 상기 칼라 홀에 채워 넣을 색상정보를 도출하는, 칼라-모노 듀얼카메라 촬영 영상의 융합 방법
5 5
청구항 4에 있어서,상기 칼라홀필링단계는, 컨볼루션 신경망에 기초하여 칼라 홀에 채워 넣을 색상정보를 도출하는, 칼라-모노 듀얼카메라 촬영 영상의 융합 방법
6 6
청구항 5에 있어서,상기 컨볼루션 신경망은,상기 시차보상색상정보를 컬러 힌트로 하는 크로스채널 오토인코더로 구성되는, 칼라-모노 듀얼카메라 촬영 영상의 융합 방법
7 7
삭제
8 8
삭제
9 9
삭제
10 10
삭제
11 11
칼라-모노 듀얼카메라 촬영 영상의 융합 시스템으로서,칼라-모노 듀얼카메라를 통해 촬영된 모노영상 및 칼라영상을 입력 받는 영상입력부;입력 받은 상기 모노영상 및 상기 칼라영상에 대해 전처리를 수행하는 전처리부;전처리를 수행한 상기 칼라영상 및 전처리를 수행한 상기 모노영상으로부터 시차를 추정하는 시차추정부;전처리를 수행한 상기 모노영상에 기초하여 전처리를 수행한 상기 칼라영상의 노이즈를 제거하여 디노이즈드칼라영상을 생성하는 조인트디노이징부; 및상기 디노이즈드칼라영상으로부터 전처리를 수행한 상기 모노영상으로 색상정보를 전달하여 화질이 개선된 개선칼라영상을 생성하는 색상정보전달부; 를 포함하고,상기 색상정보전달부는,시차 오류의 가능성이 기설정된 기준 이하인 영역에 대해 상기 모노영상으로 색상정보를 전달하고, 시차 오류의 가능성이 기설정된 기준을 초과하는 영역에 대해 기 전달된 상기 색상정보에 기초하여 색상정보를 도출하는, 칼라-모노 듀얼카메라 촬영 영상의 융합 시스템
12 12
칼라-모노 듀얼카메라 촬영 영상의 융합 시스템으로서,칼라-모노 듀얼카메라를 통해 촬영된 모노영상 및 칼라영상을 입력 받는 영상입력부;입력 받은 상기 모노영상 및 상기 칼라영상에 대해 전처리를 수행하는 전처리부;전처리를 수행한 상기 칼라영상 및 전처리를 수행한 상기 모노영상으로부터 시차를 추정하는 시차추정부;전처리를 수행한 상기 모노영상에 기초하여 전처리를 수행한 상기 칼라영상의 노이즈를 제거하여 디노이즈드칼라영상을 생성하는 조인트디노이징부; 및상기 디노이즈드칼라영상으로부터 전처리를 수행한 상기 모노영상으로 색상정보를 전달하여 화질이 개선된 개선칼라영상을 생성하는 색상정보전달부; 를 포함하고,상기 색상정보전달부는,전처리를 수행한 상기 칼라영상에 대한 전처리를 수행한 상기 모노영상의 부분영역별 상이도에 기초하여, 전처리를 수행한 상기 모노영상의 부분영역의 색상정보에 추정된 상기 시차를 고려하여 대응되는 상기 디노이즈드칼라영상의 부분영역의 색상정보를 입력하여 부분영역별 시차보상색상정보를 생성하는 시차보상색상정보생성부;상기 부분영역별 시차보상색상정보 중 색상정보가 입력되지 않은 부분영역인 칼라 홀에, 1 이상의 색상정보가 입력된 다른 부분영역의 시차보상색상정보에 기초하여 도출된 색상정보를 채워 넣는 칼라홀필링부; 및상기 칼라홀필링부로부터 수신한 색상정보가 채워진 부분영역별 시차보상색상정보를 전처리를 수행한 상기 모노영상에 병합하여 개선칼라영상을 생성하는 영상병합부; 를 포함하는, 칼라-모노 듀얼카메라 촬영 영상의 융합 시스템
13 13
청구항 12에 있어서,상기 시차보상색상정보생성부는,상기 디노이즈드칼라영상 및 상기 모노영상의 동일 좌표의 부분영역의 상이도가, 양안 영상의 차이 구별을 나타내는 BJND 모델의 BJND값 미만인 경우 상기 부분영역에 마스킹을 생성하는 마스킹생성부; 및상기 마스킹이 생성된 영역에 대해 추정된 상기 시차를 고려하여 상기 디노이즈드칼라영상의 색상정보를 입력하여 시차보상색상정보를 생성하는 시차보상색상정보전달부; 를 포함하는, 칼라-모노 듀얼카메라 촬영 영상의 융합 시스템
14 14
청구항 12에 있어서,상기 칼라홀필링부는,인공 신경망 알고리즘에 기초하여 상기 칼라 홀에 채워 넣을 색상정보를 도출하는, 칼라-모노 듀얼카메라 촬영 영상의 융합 시스템
15 15
청구항 14에 있어서,상기 칼라홀필링부는, 컨볼루션 신경망에 기초하여 칼라 홀에 채워 넣을 색상정보를 도출하는, 칼라-모노 듀얼카메라 촬영 영상의 융합 시스템
16 16
청구항 15에 있어서,상기 컨볼루션 신경망은,상기 시차보상색상정보를 컬러 힌트로 하는 크로스채널 오토인코더로 구성되는, 칼라-모노 듀얼카메라 촬영 영상의 융합 시스템
17 17
삭제
18 18
삭제
19 19
삭제
20 20
삭제
21 21
칼라-모노 듀얼카메라 촬영 영상의 융합을 구현하기 위한, 컴퓨터-판독가능 매체로서,상기 컴퓨터-판독가능 매체는, 1 이상의 프로세서 및 1 이상의 메모리를 포함하는 컴퓨팅 장치로 하여금 이하의 단계들을 수행하도록 하는 명령들을 저장하며, 상기 단계들은:칼라-모노 듀얼카메라를 통해 촬영된 모노영상 및 칼라영상을 입력 받는 영상입력단계;입력 받은 상기 모노영상 및 상기 칼라영상에 대해 전처리를 수행하는 전처리단계;전처리를 수행한 상기 칼라영상 및 상기 모노영상으로부터 시차를 추정하는 시차추정단계;전처리를 수행한 상기 칼라영상 및 상기 모노영상에 기초하여 전처리를 수행한 상기 칼라영상의 노이즈를 제거하여 디노이즈드칼라영상을 생성하는 조인트디노이징단계; 및상기 디노이즈드칼라영상으로부터 상기 모노영상으로 색상정보를 전달하여 화질이 개선된 개선칼라영상을 생성하는 색상정보전달단계; 를 포함하고,상기 색상정보전달단계는,시차 오류의 가능성이 기설정된 기준 이하인 영역에 대해 상기 모노영상으로 색상정보를 전달하고, 시차 오류의 가능성이 기설정된 기준을 초과하는 영역에 대해 기 전달된 상기 색상정보에 기초하여 색상정보를 도출하는, 컴퓨터-판독가능 매체
22 22
칼라-모노 듀얼카메라 촬영 영상의 융합을 구현하기 위한, 컴퓨터-판독가능 매체로서,상기 컴퓨터-판독가능 매체는, 1 이상의 프로세서 및 1 이상의 메모리를 포함하는 컴퓨팅 장치로 하여금 이하의 단계들을 수행하도록 하는 명령들을 저장하며, 상기 단계들은:칼라-모노 듀얼카메라를 통해 촬영된 모노영상 및 칼라영상을 입력 받는 영상입력단계;입력 받은 상기 모노영상 및 상기 칼라영상에 대해 전처리를 수행하는 전처리단계;전처리를 수행한 상기 칼라영상 및 전처리를 수행한 상기 모노영상으로부터 시차를 추정하는 시차추정단계;전처리를 수행한 상기 모노영상에 기초하여 전처리를 수행한 상기 칼라영상의 노이즈를 제거하여 디노이즈드칼라영상을 생성하는 조인트디노이징단계; 및상기 디노이즈드칼라영상으로부터 전처리를 수행한 상기 모노영상으로 색상정보를 전달하여 화질이 개선된 개선칼라영상을 생성하는 색상정보전달단계; 를 포함하고,상기 색상정보전달단계는,전처리를 수행한 상기 칼라영상에 대한 전처리를 수행한 상기 모노영상의 부분영역별 상이도에 기초하여, 전처리를 수행한 상기 모노영상의 부분영역의 색상정보에 추정된 상기 시차를 고려하여 대응되는 상기 디노이즈드칼라영상의 부분영역의 색상정보를 입력하여 부분영역별 시차보상색상정보를 생성하는 시차보상색상정보생성단계;상기 부분영역별 시차보상색상정보 중 색상정보가 입력되지 않은 부분영역인 칼라 홀에, 1 이상의 색상정보가 입력된 다른 부분영역의 시차보상색상정보에 기초하여 도출된 색상정보를 채워 넣는 칼라홀필링단계; 및상기 칼라홀필링단계를 통해 색상정보가 채워진 부분영역별 시차보상색상정보를 전처리를 수행한 상기 모노영상에 병합하여 개선칼라영상을 생성하는 영상병합단계; 를 포함하는, 컴퓨터-판독가능 매체
23 23
삭제
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 미래창조과학부 가천대학교 SW중심대학지원사업 SW중심대학지원사업
2 교육부 가천대학교 기초연구지원사업 고품질 360 Video 생성을 위한 영상품질 객관적 평가 기술