1 |
1
칼라-모노 듀얼카메라 촬영 영상의 융합 방법으로서,칼라-모노 듀얼카메라를 통해 촬영된 모노영상 및 칼라영상을 입력 받는 영상입력단계;입력 받은 상기 모노영상 및 상기 칼라영상에 대해 전처리를 수행하는 전처리단계;전처리를 수행한 상기 칼라영상 및 전처리를 수행한 상기 모노영상으로부터 시차를 추정하는 시차추정단계;전처리를 수행한 상기 모노영상에 기초하여 전처리를 수행한 상기 칼라영상의 노이즈를 제거하여 디노이즈드칼라영상을 생성하는 조인트디노이징단계; 및상기 디노이즈드칼라영상으로부터 전처리를 수행한 상기 모노영상으로 색상정보를 전달하여 화질이 개선된 개선칼라영상을 생성하는 색상정보전달단계; 를 포함하고,상기 색상정보전달단계는,시차 오류의 가능성이 기설정된 기준 이하인 영역에 대해 상기 모노영상으로 색상정보를 전달하고, 시차 오류의 가능성이 기설정된 기준을 초과하는 영역에 대해 기 전달된 상기 색상정보에 기초하여 색상정보를 도출하는, 칼라-모노 듀얼카메라 촬영 영상의 융합 방법
|
2 |
2
칼라-모노 듀얼카메라 촬영 영상의 융합 방법으로서,칼라-모노 듀얼카메라를 통해 촬영된 모노영상 및 칼라영상을 입력 받는 영상입력단계;입력 받은 상기 모노영상 및 상기 칼라영상에 대해 전처리를 수행하는 전처리단계;전처리를 수행한 상기 칼라영상 및 전처리를 수행한 상기 모노영상으로부터 시차를 추정하는 시차추정단계;전처리를 수행한 상기 모노영상에 기초하여 전처리를 수행한 상기 칼라영상의 노이즈를 제거하여 디노이즈드칼라영상을 생성하는 조인트디노이징단계; 및상기 디노이즈드칼라영상으로부터 전처리를 수행한 상기 모노영상으로 색상정보를 전달하여 화질이 개선된 개선칼라영상을 생성하는 색상정보전달단계; 를 포함하고,상기 색상정보전달단계는,전처리를 수행한 상기 칼라영상에 대한 전처리를 수행한 상기 모노영상의 부분영역별 상이도에 기초하여, 전처리를 수행한 상기 모노영상의 부분영역의 색상정보에 추정된 상기 시차를 고려하여 대응되는 상기 디노이즈드칼라영상의 부분영역의 색상정보를 입력하여 부분영역별 시차보상색상정보를 생성하는 시차보상색상정보생성단계;상기 부분영역별 시차보상색상정보 중 색상정보가 입력되지 않은 부분영역인 칼라 홀에, 1 이상의 색상정보가 입력된 다른 부분영역의 시차보상색상정보에 기초하여 도출된 색상정보를 채워 넣는 칼라홀필링단계; 및상기 칼라홀필링단계를 통해 색상정보가 채워진 부분영역별 시차보상색상정보를 전처리를 수행한 상기 모노영상에 병합하여 개선칼라영상을 생성하는 영상병합단계; 를 포함하는, 칼라-모노 듀얼카메라 촬영 영상의 융합 방법
|
3 |
3
청구항 2에 있어서,상기 시차보상색상정보생성단계는,상기 디노이즈드칼라영상 및 상기 모노영상의 동일 좌표의 부분영역의 상이도가, 양안 영상의 차이 구별을 나타내는 BJND 모델의 BJND값 미만인 경우 상기 부분영역에 마스킹을 생성하는 마스킹생성단계; 및상기 마스킹이 생성된 영역에 대해 추정된 상기 시차를 고려하여 상기 디노이즈드칼라영상의 색상정보를 입력하여 시차보상색상정보를 생성하는 시차보상색상정보전달단계; 를 포함하는, 칼라-모노 듀얼카메라 촬영 영상의 융합 방법
|
4 |
4
청구항 2에 있어서,상기 칼라홀필링단계는,인공 신경망 알고리즘에 기초하여 상기 칼라 홀에 채워 넣을 색상정보를 도출하는, 칼라-모노 듀얼카메라 촬영 영상의 융합 방법
|
5 |
5
청구항 4에 있어서,상기 칼라홀필링단계는, 컨볼루션 신경망에 기초하여 칼라 홀에 채워 넣을 색상정보를 도출하는, 칼라-모노 듀얼카메라 촬영 영상의 융합 방법
|
6 |
6
청구항 5에 있어서,상기 컨볼루션 신경망은,상기 시차보상색상정보를 컬러 힌트로 하는 크로스채널 오토인코더로 구성되는, 칼라-모노 듀얼카메라 촬영 영상의 융합 방법
|
7 |
7
삭제
|
8 |
8
삭제
|
9 |
9
삭제
|
10 |
10
삭제
|
11 |
11
칼라-모노 듀얼카메라 촬영 영상의 융합 시스템으로서,칼라-모노 듀얼카메라를 통해 촬영된 모노영상 및 칼라영상을 입력 받는 영상입력부;입력 받은 상기 모노영상 및 상기 칼라영상에 대해 전처리를 수행하는 전처리부;전처리를 수행한 상기 칼라영상 및 전처리를 수행한 상기 모노영상으로부터 시차를 추정하는 시차추정부;전처리를 수행한 상기 모노영상에 기초하여 전처리를 수행한 상기 칼라영상의 노이즈를 제거하여 디노이즈드칼라영상을 생성하는 조인트디노이징부; 및상기 디노이즈드칼라영상으로부터 전처리를 수행한 상기 모노영상으로 색상정보를 전달하여 화질이 개선된 개선칼라영상을 생성하는 색상정보전달부; 를 포함하고,상기 색상정보전달부는,시차 오류의 가능성이 기설정된 기준 이하인 영역에 대해 상기 모노영상으로 색상정보를 전달하고, 시차 오류의 가능성이 기설정된 기준을 초과하는 영역에 대해 기 전달된 상기 색상정보에 기초하여 색상정보를 도출하는, 칼라-모노 듀얼카메라 촬영 영상의 융합 시스템
|
12 |
12
칼라-모노 듀얼카메라 촬영 영상의 융합 시스템으로서,칼라-모노 듀얼카메라를 통해 촬영된 모노영상 및 칼라영상을 입력 받는 영상입력부;입력 받은 상기 모노영상 및 상기 칼라영상에 대해 전처리를 수행하는 전처리부;전처리를 수행한 상기 칼라영상 및 전처리를 수행한 상기 모노영상으로부터 시차를 추정하는 시차추정부;전처리를 수행한 상기 모노영상에 기초하여 전처리를 수행한 상기 칼라영상의 노이즈를 제거하여 디노이즈드칼라영상을 생성하는 조인트디노이징부; 및상기 디노이즈드칼라영상으로부터 전처리를 수행한 상기 모노영상으로 색상정보를 전달하여 화질이 개선된 개선칼라영상을 생성하는 색상정보전달부; 를 포함하고,상기 색상정보전달부는,전처리를 수행한 상기 칼라영상에 대한 전처리를 수행한 상기 모노영상의 부분영역별 상이도에 기초하여, 전처리를 수행한 상기 모노영상의 부분영역의 색상정보에 추정된 상기 시차를 고려하여 대응되는 상기 디노이즈드칼라영상의 부분영역의 색상정보를 입력하여 부분영역별 시차보상색상정보를 생성하는 시차보상색상정보생성부;상기 부분영역별 시차보상색상정보 중 색상정보가 입력되지 않은 부분영역인 칼라 홀에, 1 이상의 색상정보가 입력된 다른 부분영역의 시차보상색상정보에 기초하여 도출된 색상정보를 채워 넣는 칼라홀필링부; 및상기 칼라홀필링부로부터 수신한 색상정보가 채워진 부분영역별 시차보상색상정보를 전처리를 수행한 상기 모노영상에 병합하여 개선칼라영상을 생성하는 영상병합부; 를 포함하는, 칼라-모노 듀얼카메라 촬영 영상의 융합 시스템
|
13 |
13
청구항 12에 있어서,상기 시차보상색상정보생성부는,상기 디노이즈드칼라영상 및 상기 모노영상의 동일 좌표의 부분영역의 상이도가, 양안 영상의 차이 구별을 나타내는 BJND 모델의 BJND값 미만인 경우 상기 부분영역에 마스킹을 생성하는 마스킹생성부; 및상기 마스킹이 생성된 영역에 대해 추정된 상기 시차를 고려하여 상기 디노이즈드칼라영상의 색상정보를 입력하여 시차보상색상정보를 생성하는 시차보상색상정보전달부; 를 포함하는, 칼라-모노 듀얼카메라 촬영 영상의 융합 시스템
|
14 |
14
청구항 12에 있어서,상기 칼라홀필링부는,인공 신경망 알고리즘에 기초하여 상기 칼라 홀에 채워 넣을 색상정보를 도출하는, 칼라-모노 듀얼카메라 촬영 영상의 융합 시스템
|
15 |
15
청구항 14에 있어서,상기 칼라홀필링부는, 컨볼루션 신경망에 기초하여 칼라 홀에 채워 넣을 색상정보를 도출하는, 칼라-모노 듀얼카메라 촬영 영상의 융합 시스템
|
16 |
16
청구항 15에 있어서,상기 컨볼루션 신경망은,상기 시차보상색상정보를 컬러 힌트로 하는 크로스채널 오토인코더로 구성되는, 칼라-모노 듀얼카메라 촬영 영상의 융합 시스템
|
17 |
17
삭제
|
18 |
18
삭제
|
19 |
19
삭제
|
20 |
20
삭제
|
21 |
21
칼라-모노 듀얼카메라 촬영 영상의 융합을 구현하기 위한, 컴퓨터-판독가능 매체로서,상기 컴퓨터-판독가능 매체는, 1 이상의 프로세서 및 1 이상의 메모리를 포함하는 컴퓨팅 장치로 하여금 이하의 단계들을 수행하도록 하는 명령들을 저장하며, 상기 단계들은:칼라-모노 듀얼카메라를 통해 촬영된 모노영상 및 칼라영상을 입력 받는 영상입력단계;입력 받은 상기 모노영상 및 상기 칼라영상에 대해 전처리를 수행하는 전처리단계;전처리를 수행한 상기 칼라영상 및 상기 모노영상으로부터 시차를 추정하는 시차추정단계;전처리를 수행한 상기 칼라영상 및 상기 모노영상에 기초하여 전처리를 수행한 상기 칼라영상의 노이즈를 제거하여 디노이즈드칼라영상을 생성하는 조인트디노이징단계; 및상기 디노이즈드칼라영상으로부터 상기 모노영상으로 색상정보를 전달하여 화질이 개선된 개선칼라영상을 생성하는 색상정보전달단계; 를 포함하고,상기 색상정보전달단계는,시차 오류의 가능성이 기설정된 기준 이하인 영역에 대해 상기 모노영상으로 색상정보를 전달하고, 시차 오류의 가능성이 기설정된 기준을 초과하는 영역에 대해 기 전달된 상기 색상정보에 기초하여 색상정보를 도출하는, 컴퓨터-판독가능 매체
|
22 |
22
칼라-모노 듀얼카메라 촬영 영상의 융합을 구현하기 위한, 컴퓨터-판독가능 매체로서,상기 컴퓨터-판독가능 매체는, 1 이상의 프로세서 및 1 이상의 메모리를 포함하는 컴퓨팅 장치로 하여금 이하의 단계들을 수행하도록 하는 명령들을 저장하며, 상기 단계들은:칼라-모노 듀얼카메라를 통해 촬영된 모노영상 및 칼라영상을 입력 받는 영상입력단계;입력 받은 상기 모노영상 및 상기 칼라영상에 대해 전처리를 수행하는 전처리단계;전처리를 수행한 상기 칼라영상 및 전처리를 수행한 상기 모노영상으로부터 시차를 추정하는 시차추정단계;전처리를 수행한 상기 모노영상에 기초하여 전처리를 수행한 상기 칼라영상의 노이즈를 제거하여 디노이즈드칼라영상을 생성하는 조인트디노이징단계; 및상기 디노이즈드칼라영상으로부터 전처리를 수행한 상기 모노영상으로 색상정보를 전달하여 화질이 개선된 개선칼라영상을 생성하는 색상정보전달단계; 를 포함하고,상기 색상정보전달단계는,전처리를 수행한 상기 칼라영상에 대한 전처리를 수행한 상기 모노영상의 부분영역별 상이도에 기초하여, 전처리를 수행한 상기 모노영상의 부분영역의 색상정보에 추정된 상기 시차를 고려하여 대응되는 상기 디노이즈드칼라영상의 부분영역의 색상정보를 입력하여 부분영역별 시차보상색상정보를 생성하는 시차보상색상정보생성단계;상기 부분영역별 시차보상색상정보 중 색상정보가 입력되지 않은 부분영역인 칼라 홀에, 1 이상의 색상정보가 입력된 다른 부분영역의 시차보상색상정보에 기초하여 도출된 색상정보를 채워 넣는 칼라홀필링단계; 및상기 칼라홀필링단계를 통해 색상정보가 채워진 부분영역별 시차보상색상정보를 전처리를 수행한 상기 모노영상에 병합하여 개선칼라영상을 생성하는 영상병합단계; 를 포함하는, 컴퓨터-판독가능 매체
|
23 |
23
삭제
|