| 1 |
1
1 이상의 프로세서 및 1 이상의 메모리를 갖고, 전기적으로 접속된 이미지센서로부터 이미지데이터를 입력 받아 병합이미지를 출력하는 이미지처리장치로서,상기 이미지처리장치는,상기 이미지센서의 복수의 화이트픽셀에 의하여 센싱 된 정보에 기초하여 생성된 제1이미지를 입력 받는 제1이미지입력부;상기 이미지센서의 복수의 컬러픽셀에 의하여 센싱 된 정보에 기초하여 생성된 제2이미지를 입력 받는 제2이미지입력부; 및1이상의 학습된 인공신경망을 포함하고, 상기 제1이미지 및 상기 제2이미지에 기초하여 병합이미지를 생성하는 이미지병합부; 를 포함하고,상기 이미지병합부는,상기 제1이미지에 기초하여 상기 컬러픽셀이 위치하는 영역의 휘도를 도출하여 휘도복원이미지를 생성하는 휘도복원부; 및상기 제2이미지 및 상기 휘도복원이미지를 포함하는 데이터에 기초하여 병합이미지를 생성하는 색상복원부; 를 포함하고,상기 색상복원부는,상기 제2이미지 및 상기 휘도복원이미지를 포함하는 데이터에 기초하여 병합이미지를 생성하는 색상복원모듈; 및상기 색상복원모듈이 생성한 상기 병합이미지를 평가하는 평가모듈; 을 포함하고,상기 색상복원모듈 및 상기 평가모듈은 상호 피드백을 수행하고, 상기 평가모듈은,기저장된 복수의 학습 병합이미지를 입력 받아 상기 학습 병합이미지의 진위여부를 평가하고 평가결과에 기초하여 피드백을 수행하여 학습이 이루어지는, 이미지처리장치
|
| 2 |
2
청구항 1에 있어서,상기 제1이미지는 상기 병합이미지의 전체 픽셀의 수의 90% 이상의 화이트픽셀 정보를 포함하고,상기 제2이미지는 상기 병합이미지의 전체 픽셀의 수의 10% 이하의 컬러픽셀 정보를 포함하는, 이미지처리장치
|
| 3 |
3
청구항 1에 있어서,상기 색상복원부는 학습된 인공신경망에 기초하여 상기 병합이미지를 생성하는, 이미지처리장치
|
| 4 |
4
청구항 1에 있어서,상기 휘도복원부 및 상기 색상복원부는 각각의 학습된 인공신경망에 기초하여 상기 휘도복원이미지 및 상기 병합이미지를 생성하는, 이미지처리장치
|
| 5 |
5
삭제
|
| 6 |
6
삭제
|
| 7 |
7
1 이상의 프로세서 및 1 이상의 메모리를 갖고, 전기적으로 접속된 이미지센서로부터 이미지데이터를 입력 받아 병합이미지를 출력하는 이미지처리장치로서,상기 이미지처리장치는,상기 이미지센서의 복수의 화이트픽셀에 의하여 센싱 된 정보에 기초하여 생성된 제1이미지를 입력 받는 제1이미지입력부;상기 이미지센서의 복수의 컬러픽셀에 의하여 센싱 된 정보에 기초하여 생성된 제2이미지를 입력 받는 제2이미지입력부; 및1이상의 학습된 인공신경망을 포함하고, 상기 제1이미지 및 상기 제2이미지에 기초하여 병합이미지를 생성하는 이미지병합부; 를 포함하고,상기 이미지병합부는,상기 제1이미지에 기초하여 상기 컬러픽셀이 위치하는 영역의 휘도를 도출하여 휘도복원이미지를 생성하는 휘도복원부; 및상기 제2이미지 및 상기 휘도복원이미지를 포함하는 데이터에 기초하여 병합이미지를 생성하는 색상복원부; 를 포함하고, 상기 색상복원부는,상기 제2이미지 및 상기 휘도복원이미지를 포함하는 데이터에 기초하여 병합이미지를 생성하는 색상복원모듈; 및상기 색상복원모듈이 생성한 상기 병합이미지를 평가하는 평가모듈; 을 포함하고,상기 색상복원모듈 및 상기 평가모듈은 상호 피드백을 수행하고,상기 색상복원모듈은,기저장된 복수의 학습 제2이미지, 학습 휘도복원이미지 및 학습 경계이미지 세트를 입력 받아 학습 병합이미지를 생성하고, 상기 평가모듈이 생성된 상기 학습 병합이미지를 평가한 평가결과에 기초하여 피드백을 수행하여 학습이 이루어지는, 이미지처리장치
|
| 8 |
8
1 이상의 프로세서 및 1 이상의 메모리를 갖고, 전기적으로 접속된 이미지센서로부터 이미지데이터를 입력 받아 병합이미지를 출력하는 이미지처리장치로서,상기 이미지처리장치는,상기 이미지센서의 복수의 화이트픽셀에 의하여 센싱 된 정보에 기초하여 생성된 제1이미지를 입력 받는 제1이미지입력부;상기 이미지센서의 복수의 컬러픽셀에 의하여 센싱 된 정보에 기초하여 생성된 제2이미지를 입력 받는 제2이미지입력부; 및1이상의 학습된 인공신경망을 포함하고, 상기 제1이미지 및 상기 제2이미지에 기초하여 병합이미지를 생성하는 이미지병합부; 를 포함하고,상기 이미지병합부는,상기 제1이미지에 기초하여 상기 컬러픽셀이 위치하는 영역의 휘도를 도출하여 휘도복원이미지를 생성하는 휘도복원부; 및상기 제2이미지 및 상기 휘도복원이미지를 포함하는 데이터에 기초하여 병합이미지를 생성하는 색상복원부; 를 포함하고, 상기 색상복원부는,상기 제2이미지 및 상기 휘도복원이미지를 포함하는 데이터에 기초하여 병합이미지를 생성하는 색상복원모듈; 및상기 색상복원모듈이 생성한 상기 병합이미지를 평가하는 평가모듈; 을 포함하고,상기 색상복원모듈 및 상기 평가모듈은 상호 피드백을 수행하고,상기 색상복원모듈은,고밀도 U-net으로 구성되고,상기 평가모듈은,스택형 컨볼루션 신경망으로 구성되는, 이미지처리장치
|
| 9 |
9
청구항 1에 있어서,상기 휘도복원부는,스택형 컨볼루션 신경망으로 구성되는, 이미지처리장치
|
| 10 |
10
청구항 1에 있어서,상기 휘도복원부 및 상기 색상복원부 각각의 인공신경망은 독립적으로 학습이 수행된 인공신경망인, 이미지처리장치
|
| 11 |
11
1 이상의 프로세서 및 1 이상의 메모리를 갖는 컴퓨팅 장치에서 수행되고, 전기적으로 접속된 이미지센서로부터 이미지데이터를 입력 받아 병합이미지를 출력하는 이미지처리방법으로서,상기 이미지처리방법은, 상기 이미지센서의 복수의 화이트픽셀에 의하여 센싱 된 정보에 기초하여 생성된 제1이미지를 입력 받는 제1이미지획득단계;상기 이미지센서의 복수의 컬러픽셀에 의하여 센싱 된 정보에 기초하여 생성된 제2이미지를 입력 받는 제2이미지획득단계; 및1 이상의 학습된 인공신경망에 의하여 상기 제1이미지 및 상기 제2이미지에 기초하여 병합이미지를 생성하는 이미지병합단계; 를 포함하고,상기 이미지병합단계는,상기 제1이미지에 기초하여 상기 컬러픽셀이 위치하는 영역의 휘도를 도출하여 휘도복원이미지를 생성하는 휘도복원단계; 및상기 제2이미지 및 상기 휘도복원이미지에 기초하여 병합이미지를 생성하는 색상복원단계; 를 포함하고, 상기 색상복원단계는,상기 제2이미지 및 상기 휘도복원이미지를 포함하는 데이터에 기초하여 병합이미지를 생성하는 병합이미지생성단계; 및상기 병합이미지생성단계에서 생성한 상기 병합이미지를 평가하는 평가단계; 를 포함하고,상기 병합이미지생성단계 및 상기 평가단계는 상호 피드백을 수행하고상기 평가단계는,기저장된 복수의 학습 병합이미지를 입력 받아 상기 학습 병합이미지의 진위여부를 평가하고 평가결과에 기초하여 피드백을 수행하여 학습이 이루어지는, 이미지처리방법
|
| 12 |
12
1 이상의 프로세서 및 1 이상의 메모리를 갖는 컴퓨팅 장치에서 수행되고, 전기적으로 접속된 이미지센서로부터 이미지데이터를 입력 받아 병합이미지를 출력하는 이미지처리방법으로서,상기 이미지처리방법은, 상기 이미지센서의 복수의 화이트픽셀에 의하여 센싱 된 정보에 기초하여 생성된 제1이미지를 입력 받는 제1이미지획득단계;상기 이미지센서의 복수의 컬러픽셀에 의하여 센싱 된 정보에 기초하여 생성된 제2이미지를 입력 받는 제2이미지획득단계; 및1 이상의 학습된 인공신경망에 의하여 상기 제1이미지 및 상기 제2이미지에 기초하여 병합이미지를 생성하는 이미지병합단계; 를 포함하고,상기 이미지병합단계는,상기 제1이미지에 기초하여 상기 컬러픽셀이 위치하는 영역의 휘도를 도출하여 휘도복원이미지를 생성하는 휘도복원단계; 및상기 제2이미지 및 상기 휘도복원이미지에 기초하여 병합이미지를 생성하는 색상복원단계; 를 포함하고, 상기 색상복원단계는,상기 제2이미지 및 상기 휘도복원이미지를 포함하는 데이터에 기초하여 병합이미지를 생성하는 병합이미지생성단계; 및상기 병합이미지생성단계에서 생성한 상기 병합이미지를 평가하는 평가단계; 를 포함하고,상기 병합이미지생성단계 및 상기 평가단계는 상호 피드백을 수행하고,상기 병합이미지생성단계는,기저장된 복수의 학습 제2이미지, 학습 휘도복원이미지 및 학습 경계이미지 세트를 입력 받아 학습 병합이미지를 생성하고, 상기 평가단계가 생성된 상기 학습 병합이미지를 평가한 평가결과에 기초하여 피드백을 수행하여 학습이 이루어지는, 이미지처리방법
|
| 13 |
13
1 이상의 프로세서 및 1 이상의 메모리를 갖는 컴퓨팅 장치에서 수행되고, 전기적으로 접속된 이미지센서로부터 이미지데이터를 입력 받아 병합이미지를 출력하는 이미지처리방법으로서,상기 이미지처리방법은, 상기 이미지센서의 복수의 화이트픽셀에 의하여 센싱 된 정보에 기초하여 생성된 제1이미지를 입력 받는 제1이미지획득단계;상기 이미지센서의 복수의 컬러픽셀에 의하여 센싱 된 정보에 기초하여 생성된 제2이미지를 입력 받는 제2이미지획득단계; 및1 이상의 학습된 인공신경망에 의하여 상기 제1이미지 및 상기 제2이미지에 기초하여 병합이미지를 생성하는 이미지병합단계; 를 포함하고,상기 이미지병합단계는,상기 제1이미지에 기초하여 상기 컬러픽셀이 위치하는 영역의 휘도를 도출하여 휘도복원이미지를 생성하는 휘도복원단계; 및상기 제2이미지 및 상기 휘도복원이미지에 기초하여 병합이미지를 생성하는 색상복원단계; 를 포함하고, 상기 색상복원단계는,상기 제2이미지 및 상기 휘도복원이미지를 포함하는 데이터에 기초하여 병합이미지를 생성하는 병합이미지생성단계; 및상기 병합이미지생성단계에서 생성한 상기 병합이미지를 평가하는 평가단계; 를 포함하고,상기 병합이미지생성단계 및 상기 평가단계는 상호 피드백을 수행하고,상기 병합이미지생성단계는,고밀도 U-net에 의하여 수행되고,상기 평가단계는,스택형 컨볼루션 신경망에 의하여 수행되는, 이미지처리방법
|
| 14 |
14
전기적으로 접속된 이미지센서로부터 이미지데이터를 입력 받아 병합이미지를 출력하는 이미지처리방법을 구현하기 위한 컴퓨터-판독가능 매체로서, 상기 컴퓨터-판독가능 매체는 컴퓨팅 장치로 하여금 이하의 단계들을 수행하도록 하는 명령들을 저장하며, 상기 단계들은:상기 이미지센서의 복수의 화이트픽셀에 의하여 센싱 된 정보에 기초하여 생성된 제1이미지를 입력 받는 제1이미지획득단계;상기 이미지센서의 복수의 컬러픽셀에 의하여 센싱 된 정보에 기초하여 생성된 제2이미지를 입력 받는 제2이미지획득단계; 및1 이상의 학습된 인공신경망에 의하여 상기 제1이미지 및 상기 제2이미지에 기초하여 병합이미지를 생성하는 이미지병합단계; 를 포함하고,상기 이미지병합단계는,상기 제1이미지에 기초하여 상기 컬러픽셀이 위치하는 영역의 휘도를 도출하여 휘도복원이미지를 생성하는 휘도복원단계; 및상기 제2이미지 및 상기 휘도복원이미지에 기초하여 병합이미지를 생성하는 색상복원단계; 를 포함하고, 상기 색상복원단계는,상기 제2이미지 및 상기 휘도복원이미지를 포함하는 데이터에 기초하여 병합이미지를 생성하는 병합이미지생성단계; 및상기 병합이미지생성단계에서 생성한 상기 병합이미지를 평가하는 평가단계; 를 포함하고,상기 병합이미지생성단계 및 상기 평가단계는 상호 피드백을 수행하고상기 평가단계는,기저장된 복수의 학습 병합이미지를 입력 받아 상기 학습 병합이미지의 진위여부를 평가하고 평가결과에 기초하여 피드백을 수행하여 학습이 이루어지는, 컴퓨터-판독가능 매체
|
