맞춤기술찾기

이전대상기술

영상의 선명화를 위한 전처리를 수행하는 영상 처리 장치 및 방법(Image Processing Apparatus and Method for Performing Pre-process for Clean Image)

  • 기술번호 : KST2018004236
  • 담당센터 : 인천기술혁신센터
  • 전화번호 : 032-420-3580
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 차량에 탑재된 광각 카메라로부터 얻은 영상으로부터 선명화된 AVM 탑뷰 영상 등으로 변환하되, 영역에 따라 선택적으로 디블러 전처리 과정을 수행하여 광각영상 외곽부의 단점을 개선하고, 또한 초고해상도(super-resolution) 기법을 적용하여 확대 영상의 선명도를 향상시킴으로써 최종적으로 합성된 AVM 탑뷰 영상 등의 화질 개선을 통해 운전자의 사물 인지능력을 향상하여 편의와 안전을 도모할 수 있는 영상 처리 장치 및 방법에 관한 것이다.
Int. CL G06T 5/00 (2019.01.01) G06T 3/40 (2006.01.01)
CPC G06T 5/003(2013.01) G06T 5/003(2013.01) G06T 5/003(2013.01) G06T 5/003(2013.01)
출원번호/일자 1020160072497 (2016.06.10)
출원인 현대자동차주식회사, 기아자동차주식회사, 인하대학교 산학협력단
등록번호/일자 10-1795271-0000 (2017.11.01)
공개번호/일자
공고번호/일자 (20171107) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2016.06.10)
심사청구항수 20

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 현대자동차주식회사 대한민국 서울특별시 서초구
2 기아자동차주식회사 대한민국 서울특별시 서초구
3 인하대학교 산학협력단 대한민국 인천광역시 미추홀구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 최진욱 대한민국 경기도 고양시 일산동구
2 송병철 대한민국 서울특별시 양천구
3 최동윤 대한민국 충청남도 서산시
4 최지훈 대한민국 경기도 부천시 소사구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인태평양 대한민국 서울특별시 중구 청계천로 **, *층(다동, 예금보험공사빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 현대자동차주식회사 대한민국 서울특별시 서초구
2 기아자동차주식회사 대한민국 서울특별시 서초구
3 인하대학교 산학협력단 대한민국 인천광역시 미추홀구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2016.06.10 수리 (Accepted) 1-1-2016-0559667-32
2 출원인정보변경(경정)신고서
Notification of change of applicant's information
2016.09.05 수리 (Accepted) 4-1-2016-5127132-49
3 선행기술조사의뢰서
Request for Prior Art Search
2016.12.13 수리 (Accepted) 9-1-9999-9999999-89
4 선행기술조사보고서
Report of Prior Art Search
2017.02.10 발송처리완료 (Completion of Transmission) 9-6-2017-0031479-76
5 의견제출통지서
Notification of reason for refusal
2017.03.03 발송처리완료 (Completion of Transmission) 9-5-2017-0164057-29
6 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2017.04.25 수리 (Accepted) 1-1-2017-0404970-17
7 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2017.04.25 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2017-0404971-52
8 출원인정보변경(경정)신고서
Notification of change of applicant's information
2017.09.18 수리 (Accepted) 4-1-2017-5150878-54
9 등록결정서
Decision to grant
2017.09.26 발송처리완료 (Completion of Transmission) 9-5-2017-0677907-11
10 출원인정보변경(경정)신고서
Notification of change of applicant's information
2018.03.02 수리 (Accepted) 4-1-2018-5036549-31
11 출원인정보변경(경정)신고서
Notification of change of applicant's information
2018.09.04 수리 (Accepted) 4-1-2018-5179063-18
12 출원인정보변경(경정)신고서
Notification of change of applicant's information
2018.12.27 수리 (Accepted) 4-1-2018-5266647-91
13 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.07.25 수리 (Accepted) 4-1-2019-5148973-60
14 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.07.26 수리 (Accepted) 4-1-2019-5150191-76
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
광각영상을 협각영상으로 변환하기 위한 영상 처리 장치에 있어서,입력 광각영상의 외곽부분에 대해 블러 이미지 모델링에 기초해 가우시안 형태의 블러 커널을 가지는지 추정하고 블러된 입력 광각영상의 에지 부분에 대한 선명도가 개선되도록 디블러 처리를 수행하는 디블러부; 상기 디블러 처리된 영상에 대해 초고해상도 처리를 통해 업 스케일된 변환 영상을 생성하는 초고해상부; 및상기 업 스케일된 변환 영상을 이용하여 상기 입력 광각영상에 대한 협각영상을 획득하기 위한 뷰 변환을 수행하는 뷰변환부를 포함하며,상기 디블러부는,상기 입력 광각영상에 대한 다중 스케일링을 수행하여 해상도가 다른 복수의 저해상도 영상에 대한 디블러 처리를 수행하고, 디블러 처리된 복수의 영상들을 보간하여 다운 스케일 된 저해상도 영상을 생성하며, 상기 다운 스케일 된 저해상도 영상으로부터 고주파 정보를 찾아내어 상기 입력 광각영상과 합성함으로써 상기 선명도가 개선된 광각영상을 출력하는 것을 특징으로 하는 영상 처리 장치
2 2
제1항에 있어서,상기 디블러부에서의 상기 입력 광각영상에 대한 디블러 처리와 상기 초고해상부에서의 상기 디블러 처리된 영상에 대한 초고해상도 처리를 포함하는 전처리 과정을 통해 선명도가 향상된 상기 업 스케일된 변환 영상을, 상기 뷰 변환의 입력으로 하여 상기 협각영상을 획득하기 위한 상기 뷰 변환에서의 성능을 향상시키기 위한 것을 특징으로 하는 영상 처리 장치
3 3
제1항에 있어서,상기 디블러부는, 자기유사성을 이용한 디블러 기법을 수행하여 상기 입력 광각영상을 다운 스케일링하는 것을 특징으로 하는 영상 처리 장치
4 4
제1항에 있어서,상기 초고해상부는, 능동적 LBP(Local Binary Pattern) 기반 분류기를 이용한 초해상도 기법을 이용하여 영상 패턴의 형태에 따라 해당 영상에 알맞은 필터를 적용하여 선명한 화질의 상기 업 스케일된 변환 영상을 획득하는 것을 특징으로 하는 영상 처리 장치
5 5
제1항에 있어서,상기 뷰변환부는, LUT(Look Up Table) 기반의 뷰 변환 보간 기법을 기초로 LUT에서 참조되는 광각영상의 정수위치에 존재하는 주변 픽셀값들을 이용하여 비정수 좌표 위치에 있는 픽셀값들을 추정하는 것을 특징으로 하는 영상 처리 장치
6 6
제1항에 있어서,상기 디블러부는, 상기 입력 광각영상에 대해 선형보간기법을 이용하여 다운 스케일된 저해상도 영상을 생성하는 다운 스케일링 유닛;상기 다운 스케일된 저해상도 영상을 저역통과필터링하는 제1가우시안 LPF; 상기 다운 스케일된 저해상도 영상을 업 스케일 및 저역통과필터링 처리하는 제2가우시안 LPF; 상기 다운 스케일된 저해상도 영상에서 상기 제1가우시안 LPF의 출력을 차감하여 고주파 성분 영상을 생성하는 제1연산기;상기 제1가우시안 LPF의 출력 영상과 상기 제2가우시안 LPF의 출력 영상의 정합을 이용하여, 상기 제2가우시안 LPF의 출력 영상에 대응되는 상기 제1연산기의 고주파 성분을 찾아 출력하는 블록 매칭 유닛; 및상기 제2가우시안 LPF의 출력 영상과 상기 블록 매칭 유닛으로부터의 상기 고주파 성분을 합성하여 디블러된 영상을 출력하는 제2연산기를 포함하는 것을 특징으로 하는 영상 처리 장치
7 7
제1항에 있어서,상기 디블러부는, 상기 입력 광각영상에 대해 다중 스케일링에 의해 각각 획득된 복수의 저해상도 영상에 대하여 디블러 처리한 후 디블러된 영상들에 대한 보간기법으로 선명한 제1축소 영상을 획득하고, 상기 입력 광각영상과 상기 제1축소 영상을 이용하여 보간기법으로 상기 디블러 처리된 영상을 생성하는 것을 특징으로 하는 영상 처리 장치
8 8
제1항에 있어서,상기 디블러부는,상기 입력 광각영상 중 플랫(flat) 영역과 텍스처(texture) 영역을 제외하고 에지(edge) 부분에 대해 디블러 처리를 수행하는 것을 특징으로 하는 영상 처리 장치
9 9
제1항에 있어서,상기 초고해상부는, 2D-FIR(2-Dimension Finite Impulse Response) 필터를 이용하여 상기 업 스케일된 변환 영상을 획득하는 것을 특징으로 하는 영상 처리 장치
10 10
제1항에 있어서,상기 뷰변환부는, Lanczos 필터를 이용하여 상기 뷰 변환을 수행하는 것을 특징으로 하는 영상 처리 장치
11 11
광각영상을 협각영상으로 변환하기 위한 영상 처리 방법에 있어서,입력 광각영상의 외곽부분에 대해 블러 이미지 모델링에 기초해 가우시안 형태의 블러 커널을 가지는지 추정하고 블러된 입력 광각영상의 에지 부분에 대한 선명도가 개선되도록 디블러 처리를 수행하는 단계; 상기 디블러 처리된 영상에 대해 초고해상도 처리를 통해 업 스케일된 변환 영상을 생성하는 단계; 및상기 업 스케일된 변환 영상을 이용하여 상기 입력 광각영상에 대한 협각영상을 획득하기 위한 뷰 변환을 수행하는 단계를 포함하며,상기 디블러 처리를 수행하는 단계는,상기 입력 광각영상에 대한 다중 스케일링을 수행하여 해상도가 다른 복수의 저해상도 영상에 대한 디블러 처리를 수행하고, 디블러 처리된 복수의 영상들을 보간하여 다운 스케일 된 저해상도 영상을 생성하며, 상기 다운 스케일 된 저해상도 영상으로부터 고주파 정보를 찾아내어 상기 입력 광각영상과 합성함으로써 선명도가 개선된 광각영상을 출력하는 것을 특징으로 하는 영상 처리 방법
12 12
제11항에 있어서,상기 입력 광각영상에 대한 디블러 처리와 상기 디블러 처리된 영상에 대한 초고해상도 처리를 포함하는 전처리 과정을 통해 선명도가 향상된 상기 업 스케일된 변환 영상을, 상기 뷰 변환의 입력으로 하여 상기 협각영상을 획득하기 위한 상기 뷰 변환에서의 성능을 향상시키기 위한 것을 특징으로 하는 영상 처리 방법
13 13
제11항에 있어서,상기 디블러 처리를 수행하는 단계에서, 자기유사성을 이용한 디블러 기법을 수행하여 상기 입력 광각영상을 다운 스케일링하는 것을 특징으로 하는 영상 처리 방법
14 14
제11항에 있어서,상기 업 스케일된 변환 영상을 생성하는 단계에서, 능동적 LBP(Local Binary Pattern) 기반 분류기를 이용한 초해상도 기법을 이용하여 영상 패턴의 형태에 따라 해당 영상에 알맞은 필터를 적용하여 선명한 화질의 상기 업 스케일된 변환 영상을 획득하는 것을 특징으로 하는 영상 처리 방법
15 15
제11항에 있어서,상기 뷰 변환을 수행하는 단계에서, LUT(Look Up Table) 기반의 뷰 변환 보간 기법을 기초로 LUT에서 참조되는 광각영상의 정수위치에 존재하는 주변 픽셀값들을 이용하여 비정수 좌표 위치에 있는 픽셀값들을 추정하는 것을 특징으로 하는 영상 처리 방법
16 16
제11항에 있어서,상기 디블러 처리를 수행하는 단계는,상기 입력 광각영상에 대해 선형보간기법을 이용하여 다운 스케일된 저해상도 영상을 생성하는 단계;제1가우시안 LPF를 이용하여 상기 다운 스케일된 저해상도 영상을 저역통과필터링하는 단계; 제2가우시안 LPF를 이용하여 상기 다운 스케일된 저해상도 영상을 업 스케일 및 저역통과필터링 처리하는 단계; 상기 다운 스케일된 저해상도 영상에서 상기 제1가우시안 LPF의 출력을 차감하여 고주파 성분 영상을 생성하는 단계;상기 제1가우시안 LPF의 출력 영상과 상기 제2가우시안 LPF의 출력 영상의 정합을 이용하여, 상기 제2가우시안 LPF의 출력 영상에 대응되는 상기 고주파 성분 영상의 고주파 성분을 찾아 출력하는 단계; 및상기 제2가우시안 LPF의 출력 영상과 상기 출력된 고주파 성분을 합성하여 디블러된 영상을 출력하는 단계를 포함하는 것을 특징으로 하는 영상 처리 방법
17 17
제11항에 있어서,상기 디블러 처리를 수행하는 단계는,상기 입력 광각영상에 대해 다중 스케일링에 의해 각각 획득된 복수의 저해상도 영상에 대하여 디블러 처리한 후 디블러된 영상들에 대한 보간기법으로 선명한 제1축소 영상을 획득하고, 상기 입력 광각영상과 상기 제1축소 영상을 이용하여 보간기법으로 상기 디블러 처리된 영상을 생성하는 단계를 포함하는 것을 특징으로 하는 영상 처리 방법
18 18
제11항에 있어서,상기 디블러 처리를 수행하는 단계는,상기 입력 광각영상 중 플랫(flat) 영역과 텍스처(texture) 영역을 제외하고 에지(edge) 부분에 대해 디블러 처리를 수행하는 단계를 포함하는 것을 특징으로 하는 영상 처리 방법
19 19
제11항에 있어서,상기 업 스케일된 변환 영상을 생성하는 단계에서, 2D-FIR(2-Dimension Finite Impulse Response) 필터를 이용하여 상기 업 스케일된 변환 영상을 획득하는 것을 특징으로 하는 영상 처리 방법
20 20
제11항에 있어서,상기 뷰 변환을 수행하는 단계에서, Lanczos 필터를 이용하여 상기 뷰 변환을 수행하는 것을 특징으로 하는 영상 처리 방법
지정국 정보가 없습니다
순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - 패밀리정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 CN107492066 CN 중국 FAMILY
2 US10007972 US 미국 FAMILY
3 US20170358061 US 미국 FAMILY

DOCDB 패밀리 정보

순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - DOCDB 패밀리 정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 CN107492066 CN 중국 DOCDBFAMILY
2 DE102016121959 DE 독일 DOCDBFAMILY
3 US10007972 US 미국 DOCDBFAMILY
4 US2017358061 US 미국 DOCDBFAMILY
국가 R&D 정보가 없습니다.