맞춤기술찾기

이전대상기술

2D 영상에 대한 깊이 정보 생성 장치 및 방법과 이에 관한 기록 매체

  • 기술번호 : KST2019034042
  • 담당센터 : 서울서부기술혁신센터
  • 전화번호 : 02-6124-6930
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 2D 영상에 대한 깊이 정보 생성 장치 및 방법과 이에 관한 기록 매체가 개시된다. 개시된 장치는 레퍼런스 2D 영상 및 레퍼런스 깊이 정보를 학습하여 입력된 2D 영상의 최종 깊이 정보를 생성하는 깊이 정보 생성 장치로서, 2D 영상의 1차 깊이 정보를 생성하는 깊이 추정부; 상기 2D 영상의 1차 깊이 그래디언트 정보를 생성하는 깊이 그래디언트 추정부; 및 상기 1차 깊이 정보 및 상기 1차 깊이 그래디언트 정보를 고려하여 최종 깊이 정보를 생성하는 깊이 정보 생성부를 포함하되, 상기 깊이 추정부와 상기 깊이 그래디언트 추정부 및 상기 깊이 정보 생성부는 상기 레퍼런스 2D 영상에 대한 최종 깊이 정보를 생성하고, 상기 레퍼런스 2D 영상에 대해 생성된 최종 깊이 정보와 상기 레퍼런스 깊이 정보의 차분값이 최소가 되게 하는 상기 레퍼런스 2D 영상에 대한 최종 깊이 정보를 생성하도록 학습되는 것을 특징으로 한다. 개시된 장치에 따르면, 깊이 그래디언트 정보뿐만 아니라, 깊이 영상도 함께 학습하여 2D 영상에 대한 깊이 영상을 생성함으로써, scale ambiguity 문제가 완화될 수 있다. 또한, 깊이 영상 학습 과정에서 다운 샘플링을 수행함으로써 복잡성을 감소시킬 수 있으며, 깊이 그래디언트 정보를 학습함으로써 다운 샘플링 과정에서 손실되는 정보를 보상할 수 있는 장점이 있다.
Int. CL G06T 7/50 (2017.01.01) H04N 13/122 (2018.01.01)
CPC G06T 7/50(2013.01) G06T 7/50(2013.01) G06T 7/50(2013.01) G06T 7/50(2013.01) G06T 7/50(2013.01)
출원번호/일자 1020170059112 (2017.05.12)
출원인 연세대학교 산학협력단
등록번호/일자 10-1866135-0000 (2018.06.01)
공개번호/일자
공고번호/일자 (20180608) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 소멸
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2017.05.12)
심사청구항수 19

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 연세대학교 산학협력단 대한민국 서울특별시 서대문구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 손광훈 대한민국 서울특별시 서초구
2 김영중 대한민국 충청북도 영동군

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 민영준 대한민국 서울특별시 강남구 남부순환로 ****, *층(도곡동, 차우빌딩)(맥스국제특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 연세대학교 산학협력단 대한민국 서울특별시 서대문구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2017.05.12 수리 (Accepted) 1-1-2017-0451534-15
2 선행기술조사의뢰서
Request for Prior Art Search
2018.01.11 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2018.03.12 발송처리완료 (Completion of Transmission) 9-6-2018-0038348-46
4 의견제출통지서
Notification of reason for refusal
2018.03.15 발송처리완료 (Completion of Transmission) 9-5-2018-0180799-98
5 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2018.05.15 수리 (Accepted) 1-1-2018-0474656-94
6 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2018.05.15 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2018-0474698-01
7 등록결정서
Decision to grant
2018.06.01 발송처리완료 (Completion of Transmission) 9-5-2018-0373839-08
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
레퍼런스 2D 영상 및 레퍼런스 깊이 정보를 학습하여 입력된 2D 영상의 최종 깊이 정보를 생성하는 깊이 정보 생성 장치로서,2D 영상의 1차 깊이 정보를 생성하는 깊이 추정부;상기 2D 영상의 1차 깊이 그래디언트 정보를 생성하는 깊이 그래디언트 추정부; 및상기 1차 깊이 정보 및 상기 1차 깊이 그래디언트 정보를 고려하여 최종 깊이 정보를 생성하는 깊이 정보 생성부를 포함하되,상기 깊이 추정부와 상기 깊이 그래디언트 추정부 및 상기 깊이 정보 생성부는 상기 레퍼런스 2D 영상에 대한 최종 깊이 정보를 생성하고, 상기 레퍼런스 2D 영상에 대해 생성된 최종 깊이 정보와 상기 레퍼런스 깊이 정보의 차분값이 최소가 되게 하는 상기 레퍼런스 2D 영상에 대한 최종 깊이 정보를 생성하도록 학습되며,상기 깊이 정보 생성부는 상기 최종 깊이 정보와 상기 1차 깊이 정보의 차분값 및 상기 최종 깊이 정보와 상기 1차 깊이 그래디언트 정보의 차분값이 최소가 되도록 상기 최종 깊이 정보를 생성하는 것을 특징으로 하는 2D 영상에 대한 깊이 정보 생성 장치
2 2
삭제
3 3
제1항에 있어서,상기 깊이 정보 생성부는 하기 수학식에 의해 상기 최종 깊이 정보를 생성하는 것을 특징으로 하는 2D 영상에 대한 깊이 정보 생성 장치
4 4
제3항에 있어서,상기 최종 깊이 정보는 SB 이터레이션에 의해 결정되는 것을 특징으로 하는 2D 영상에 대한 깊이 정보 생성 장치
5 5
제4항에 있어서,상기 SB 이터레이션의 번째 갱신은 하기 수학식에 의해 수행되는 것을 특징으로 하는 2D 영상에 대한 깊이 정보 생성 장치
6 6
제1항에 있어서,상기 깊이 추정부와 상기 깊이 그래디언트 추정부 및 상기 깊이 정보 생성부는 에러 역전파 알고리즘에 의해 학습되는 것을 특징으로 하는 2D 영상에 대한 깊이 정보 생성 장치
7 7
제1항에 있어서,상기 깊이 추정부는 콘볼루션과 다운 샘플링과 업샘플링 및 ReLU 연산을 통해 상기 1차 깊이 정보를 생성하는 것을 특징으로 하는 2D 영상에 대한 깊이 정보 생성 장치
8 8
제1항에 있어서,상기 깊이 추정부는 상기 레퍼런스 2D 영상의 1차 깊이 정보와 레퍼런스 깊이 정보의 차분값의 평균값이 최소가 되도록 사전에 훈련되어 있는 것을 특징으로 하는 2D 영상에 대한 깊이 정보 생성 장치
9 9
제1항에 있어서,상기 깊이 그래디언트 추정부는 콘볼루션 및 ReLU 연산을 통해 상기 1차 깊이 그래디언트 정보를 생성하는 것을 특징으로 하는 2D 영상에 대한 깊이 정보 생성 장치
10 10
제1항에 있어서,상기 깊이 그래디언트 추정부는 상기 레퍼런스 2D 영상의 1차 깊이 그래디언트 정보와 레퍼런스 깊이 그래디언트 정보의 차분값의 평균값이 최소가 되도록 사전에 훈련되어 있는 것을 특징으로 하는 2D 영상에 대한 깊이 정보 생성 장치
11 11
레퍼런스 2D 영상 및 레퍼런스 깊이 정보를 학습하여 입력된 2D 영상의 최종 깊이 정보를 생성하는 깊이 정보 생성 방법으로서,(a)상기 레퍼런스 2D 영상의 1차 깊이 정보 및 1차 깊이 그래디언트 정보를 생성하는 단계;(b)상기 레퍼런스 2D 영상의 1차 깊이 정보 및 1차 깊이 그래디언트 정보를 고려하여 상기 레퍼런스 2D 영상의 최종 깊이 정보를 생성하는 단계;(c)상기 레퍼런스 2D 영상의 최종 깊이 정보와 레퍼런스 깊이 정보의 차분값이 최소가 되도록 하는 상기 (a)단계 및 상기 (b)단계를 학습하는 단계;(d)상기 학습된 (a)단계 및 상기 (b)단계를 상기 입력된 2D 영상에 대해 수행하여 상기 입력된 2D 영상의 최종 깊이 정보를 생성하는 단계를 포함하되,상기 (b)단계는 상기 최종 깊이 정보와 상기 1차 깊이 정보의 차분값 및 상기 최종 깊이 정보와 상기 1차 깊이 그래디언트 정보의 차분값이 최소가 되도록 상기 최종 깊이 정보를 생성하는 것을 특징으로 하는 2D 영상에 대한 깊이 정보 생성 방법
12 12
삭제
13 13
제11항에 있어서,상기 (b)단계는 하기 수학식에 의해 상기 최종 깊이 정보를 생성하는 것을 특징으로 하는 2D 영상에 대한 깊이 정보 생성 방법
14 14
제13항에 있어서,상기 (b)단계의 상기 최종 깊이 정보는 SB 이터레이션에 의해 결정되는 것을 특징으로 하는 2D 영상에 대한 깊이 정보 생성 방법
15 15
제14항에 있어서,상기 SB 이터레이션의 번째 갱신은 하기 수학식에 의해 수행되는 것을 특징으로 하는 2D 영상에 대한 깊이 정보 생성 방법
16 16
제11항에 있어서,상기 (c)단계는 에러 역전파 알고리즘에 의해 학습되는 것을 특징으로 하는 2D 영상에 대한 깊이 정보 생성 방법
17 17
제11항에 있어서,상기 (a)단계는 콘볼루션과 다운 샘플링과 업샘플링 및 ReLU 연산을 통해 상기 1차 깊이 정보를 생성하는 것을 특징으로 하는 2D 영상에 대한 깊이 정보 생성 방법
18 18
제11항에 있어서,상기 (a)단계 이전에,상기 레퍼런스 2D 영상의 1차 깊이 정보와 레퍼런스 깊이 정보의 차분값의 평균값이 최소가 되도록 상기 (a)단계를 미리 훈련하는 단계를 더 포함하는 것을 특징으로 하는 2D 영상에 대한 깊이 정보 생성 방법
19 19
제11항에 있어서,상기 (a)단계는 콘볼루션 및 ReLU 연산을 통해 상기 1차 깊이 그래디언트 정보를 생성하는 것을 특징으로 하는 2D 영상에 대한 깊이 정보 생성 방법
20 20
제11항에 있어서,상기 (a)단계 이전에,상기 레퍼런스 2D 영상의 1차 깊이 그래디언트 정보와 레퍼런스 깊이 그래디언트 정보의 차분값의 평균값이 최소가 되도록 상기 (a)단계를 미리 훈련하는 단계를 더 포함하는 것을 특징으로 하는 2D 영상에 대한 깊이 정보 생성 방법
21 21
제11항 및 제13항 내지 제20항 중 어느 한 항의 2D 영상에 대한 깊이 정보 생성 방법을 수행하는 프로그램이 기록된 컴퓨터 판독 가능한 기록매체
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 미래창조과학부 연세대학교 산학협력단 정보통신방송연구개발사업 RGB+D 빅데이터 기반 고정밀 2D-to-Multiview 콘텐츠 변환 기술 개발(2/2)