맞춤기술찾기

홈으로 가기
맞춤기술찾기
이전대상기술
프린트하기

이전대상기술

단안 비디오로부터의 5차원 라이트필드 비디오 합성 방법 및 장치

  • 기술번호 : KST2021013278
  • 담당센터 : 인천기술혁신센터
  • 전화번호 : 032-420-3580
상담신청 PDF 받기
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 단안 비디오로부터의 5차원 라이트필드 비디오 합성 방법 및 장치가 제시된다. 일 실시예에 따른 컴퓨터로 구현된 단안 비디오로부터의 5차원 라이트필드 비디오 합성 장치를 이용한 단안 비디오로부터의 5차원 라이트필드 비디오 합성 방법은, 입력된 단안 비디오 프레임으로부터 특징을 추출하는 단계; 추출된 상기 특징을 사용하여 딥러닝 네트워크를 기반으로 시간 t에서의 각 SAI(sub-aperture image)에 대응되는 어피어런스 플로우(appearance flow)를 추정하는 단계; 및 bilinear sampler module을 통해 추정한 상기 어피어런스 플로우(appearance flow)로부터 라이트필드 비디오를 합성하는 단계를 포함하여 이루어질 수 있다.
Int. CL G06T 7/557 (2017.01.01) G06N 3/08 (2006.01.01)
CPC G06T 7/557(2013.01) G06N 3/08(2013.01) G06T 2207/10052(2013.01) G06T 2207/20084(2013.01)
출원번호/일자 1020200066458 (2020.06.02)
출원인 인하대학교 산학협력단
등록번호/일자
공개번호/일자 10-2021-0149425 (2021.12.09) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2020.06.02)
심사청구항수 7

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 인하대학교 산학협력단 대한민국 인천광역시 미추홀구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 박인규 서울특별시 강남구
2 배규호 인천광역시 연수구
3 이반 인천광역시 미추홀구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 양성보 대한민국 서울특별시 강남구 선릉로***길 ** (논현동) 삼성빌딩 *층(피앤티특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application		 2020.06.02 수리 (Accepted) 1-1-2020-0566694-57
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
컴퓨터로 구현된 단안 비디오로부터의 5차원 라이트필드 비디오 합성 장치를 이용한 단안 비디오로부터의 5차원 라이트필드 비디오 합성 방법에 있어서, 입력된 단안 비디오 프레임으로부터 특징을 추출하는 단계; 추출된 상기 특징을 사용하여 딥러닝 네트워크를 기반으로 시간 t에서의 각 SAI(sub-aperture image)에 대응되는 어피어런스 플로우(appearance flow)를 추정하는 단계; 및 bilinear sampler module을 통해 추정한 상기 어피어런스 플로우(appearance flow)로부터 라이트필드 비디오를 합성하는 단계를 포함하는, 단안 비디오로부터의 5차원 라이트필드 비디오 합성 방법
2 2
제1항에 있어서,추출된 상기 특징을 사용하여 딥러닝 네트워크를 기반으로 광학 플로우를 획득한 후 상기 라이트필드 비디오에 시간적 일관성을 부여하는 단계를 더 포함하는, 단안 비디오로부터의 5차원 라이트필드 비디오 합성 방법
3 3
제1항에 있어서,상기 입력된 단안 비디오 프레임으로부터 특징을 추출하는 단계는, 입력된 단안 비디오 프레임으로부터 특징을 추출하기 위해 초기 특징 추정 인코더(encoder)를 사용해 초기 특징을 추정하는 단계; 및 상기 초기 특징을 추정한 후, 상관관계 계층을 통과하여 상관관계 정보와 초기 특징들을 결합하여 최종 특징을 추정하는 단계를 포함하는, 단안 비디오로부터의 5차원 라이트필드 비디오 합성 방법
4 4
제1항에 있어서,상기 어피어런스 플로우(appearance flow)로부터 라이트필드를 합성하는 단계는, bilinear sampler module을 통해 입력 영상을 각 angular domain 좌표에 따라 angular 이동 상수에 비례한 수치만큼 영상의 화소 좌표를 이동시킨 영상에 추정한 상기 어피어런스 플로우(appearance flow)를 워핑(warping)하여 시간 t에서의 라이트필드 비디오를 획득하는 것을 특징으로 하는, 단안 비디오로부터의 5차원 라이트필드 비디오 합성 방법
5 5
제1항에 있어서,상기 어피어런스 플로우(appearance flow)로부터 라이트필드를 합성하는 단계는, 합성한 초기 라이트필드의 품질을 향상시키기 위해 상기 초기 라이트필드의 분산 영상을 활용해 이진 마스크를 형성하고, 라이트필드의 분산 영상은 장면의 폐색 영역(occlusion region)의 정보를 나타내는 상기 라이트필드의 분산 영상을 활용하여 3D CNN(Convolutional Neural Network)으로 이루어진 폐색 네트워크(occlusion network)를 구성하여 최종 라이트필드를 합성하는 것을 특징으로 하는, 단안 비디오로부터의 5차원 라이트필드 비디오 합성 방법
6 6
입력된 단안 비디오 프레임으로부터 특징을 추출하는 특징 추출부; 추출된 상기 특징을 사용하여 딥러닝 네트워크를 기반으로 시간 t에서의 각 SAI(sub-aperture image)에 대응되는 어피어런스 플로우(appearance flow)를 추정하는 어피어런스 플로우 추정부; 및 bilinear sampler module을 통해 추정한 상기 어피어런스 플로우(appearance flow)로부터 라이트필드를 합성하는 라이트필드 합성부를 포함하는, 단안 비디오로부터의 5차원 라이트필드 비디오 합성 장치
7 7
제6항에 있어서,추출된 상기 특징을 사용하여 딥러닝 네트워크를 기반으로 광학 플로우를 획득한 후 상기 라이트필드 비디오에 시간적 일관성을 부여하는 시간 일관성 제공부를 더 포함하는, 단안 비디오로부터의 5차원 라이트필드 비디오 합성 장치
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 삼성전자(주) 인하대학교 일반수탁연구지원사업 라이트필드 기반의 초시공간 360도 영상 취득 및 처리 기술
2 과학기술정보통신부 한국전자통신연구원 방송통신산업기술개발사업 [Ezbaro] 스마트기기를 위한 온디바이스 지능형 정보처리 가속화 SW플랫폼 기술 개발(4차년도)