맞춤기술찾기

이전대상기술

홀 채움 방법, 이를 수행하기 위한 기록매체 및 장치(METHOD OF HOLL-FILLING, RECORDING MEDIUM AND APPARATUS FOR PERFORMING THE METHOD)

  • 기술번호 : KST2017014819
  • 담당센터 : 서울서부기술혁신센터
  • 전화번호 : 02-6124-6930
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 각 프레임에 대한 컬러 영상 및 그에 대응하는 깊이 맵 정보를 포함하는 입력 영상으로부터 가상 시접 영상을 합성하는 과정에서 발생하는 홀 영역에 대한 홀 채움 방법에 있어서, 상기 입력 영상의 현재 프레임에 대한 정적 배경 정보를 추출하고 이를 이용하여 가상 정적 배경 정보를 추출하며, 상기 현재 프레임에 대한 컬러 영상 및 깊이 맵을 워핑하여 가상 영상과 가상 깊이 맵을 획득하고, 가상 깊이 맵에 나타나는 홀 영역에 대한 레이블링을 수행하여 국부 배경 정보를 추출하며, 상기 가상 정적 배경 정보와 상기 국부 배경 정보 간의 유사도를 이용하여 상기 가상 영상 및 상기 가상 깊이 맵에 대한 1차 홀 채움을 수행하고, 상기 1차 홀 채움 뒤 잔존 홀들에 대하여 깊이 항을 포함하는 우선순위 함수를 적용한 표본 기반 인페인팅 방식으로 2차 홀 채움을 수행하는 홀 채움 방법이 개시된다.
Int. CL H04N 13/04 (2016.04.13) H04N 13/00 (2016.04.13) G06T 7/00 (2016.04.13)
CPC H04N 13/356(2013.01) H04N 13/356(2013.01) H04N 13/356(2013.01) H04N 13/356(2013.01)
출원번호/일자 1020160027719 (2016.03.08)
출원인 숭실대학교산학협력단
등록번호/일자
공개번호/일자 10-2017-0104825 (2017.09.18) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2016.03.08)
심사청구항수 15

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 숭실대학교산학협력단 대한민국 서울특별시 동작구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 홍민철 대한민국 서울특별시 동작구
2 김범수 대한민국 서울특별시 동작구
3 응웬띠엔닷 베트남 서울특별시 동작구
4 도안후노이 베트남 서울특별시 동작구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 윤귀상 대한민국 서울특별시 금천구 디지털로*길 ** ***호 (가산동, 한신IT타워*차)(디앤특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 숭실대학교산학협력단 대한민국 서울특별시 동작구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2016.03.08 수리 (Accepted) 1-1-2016-0224082-76
2 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2016.05.20 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2016-0488079-52
3 출원인정보변경(경정)신고서
Notification of change of applicant's information
2016.08.04 수리 (Accepted) 4-1-2016-5110636-51
4 선행기술조사의뢰서
Request for Prior Art Search
2016.12.13 수리 (Accepted) 9-1-9999-9999999-89
5 선행기술조사보고서
Report of Prior Art Search
2017.02.10 발송처리완료 (Completion of Transmission) 9-6-2017-0026600-98
6 의견제출통지서
Notification of reason for refusal
2017.02.17 발송처리완료 (Completion of Transmission) 9-5-2017-0121609-81
7 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2017.04.17 수리 (Accepted) 1-1-2017-0371312-21
8 등록결정서
Decision to grant
2017.09.14 발송처리완료 (Completion of Transmission) 9-5-2017-0647252-77
9 [일부 청구항 포기]취하(포기)서
[Abandonment of Partial Claims] Request for Withdrawal (Abandonment)
2017.09.20 수리 (Accepted) 2-1-2017-0595902-25
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
각 프레임에 대한 컬러 영상 및 그에 대응하는 깊이 맵 정보를 포함하는 입력 영상으로부터 가상 시점 영상을 합성하는 과정에서 발생하는 홀 영역에 대한 홀 채움 방법에 있어서,상기 입력 영상의 현재 프레임에 대한 정적 배경 정보를 추출하고 이를 이용하여 가상 정적 배경 정보를 추출하며,상기 현재 프레임에 대한 컬러 영상 및 깊이 맵을 워핑하여 가상 영상과 가상 깊이 맵을 획득하고, 가상 깊이 맵에 나타나는 홀 영역에 대한 레이블링을 수행하여 국부 배경 정보를 추출하며,상기 가상 정적 배경 정보와 상기 국부 배경 정보 간의 유사도를 이용하여 상기 가상 영상 및 상기 가상 깊이 맵에 대한 1차 홀 채움을 수행하고, 상기 1차 홀 채움 뒤 잔존 홀들에 대하여 깊이 항을 포함하는 우선순위 함수를 적용한 표본 기반 인페인팅 방식으로 2차 홀 채움을 수행하는 홀 채움 방법
2 2
제1항에 있어서,상기 입력 영상의 현재 프레임에 대한 정적 배경 정보를 추출하고 이를 이용하여 가상 정적 배경 정보를 추출하는 것은,상기 입력 영상의 각 프레임별로 컬러 영상 및 컬러 영상에 대응하는 깊이 맵 정보를 이용하여 코드북을 생성하고, 상기 코드북의 코드워드들을 배경 코드워드와 전경 코드워드로 분류하여 상기 입력 영상의 배경 영역에 대한 배경 코드북을 추출하는 것을 포함하는 홀 채움 방법
3 3
제2항에 있어서,상기 입력 영상의 현재 프레임에 대한 정적 배경 정보를 추출하고 이를 이용하여 가상 정적 배경 정보를 추출하는 것은,상기 배경 코드북을 이용하여 상기 입력 영상의 현재 프레임에서의 배경 영상과 그에 대응하는 배경 깊이 맵을 임시 배경 정보로 추출하고, 이전 프레임에서의 배경 정보를 이용하여 상기 임시 배경 정보를 갱신하는 방식으로 상기 현재 프레임에 대한 정적 배경 영상 및 정적 깊이 맵을 포함하는 정적 배경 정보를 추출하는 것을 포함하는 홀 채움 방법
4 4
제3항에 있어서,상기 입력 영상의 현재 프레임에 대한 정적 배경 정보를 추출하고 이를 이용하여 가상 정적 배경 정보를 추출하는 것은,상기 정적 배경 영상과 상기 정적 깊이 맵을 워핑하여 가상 정적 배경 영상 및 그에 대응하는 가상 정적 배경 깊이 맵을 포함하는 상기 가상 정적 배경 정보를 추출하는 것을 포함하는 홀 채움 방법
5 5
제1항에 있어서,상기 가상 깊이 맵에 나타나는 홀 영역에 대한 레이블링을 수행하여 국부 배경 정보를 추출하는 것은,상기 가상 깊이 맵에 나타나는 홀 영역을 포함하는 사각 영역을 레이블링하고, 상기 레이블링된 사각 영역의 깊이 정보에 따라 배경 화소와 전경 화소를 구별하여 국부 배경 깊이값을 획득하고, 상기 사각 영역의 전경 화소로 구별된 영역을 상기 국부 배경 깊이값으로 채움으로써 상기 국부 배경 정보를 추출하는 것인 홀 채움 방법
6 6
제1항에 있어서,상기 가상 정적 배경 정보와 상기 국부 배경 정보 간의 유사도를 이용하여 상기 가상 영상 및 상기 가상 깊이 맵에 대한 1차 홀 채움을 수행하는 것은,상기 국부 배경 정보에 대응하는 화소로부터 일정 범위 내에 위치하는 화소에 대응하는 상기 가상 정적 배경 정보를 이용하여 상기 가상 영상 및 상기 가상 깊이 맵을 갱신하는 것인 홀 채움 방법
7 7
제6항에 있어서,상기 1차 홀 채움 뒤 잔존 홀들에 대하여 깊이 항을 포함하는 우선순위 함수를 적용한 표본 기반 인페인팅 방식으로 2차 홀 채움을 수행하는 것은,갱신된 상기 가상 영상 및 상기 가상 깊이 맵에서 잔존 홀 화소들을 레이블링하고, 그 결과에 따라 가장 작은 홀 영역에서 시작하여 가장 큰 홀 영역으로 옮겨가며 상기 표본 기반 인페인팅 방식으로 2차 홀 채움을 수행하는 것인 홀 채움 방법
8 8
제1항 내지 제7항 중 어느 하나의 항에 따른 홀 채움 방법을 수행하기 위한, 컴퓨터 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체
9 9
각 프레임에 대한 컬러 영상 및 그에 대응하는 깊이 맵 정보를 포함하는 입력 영상으로부터 가상 시점 영상을 합성하는 과정에서 발생하는 홀 영역에 대한 홀 채움을 수행하는 홀 채움 장치에 있어서,상기 입력 영상의 현재 프레임에 대한 정적 배경 정보를 추출하고 이를 이용하여 가상 정적 배경 정보를 추출하는 정적 배경 정보 추출부;상기 현재 프레임에 대한 컬러 영상 및 깊이 맵을 워핑하여 가상 영상과 가상 깊이 맵을 획득하고, 가상 깊이 맵에 나타나는 홀 영역에 대한 레이블링을 수행하여 국부 배경 정보를 추출하는 국부 배경 정보 추출부; 및상기 가상 정적 배경 정보와 상기 국부 배경 정보 간의 유사도를 이용하여 상기 가상 영상 및 상기 가상 깊이 맵에 대한 1차 홀 채움을 수행하고, 상기 1차 홀 채움 뒤 잔존 홀들에 대하여 깊이 항을 포함하는 우선순위 함수를 적용한 표본 기반 인페인팅 방식으로 2차 홀 채움을 수행하는 홀 채움부를 포함하는 홀 채움 장치
10 10
제9항에 있어서,상기 정적 배경 정보 추출부는,상기 입력 영상의 각 프레임별로 컬러 영상 및 컬러 영상에 대응하는 깊이 맵 정보를 이용하여 코드북을 생성하고, 상기 코드북의 코드워드들을 배경 코드워드와 전경 코드워드로 분류하여 상기 입력 영상의 배경 영역에 대한 배경 코드북을 추출하는 것을 포함하는 홀 채움 장치
11 11
[청구항 11은(는) 설정등록료 납부시 포기되었습니다
12 12
[청구항 12은(는) 설정등록료 납부시 포기되었습니다
13 13
제9항에 있어서,상기 국부 배경 정보 추출부는,상기 가상 깊이 맵에 나타나는 홀 영역을 포함하는 사각 영역을 레이블링하고, 상기 레이블링된 사각 영역의 깊이 정보에 따라 배경 화소와 전경 화소를 구별하여 국부 배경 깊이값을 획득하고, 상기 사각 영역의 전경 화소로 구별된 영역을 상기 국부 배경 깊이값으로 채움으로써 상기 국부 배경 정보를 추출하는 것인 홀 채움 장치
14 14
제9항에 있어서,상기 홀 채움부는,상기 국부 배경 정보에 대응하는 화소로부터 일정 범위 내에 위치하는 화소에 대응하는 상기 가상 정적 배경 정보를 이용하여 상기 가상 영상 및 상기 가상 깊이 맵을 갱신하는 것을 포함하는 홀 채움 장치
15 15
[청구항 15은(는) 설정등록료 납부시 포기되었습니다
지정국 정보가 없습니다
순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - 패밀리정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 US09916694 US 미국 FAMILY
2 US20170263057 US 미국 FAMILY

DOCDB 패밀리 정보

순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - DOCDB 패밀리 정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 US2017263057 US 미국 DOCDBFAMILY
2 US9916694 US 미국 DOCDBFAMILY
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 미래창조과학부 숭실대학교 산학협력단 차세대정보컴퓨팅기술개발사업 다중 사용자 의도의 능동 인지 및 응답을 위한 MIMO HCI SW 원천 기술 개발