맞춤기술찾기

이전대상기술

비디오 동영상의 움직이는 다중 객체 자동 분할 장치 및 방법

  • 기술번호 : KST2014045916
  • 담당센터 : 부산기술혁신센터
  • 전화번호 : 051-606-6561
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 동영상 합성 시스템에서 단안 비디오 촬영 카메라로부터 입력된 동영상의 움직이는 다중 객체의 자동 분할 방법에 관한 것으로, 객체 영역 분할을 위한 어떠한 사용자 간섭 장치의 사용 또는 학습 데이터를 이용한 사전 학습 과정 없이도 자동으로 입력된 동영상으로부터 직접 움직이는 객체 영역을 자동으로 분할하고, 움직이는 다중 객체의 영역과 윤곽을 추출하기 위하여 인접 프레임 영상 사이에서 픽셀 단위로 추정된 모션 벡터 필드 정보를 사용하고, 객체의 움직임으로 인한 가려짐 현상에 의해 모션 벡터가 추출되지 않는 제약으로 인하여 분할된 객체의 영역과 윤곽의 왜곡을 해결하기 위해 선택적으로 모션 필드 정보와 RGB 컬러 정보를 이용하고, 객체에 관한 사전 정보 없이 동영상에서 분할될 객체의 수를 자동으로 결정하며, 그래프 컷(Graph Cut)과 같은 최적화 알고리즘을 이용하여 자동 객체 분할의 최적 해를 찾는 것을 특징으로 한다. 본 발명에 의하면, 영화 및 방송 콘텐츠 제작을 위한 새로운 배경 동영상과 분할된 객체 동영상과의 합성 시에 정확성과 안전성을 확보할 수 있는 이점이 있다.자동 분할, 다중 객체, 합성, 카메라, 동영상, 모션, 컬러
Int. CL H04N 5/265 (2006.01) G06T 7/20 (2006.01)
CPC H04N 5/272(2013.01) H04N 5/272(2013.01) H04N 5/272(2013.01) H04N 5/272(2013.01) H04N 5/272(2013.01) H04N 5/272(2013.01)
출원번호/일자 1020090032223 (2009.04.14)
출원인 한국전자통신연구원
등록번호/일자 10-1173559-0000 (2012.08.07)
공개번호/일자 10-2010-0091864 (2010.08.19) 문서열기
공고번호/일자 (20120813) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보 대한민국  |   1020090010388   |   2009.02.10
법적상태 소멸
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2009.04.14)
심사청구항수 11

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국전자통신연구원 대한민국 대전광역시 유성구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 김종성 대한민국 대전광역시 동구
2 정일권 대한민국 대전광역시 서구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 제일특허법인(유) 대한민국 서울특별시 서초구 마방로 ** (양재동, 동원F&B빌딩)
2 김원준 대한민국 서울특별시 서초구 마방로 ** (양재동, 동원F&B빌딩)(제일특허법인(유))

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 (주)세모그래픽스 서울특별시 마포구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2009.04.14 수리 (Accepted) 1-1-2009-0224166-71
2 출원인정보변경(경정)신고서
Notification of change of applicant's information
2009.08.04 수리 (Accepted) 4-1-2009-5150899-36
3 의견제출통지서
Notification of reason for refusal
2011.04.18 발송처리완료 (Completion of Transmission) 9-5-2011-0206163-17
4 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2011.06.20 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2011-0463932-81
5 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2011.06.20 수리 (Accepted) 1-1-2011-0463931-35
6 최후의견제출통지서
Notification of reason for final refusal
2011.12.30 발송처리완료 (Completion of Transmission) 9-5-2011-0782642-30
7 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2012.02.08 수리 (Accepted) 1-1-2012-0101536-58
8 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2012.02.08 보정승인 (Acceptance of amendment) 1-1-2012-0101537-04
9 등록결정서
Decision to grant
2012.07.30 발송처리완료 (Completion of Transmission) 9-5-2012-0441160-16
10 출원인정보변경(경정)신고서
Notification of change of applicant's information
2015.02.02 수리 (Accepted) 4-1-2015-0006137-44
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
단안 비디오 촬영 카메라로부터 입력된 동영상의 각 프레임 별로 RGB 컬러 정보를 추출하는 RGB 컬러 추출부와, 상기 입력된 동영상의 인접 프레임 영상 간에 픽셀 단위의 모션 필드를 추출하는 모션 필드 추출부와,상기 추출된 모션 필드의 분포를 가우시안 혼합 모델(GMM)로 계산하여 상기 동영상 내의 움직이는 객체의 모션 모델 분포를 나타내도록 객체 모델에 해당하는 상기 GMM의 모든 인자를 자동으로 추정하여 움직이는 객체에 해당하는 모델을 자동으로 생성하는 객체 모델 자동 생성부와,상기 추출된 객체 영역의 모션 필드 정보와, 상기 RGB 컬러 정보를 이용하여 자동 생성된 객체 모델의 영역과 윤곽을 픽셀 단위로 분할하는 객체 영역 자동 분할부와,상기 분할된 객체의 유효성과 추가 분할 여부를 판단하여 분할된 객체 동영상을 출력하는 객체 유효성/분할 종료 검사부를 포함하는 비디오 동영상의 움직이는 다중 객체 자동 분할 장치
2 2
제 1항에 있어서,상기 모션 필드 추출부는,픽셀 별로 할당된 레이블을 통해 인접한 픽셀 중 제1프레임 내의 각 픽셀은 제2프레임 상의 하나의 픽셀에 대응하고, 상기 제2프레임에 대응되는 픽셀을 가지지 않는 상기 제1프레임의 픽셀은 모션 벡터 값이 추출되지 않는 가려진 픽셀로 설정하여 상기 모션 필드를 추출하는 비디오 동영상의 움직이는 다중 객체 자동 분할 장치
3 3
삭제
4 4
제 1항에 있어서,상기 객체 모델 자동 생성부는,상기 프레임에서 선택된 분할 영역 상에 있는 모션 벡터 값의 1차, 2차 모멘트에 해당하는 평균벡터와 분산 행렬을 계산하고, 상기 분산 행렬로부터 고유 값에 해당하는 상기 고유 벡터를 계산하여, 적어도 두 개의 부분영역으로 양분하여 객체 모델을 자동 생성하는 비디오 동영상의 움직이는 다중 객체 자동 분할 장치
5 5
제 1항에 있어서,상기 객체 영역 자동 분할부는,상기 추출된 모션 필드와 객체의 가우시안 모델 사이의 적합도를 나타내는 데이터 에너지와, 상기 동영상에서 임의의 픽셀과 이웃한 픽셀들의 레이블이 동일하게 할당되도록 하는 제약 에너지의 합으로 특정 레이블 할당 영역을 계산하여 객체의 영역과 윤곽의 분할을 수행하는 비디오 동영상의 움직이는 다중 객체 자동 분할 장치
6 6
제 1항에 있어서,상기 다중 객체 자동 분할 장치는,상기 분할된 객체의 수가 기 설정된 분할 가능한 객체의 수 보다 적은 경우, 더 이상 분할되지 않는 영역을 제외한 대상 분할 영역을 새로운 분할 대상 영역으로 선택하여 객체 분할을 수행하는 분할 영역 선택부를 포함하는비디오 동영상의 움직이는 다중 객체 자동 분할 장치
7 7
단안 비디오 촬영 카메라로부터 입력된 동영상의 각 프레임 별로 RGB 컬러 정보를 추출하는 과정과, 상기 입력된 동영상의 인접 프레임 영상 간에 픽셀 단위의 모션 필드를 추출하는 과정과,상기 추출된 모션 필드의 분포를 가우시안 혼합 모델(GMM)로 계산하여 상기 동영상 내의 움직이는 객체의 모션 모델 분포를 나타내도록 객체 모델에 해당하는 상기 GMM의 모든 인자를 자동으로 추정하여 움직이는 객체 모델을 자동으로 생성하는 과정과,상기 추출된 객체 영역의 모션 필드 정보와, 상기 RGB 컬러 정보를 이용하여 자동 생성된 객체 모델의 영역과 윤곽을 픽셀 단위로 분할하는 과정과,상기 분할된 객체의 유효성과 추가 분할 여부를 판단하여 분할된 객체 동영상을 출력하는 과정을 포함하는 비디오 동영상의 움직이는 다중 객체 자동 분할 방법
8 8
제 7항에 있어서,상기 모션 필드 정보를 추출하는 과정은,픽셀 별로 할당된 레이블을 통해 인접한 픽셀 중 제1프레임 내의 각 픽셀은 제2프레임 상의 하나의 픽셀에 대응하고, 상기 제2프레임에 대응되는 픽셀을 가지지 않는 상기 제1프레임의 픽셀은 모션 벡터 값이 추출되지 않는 가려진 픽셀로 설정하여 모션 필드를 추출하는 비디오 동영상의 움직이는 다중 객체 자동 분할 방법
9 9
제 7항에 있어서,상기 객체 모델을 자동으로 생성하는 과정은,상기 추출된 모션 필드의 분포를 가우시안 혼합 모델(GMM)로 계산하여 상기 동영상 내의 움직이는 객체의 모션 모델 분포를 나타내도록 상기 객체 모델에 해당하는 상기 GMM의 모든 인자를 자동으로 추정하는비디오 동영상의 움직이는 다중 객체 자동 분할 방법
10 10
제 7항에 있어서,상기 객체 모델을 자동으로 생성하는 과정은,상기 프레임에서 선택된 분할 영역 상에 있는 모션 벡터 값의 1차, 2차 모멘트에 해당하는 평균벡터와 분산 행렬을 계산하고, 상기 분산 행렬로부터 고유 값에 해당하는 상기 고유 벡터를 계산하여, 적어도 두 개의 부분영역으로 양분하여 객체 모델을 자동으로 생성하는 비디오 동영상의 움직이는 다중 객체 자동 분할 방법
11 11
제 7항에 있어서,상기 객체 모델의 영역과 윤곽을 픽셀 단위로 분할하는 과정은,상기 추출된 모션 필드 정보와 객체의 가우시안 모델 사이의 적합도를 나타내는 데이터 에너지와, 상기 동영상에서 임의의 픽셀과 이웃한 픽셀들의 레이블이 동일하게 할당되도록 하는 제약 에너지의 합으로 특정 레이블 할당 영역을 계산하여 객체의 영역과 윤곽의 분할을 수행하는비디오 동영상의 움직이는 다중 객체 자동 분할 방법
12 12
제 7항에 있어서, 상기 추가 분할 여부의 판단을 수행하여, 상기 분할된 객체의 수가 기 설정된 분할 가능한 객체의 수 보다 적은 경우, 더 이상 분할되지 않는 영역을 제외한 대상 분할 영역을 새로운 분할 대상 영역으로 선택하여 객체 분할을 수행하는 비디오 동영상의 움직이는 다중 객체 자동 분할 방법
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 지식경제부 및 정보통신연구진흥원 한국전자통신연구원 IT성장동력기술개발사업 디지털 크리쳐 제작 S/W 개발