| 1 |
1
동영상에서의 전경 레이어 추출 장치에 있어서,카메라에 의해 촬영된 원본 동영상을 수신하는 동영상 수신부;입력 장치를 통해 입력된 선택 정보에 의해 프레임별 영상 데이터에서의 레이어 영역의 윤곽을 따라 복수의 컨트롤 포인트들을 지정하는 초기 영역 지정부;상기 지정된 컨트롤 포인트들 연결하여 전경 레이어 영역을 생성하고, 상기 생성된 전경 레이어를 각 프레임에 대해 추적하는 레이어 영역 추적부; 및상기 레이어 영역이 추적된 모든 프레임에서 각각의 컨트롤 포인트 좌표를 곡선 생성방식으로 연결하고, 내부 영역을 레이어 영역으로 결정함으로써 알파맵을 생성하는 알파맵 생성부;를 포함하는 동영상에서의 전경 레이어 추출 장치
|
| 2 |
2
제1항에 있어서, 상기 장치는,상기 레이어 영역 추적부로부터 산출된 각각의 컨트롤 포인트에 대한 평면 추적 처리부와의 차이를 시간축 상에서 가우시안 스무딩하는 후처리부;를 더 포함하는 동영상에서의 전경 레이어 추출 장치
|
| 3 |
3
제1항에 있어서, 상기 레이어 영역 추적부는,추적하려는 레이어 영역을 평면으로 가정하고 2D 투영변환 관계를 나타내는 호모그래피 행렬을 계산하는 평면 추적 처리부;를 포함하는 동영상에서의 전경 레이어 추출 장치
|
| 4 |
4
제3항에 있어서, 상기 평면 추적 처리부는,상기 초기 영역 지정부에서 지정한 레이어 영역에 모폴로지 팽창연산을 적용하여 레이어 영역과 배경 간의 경계부분을 포함하도록 수 픽셀 범위를 확장시킨 영역을 생성하여 평면 추적 영역으로 처리하는 평면 추적 영역 정의부;상기 추적 영역 내에서 전후 프레임간 검출된 특징점들의 대응관계를 최적화하여 호모그래피 행렬을 계산하는 LKT 기반 평면 움직임 계산부; 및상기 LK 기반 평면 움직임 계산부에서 획득한 호모그래피 행렬을 추적 영역 안의 모든 픽셀의 컬러 정보에 대해 최적화하고, 각 컨트롤 포인트에 대해 상기 호모그래피 행렬을 적용하여 현재 프레임에서의 컨트롤 좌표를 계산하는 LM 기반 최적화부;를 포함하는 동영상에서의 전경 레이어 추출 장치
|
| 5 |
5
제1항에 있어서, 상기 레이어 영역 추적부는,상기 각 컨트롤 포인트에 대해 블록 매칭을 통해 현재 프레임에서의 더욱 정교한 좌표를 산출하는 미세 조정부;를 포함하는 동영상에서의 전경 레이어 추출 장치
|
| 6 |
6
제5항에 있어서, 상기 미세 조정부는,직전 프레임으로부터 해당 컨트롤 포인트의 템플릿 세트를 저장하며, 해당 컨트롤 포인트의 템플릿 세트가 미리 설정된 개수를 초과하면 오래된 템플릿 세트부터 순차적으로 제고하는 템플렛 세트 갱신부;상기 해당 컨트롤 포인트에 대해 상기 템플릿의 블록과 가장 유사한 현재 프레임의 위치를 탐색하는 컬러 블록 매칭부;상기 해당 컨트롤 포인트에 대해 컬러 영상에서의 유사도와 에지 영상에서의 유사도 간의 가중치 계수를 결정하는 컬러 및 에지 블록 가중치 계산부; 및소벨 에지 연산자를 이용하여 에지 영상을 산출하고, 상기 해당 컨트롤 포인트에 대해 전 후 프레임 영상에서의 블록 매칭을 통해 가장 유사한 위치를 검색하는 에지 블록 매칭 및 최종 매칭 결과 계산부;를 포함하는 동영상에서의 전경 레이어 추출 장치
|
| 7 |
7
동영상에서의 전경 레이어 추출 방법에 있어서,동영상 수신부에서 카메라에 의해 촬영된 원본 동영상을 수신하는 단계;초기 영역 지정부에서 입력 장치를 통해 입력된 선택 정보에 의해 프레임별 영상 데이터에서의 레이어 영역의 윤곽을 따라 복수의 컨트롤 포인트들을 지정하는 단계;레이어 영역 추적부에서 상기 지정된 컨트롤 포인트들 연결하여 전경 레이어 영역을 생성하는 단계;상기 레이어 영역 추적부에서 상기 생성된 전경 레이어를 각 프레임에 대해 추적하는 단계;알파맵 생성부에서 상기 레이어 영역이 추적된 모든 프레임에서 각각의 컨트롤 포인트 좌표를 곡선 생성방식으로 연결하는 단계; 및상기 알파맵 생성부에서 상기 연결된 내부 영역을 레이어 영역으로 결정함으로써 알파맵을 생성하는 단계;를 포함하는 동영상에서의 전경 레이어 추출 방법
|
| 8 |
8
제7항에 있어서, 상기 레이어 영역을 추적하는 단계 이후에,후처리부를 통해 상기 산출된 각각의 컨트롤 포인트에 대한 평면 추적 처리부와의 차이를 시간축 상에서 가우시안 스무딩하는 단계;를 더 포함하는 동영상에서의 전경 레이어 추출 방법
|
| 9 |
9
제7항에 있어서, 상기 레이어 영역을 추적하는 단계는,추적하려는 레이어 영역을 평면으로 가정하고 2D 투영변환 관계를 나타내는 호모그래피 행렬을 계산하는 단계;를 포함하는 동영상에서의 전경 레이어 추출 방법
|
| 10 |
10
제9항에 있어서, 상기 호모그래피 행렬을 계산하는 단계는,상기 초기 영역 지정부에서 지정한 레이어 영역에 모폴로지 팽창연산을 적용하여 레이어 영역과 배경 간의 경계부분을 포함하도록 수 픽셀 범위를 확장시킨 영역을 생성하여 평면 추적 영역으로 처리하는 단계;상기 추적 영역 내에서 전후 프레임간 검출된 특징점들의 대응관계를 최적화하여 호모그래피 행렬을 계산하는 단계; 및상기 획득한 호모그래피 행렬을 추적 영역 안의 모든 픽셀의 컬러 정보에 대해 최적화하고, 각 컨트롤 포인트에 대해 상기 호모그래피 행렬을 적용하여 현재 프레임에서의 컨트롤 좌표를 계산하는 단계;를 포함하는 동영상에서의 전경 레이어 추출 방법
|
| 11 |
11
제7항에 있어서, 상기 레이어 영역을 추적하는 단계는,상기 각 컨트롤 포인트에 대해 블록 매칭을 통해 현재 프레임에서의 더욱 정교한 좌표를 산출하는 미세 조정 단계;를 포함하는 동영상에서의 전경 레이어 추출 방법
|
| 12 |
12
제11항에 있어서, 상기 미세 조정 단계는,직전 프레임으로부터 해당 컨트롤 포인트의 템플릿 세트를 저장하며, 해당 컨트롤 포인트의 템플릿 세트가 미리 설정된 개수를 초과하면 오래된 템플릿 세트부터 순차적으로 제고하는 단계;상기 해당 컨트롤 포인트에 대해 상기 템플릿의 블록과 가장 유사한 현재 프레임의 위치를 탐색하는 단계;상기 해당 컨트롤 포인트에 대해 컬러 영상에서의 유사도와 에지 영상에서의 유사도 간의 가중치 계수를 결정하는 단계; 및에지 연산자를 이용하여 에지 영상을 산출하고, 상기 해당 컨트롤 포인트에 대해 전 후 프레임 영상에서의 블록 매칭을 통해 가장 유사한 위치를 검색하는 단계;를 포함하는 동영상에서의 전경 레이어 추출 방법
|
