맞춤기술찾기

이전대상기술

의사결정트리를 이용한 다양한 크기의 한글자막 추출 방법및 이를 기록한 기록매체

  • 기술번호 : KST2015143446
  • 담당센터 : 경기기술혁신센터
  • 전화번호 : 031-8006-1570
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 한글자막이 포함된 원 영상에서 다수의 방향에 따른 방향별 에지들을 추출하고, 에지들을 연결하여 구성된 연결객체를 생성하고, 상기 연결객체가 자막인지 배경인지를 판정하여, 자막을 추출하는 한글자막 추출 방법에 관한 것으로서, (b) 원 영상을 전처리하는 단계; (c) 상기 전처리된 영상으로부터 방향별 에지를 추출하여 방향별 에지 영상을 만들고, 상기 방향별 에지 영상을 모두 합한 영상에서 자막특징을 가지지 않는 에지를 제외하여 자막에지 후보 영상을 생성하는 단계; (d) 상기 자막에지 후보 영상에서 연결된 에지들로부터 연결객체를 추출하여 자막후보 연결객체 영상을 생성하고, 의사결정트리에 따라 상기 연결객체를 자막 또는 배경으로 판정하여 자막탐색 결과 영상을 생성하는 단계; (e) 상기 자막탐색 결과 영상에 속하는 연결객체와 대응되는 전처리된 영상을 자막과 배경으로 이진화하여 이진화된 자막 영상을 추출하는 단계를 포함하는 구성을 마련한다. 상기와 같은 한글자막 추출 방법에 의해, 자막에 포함되는 에지들의 특징을 고려하여 자막을 추출함으로써, 다양한 크기를 지닌 한국어 자막에서도 영상의 자막 추출 성능을 향상시킬 수 있다. 한글, 자막, 영상, 추출, 에지, 방향
Int. CL H04N 7/08 (2006.01)
CPC
출원번호/일자 1020080076387 (2008.08.05)
출원인 성균관대학교산학협력단
등록번호/일자
공개번호/일자 10-2010-0016770 (2010.02.16) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 거절
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2008.08.05)
심사청구항수 23

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 성균관대학교산학협력단 대한민국 경기도 수원시 장안구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 정제희 대한민국 인천광역시 계양구
2 김재광 대한민국 경기도 구리시
3 윤태복 대한민국 경기도 수원시 장안구
4 이지형 대한민국 서울 용산구
5 김정훈 대한민국 경기도 수원시 장안구
6 이동훈 대한민국 경기도 안양시 동안구
7 김건수 대한민국 경기도 수원시 장안구
8 이승훈 대한민국 경기도 수원시 장안구
9 윤광호 대한민국 서울특별시 양천구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인정직과특허 대한민국 서울 강남구 선릉로 ***(논현동, 썬라이더빌딩 *층)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2008.08.05 수리 (Accepted) 1-1-2008-0561801-92
2 선행기술조사의뢰서
Request for Prior Art Search
2009.01.12 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2009.02.19 수리 (Accepted) 9-1-2009-0012450-25
4 의견제출통지서
Notification of reason for refusal
2010.03.19 발송처리완료 (Completion of Transmission) 9-5-2010-0117630-38
5 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2010.05.17 수리 (Accepted) 1-1-2010-0313205-43
6 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2010.05.17 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2010-0313208-80
7 거절결정서
Decision to Refuse a Patent
2010.09.15 발송처리완료 (Completion of Transmission) 9-5-2010-0409526-14
8 [법정기간연장]기간연장(단축, 경과구제)신청서
[Extension of Legal Period] Request for Extension of Period (Reduction, Expiry Reconsideration)
2010.10.13 수리 (Accepted) 7-1-2010-0042693-16
9 [분할출원]특허출원서
[Divisional Application] Patent Application
2010.11.15 불수리 (Non-acceptance) 1-1-2010-0744379-65
10 출원인정보변경(경정)신고서
Notification of change of applicant's information
2012.04.26 수리 (Accepted) 4-1-2012-5090770-53
11 출원인정보변경(경정)신고서
Notification of change of applicant's information
2012.06.20 수리 (Accepted) 4-1-2012-5131828-19
12 출원인정보변경(경정)신고서
Notification of change of applicant's information
2012.06.27 수리 (Accepted) 4-1-2012-5137236-29
13 출원인정보변경(경정)신고서
Notification of change of applicant's information
2017.02.23 수리 (Accepted) 4-1-2017-5028829-43
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
한글자막이 포함된 원 영상에서 각 방향에 따른 방향별 에지를 추출하고 추출된 방향별 에지들을 연결하여 구성된 연결객체에 대하여, 상기 연결객체가 자막인지 배경인지를 판정하는 한글자막 추출을 위한 의사결정트리 생성방법에 있어서, (a1) 한글자막이 포함된 소정의 개수의 영상을 학습군으로 선정하는 단계; (a2) 상기 학습군에 속하는 학습영상 각각에 대하여, 상기 학습영상의 색상차원을 감소시켜 전처리된 영상을 생성하는 단계; (a3) 상기 전처리된 영상으로부터 방향별 에지를 추출하여 방향별 에지 영상을 만들고, 상기 방향별 에지 영상을 모두 합한 영상에서 에지 대응쌍을 가지지 못하는 에지를 제외하여 자막에지 후보 영상을 생성하는 단계; (a4) 상기 자막에지 후보 영상에서 연결된 에지들로부터 연결객체를 추출하여 자막후보 연결객체 영상을 생성하는 단계; (a5) 상기 자막후보 연결객체 영상에 속하는 연결객체에 대하여, 각 연결객체의 방향별 에지의 픽셀비율 및 중심픽셀의 밝기 편차를 구하고, 각 연결객체가 자막 또는 배경인지를 입력받는 단계; (a6) 상기 학습군에 속하는 영상에 대하여, 학습영상의 연결객체의 방향별 에지의 픽셀비율 및 중심픽셀의 밝기 편차를 설명변수로 설정하고, 자막 또는 배경 여부를 목적변수로 설정하여 학습시켜서 의사결정트리를 구성하는 단계를 포함하는 것을 특징으로 하는 다양한 크기의 한글자막 추출을 위한 의사결정트리 생성방법
2 2
제 1항에 있어서, 상기 (a7)단계에서, 상기 의사결정트리를 에러율이 3 ~ 5%로 수렴되는 깊이가 20 이내인 것으로 구성하는 것을 특징으로 하는 다양한 크기의 한글자막 추출을 위한 의사결정트리 생성방법
3 3
제 1항의 의사결정트리 생성방법에 의한 의사결정트리를 이용하여, 한글자막이 포함된 원 영상에서 다수의 방향에 따른 방향별 에지들을 추출하고, 에지들을 연결하여 구성된 연결객체를 생성하고, 상기 연결객체가 자막인지 배경인지를 판정하여, 자막을 추출하는 한글자막 추출 방법에 있어서, (b) 상기 원 영상의 색상차원을 감소시켜 전처리된 영상을 생성하는 단계; (c) 상기 전처리된 영상으로부터 방향별 에지를 추출하여 방향별 에지 영상을 만들고, 상기 방향별 에지 영상을 모두 합한 영상에서 에지 대응쌍을 가지지 못하는 에지를 제외하여 자막에지 후보 영상을 생성하는 단계; (d) 상기 자막에지 후보 영상에서 연결된 에지들로부터 연결객체를 추출하여 자막후보 연결객체 영상을 생성하고, 상기 연결객체의 방향별 에지의 픽셀비율 및 중심픽셀의 밝기 편차를 구하여 상기 의사결정트리에 따라 상기 연결객체를 자막 또는 배경으로 판정하여 자막탐색 결과 영상을 생성하는 단계; (e) 상기 자막탐색 결과 영상에 속하는 연결객체와 대응되는 전처리된 영상을 자막과 배경으로 이진화하여 이진화된 자막 영상을 추출하는 단계를 포함하는 것을 특징으로 하는 의사결정트리를 이용한 다양한 크기의 한글자막 추출 방법
4 4
제 3항에 있어서, 상기 (c)단계는, (c1) 상기 전처리된 영상(G)으로부터 각 방향별 에지 영상(Ex)을 생성하는 단계; (c2) 상기 방향별 에지 영상(Ex) 각각에 대하여, 각 픽셀의 값을 소정의 임계치를 기준으로 이상인 경우와 이하인 경우로 2가지로 맵핑하여, 이진화된 방향별 에지 영상(BEx)을 생성하는 단계; (c3) 상기 이진화된 방향별 에지 영상(BEx)을 모두 OR 연산하여 결합하고, 결합된 상기 영상에서 에지 대응쌍을 가지지 못하는 에지를 제외하여 자막에지 후보 영상(CCE)을 생성하는 단계를 포함하는 것을 특징으로 하는 의사결정트리를 이용한 다양한 크기의 한글자막 추출 방법
5 5
제 4항에 있어서, 상기 (d)단계는, (d1) 상기 자막 에지 후보 영상(CCE)에서 연결된 에지들로부터 연결객체를 추출하여 자막후보 연결객체 영상(C4)을 생성하는 단계; (d2) 상기 이진화된 방향별 에지 영상(BEX)에서 방향정제 마스크를 적용하여 정제된 방향별 에지 영상(REX)을 생성하는 단계; (d3) 상기 자막후보 연결객체 영상(C4)에 속하는 연결객체 각각에 대하여, 연결객체의 방향별 에지의 픽셀비율 및 중심픽셀의 밝기 편차를 구하여, 상기 의사결정트리에 따라 상기 연결객체를 자막 또는 배경으로 판정하는 단계; (d4) 자막 또는 배경으로 판정된 상기 연결객체의 수평라인 위치 비교, 또는 수평라인에 위치하는 자막 판정 연결객체의 빈도를 통해 상기 연결객체를 자막 또는 배경으로 재판정하여, 자막탐색 결과 영상(DR)을 생성하는 단계를 포함하는 것을 특징으로 하는 의사결정트리를 이용한 다양한 크기의 한글자막 추출 방법
6 6
제 5항에 있어서, 상기 (b)단계는, (b1) 상기 원 영상의 각 픽셀 (x,y)을 [식 1]을 이용하여, 색상 영상을 명암도 영상으로 변환하고, 상기 명암도 영상을 생성하는 단계; [식 1] 단, G는 명암도 영상이고, CR, CG, CB는 각각 붉은색, 녹색, 파란색의 색상영상이다
7 7
제 5항에 있어서, 상기 방향별 에지 영상(Ex) 또는 이진화되거나 정제된 방향별 에지 영상(BEx또는 REx)은 1시, 3시, 5시, 6시, 7시, 9시, 11시, 12시 방향마다 방향별 에지 영상을 갖는 것을 특징으로 하는 의사결정트리를 이용한 다양한 크기의 한글자막 추출 방법
8 8
제 7항에 있어서, 상기 (c1)단계는, 상기 각 방향별 에지 영상(Ex)을 [식 3]에 따라 생성하는 것을 특징으로 의사결정트리를 이용한 다양한 크기의 한글자막 추출 방법
9 9
제 8항에 있어서, 상기 (c2)단계에서, 상기 각 방향별 에지 영상에 대하여, 영상의 각 y번째 수평라인에 존재하는 연속적인 에지의 수와 전체 에지의 수의 비율에 따라 자막이 존재하는 수평라인과 존재하지 않는 수평라인을 구분하고, 상기 구분에 따라 수평라인마다 다른 임계치를 적용하는 것을 특징으로 의사결정트리를 이용한 다양한 크기의 한글자막 추출 방법
10 10
제 9항에 있어서, 상기 (c2)단계에서, (c21) 상기 각 방향별 에지 이진화 영상(BEx)에 대하여, 영상의 각 y번째 수평라인의 thres-horizon(y)을 [식 4]에 의해 구하고, 상기 thres-horizon(y)이 1이면 상기 y번째 수평라인은 이진화 기준 수평라인으로 결정되는 단계; [식 4] 단, 는 6시 또는 12시 방향의 에지 영상에서 y번째 수평라인에 있는 에지 중에서 우측으로 가장 가까운 에지까지의 거리가 1인 에지, 즉 연속적인 에지의 개수이고, 는 6시 또는 12시 방향의 에지 영상에서 y번째 수평라인에 존재하는 모든 에지의 개수이다
11 11
제 10항에 있어서, 상기 (c3)단계는, (c31) 상기 이진화된 방향별 에지 영상(BEx) 모두의 동일 위치의 픽셀들을 OR 연산하여 결합하는 단계; (c32) 상기 결합된 에지 영상에서 연결객체를 추출하는 단계; (c33) 상기 결합된 에지 영상에 포함된 모든 에지 픽셀에 대하여, 상기 연결객체에 포함되면서 에지 대응쌍을 갖지 않으면, 에지 픽셀을 제거하는 단계; (c34) 제거되지 않은 에지 픽셀로 자막에지 후보 영상(CCE)을 생성하는 단계를 포함하는 것을 특징으로 하는 의사결정트리를 이용한 다양한 크기의 한글자막 추출 방법
12 12
제 11항에 있어서, 상기 (c32)단계는, 상기 연결객체를 추출할 때 4-이웃 연결객체 방법을 적용하는 것을 특징으로 하는 의사결정트리를 이용한 다양한 크기의 한글자막 추출 방법
13 13
제 5항에 있어서, 상기 (d1)단계는, 상기 자막 에지 후보 영상(CCE)으로부터 4-이웃 연결객체 방법으로 연결객체를 추출하여 라벨링하고 식별하도록 하여, 자막후보 연결객체 영상(C4)을 생성하는 것을 특징으로 하는 의사결정트리를 이용한 다양한 크기의 한글자막 추출 방법
14 14
제 5항에 있어서, 상기 (d2)단계는, 상기 이진화된 방향별 에지 영상(BEX) 각각에 대하여, 영상의 모든 에지 픽셀에 방향별 방향정제 마스크들을 적용하여, 적어도 하나의 방향정제 마스크를 만족하는 에지 픽셀만을 포함하는 영상을 정제된 방향별 에지 영상(REX)으로 생성하는 것을 특징으로 의사결정트리를 이용한 다양한 크기의 한글자막 추출 방법
15 15
제 5항에 있어서, 상기 (d3)단계는, 자막에지 후보 영상(C4)에 포함된 각 연결객체에 대하여, 각 연결객체의 픽셀의 수에 비례하여 상기 연결객체에 대응되는 모든 이진화된 방향별 에지 영상(BEX)내의 픽셀의 수의 비율, 및 각 연결객체에 대응되는 서로 반대방향인 두 개의 이진화된 방향별 에지 영상(BEX)의 에지 대응쌍 가운데 위치하는 픽셀들의 밝기 값의 표준편차를 각 연결객체의 특징값으로 정하는 것을 특징으로 하는 의사결정트리를 이용한 다양한 크기의 한글자막 추출 방법
16 16
제 5항에 있어서, 상기 (d4)단계는, (d41) 배경으로 판정된 연결객체 중에서, 자막으로 판정된 연결객체의 수평라인 위치 및 높이와 비교하여 소정의 범위내의 위치 및 높이를 가지는 연결객체를 자막으로 재 판정하는 단계; (d42) 특정 수평라인의 소정 범위 내에 위치하는 상기 자막판정 연결객체가 소정의 빈도수 이하이면, 배경으로 재 판정되는 단계; (d43) 최종적으로 자막으로 판정된 연결객체를 모두 포함하는 자막탐색 결과영상(DR)을 생성하는 단계를 포함하는 것을 특징으로 하는 의사결정트리를 이용한 다양한 크기의 한글자막 추출 방법
17 17
제 16항에 있어서, 상기 (d41)단계는, (d411) 자막으로 판정된 연결객체 각각에 대하여, 연결객체의 최상단(Cuy) 또는 최하단(Cby)의 픽셀이 위치하는 수평라인의 위치와 연결객체의 높이(CHc)를 구하는 단계; (d412) 배경으로 판정된 연결객체 각각에 대하여, 연결객체의 최상단(Cuy)과 최하단(Cby)의 픽셀이 위치하는 수평라인의 위치와 연결객체의 높이(CHc)를 구하는 단계; (d413) 상기 배경판정 연결객체 각각에 대하여, 배경판정 연결객체의 최상단 또는 최하단 수평라인이 적어도 하나의 자막판정 연결객체의 최상단 또는 최하단 수평라인의 소정의 범위 내에 포함되고, 배경판정 연결객체의 높이가 상기 자막판정 연결객체의 높이와 소정의 범위 내에 포함되는지를 판단하는 단계; (d414) 상기 (d313)에서 포함되는 것으로 판단되면, 상기 배경판정 연결객체를 자막판정 연결객체로 재 판정하는 단계를 포함하는 것을 특징으로 하는 의사결정트리를 이용한 다양한 크기의 한글자막 추출 방법
18 18
제 17항에 있어서, 상기 (d42)단계는, (d421) 상기 자막판정 연결객체의 최상단 또는 최하단이 위치하는 수평라인 각각에 대하여, 상기 수평라인의 소정의 범위에 속하는 최상단 또는 최하단의 픽셀을 가지는 자막판정 연결객체의 빈도수를 구하는 단계; (d422) 상기 빈도수가 소정의 임계 빈도수 이하이면, 상기 수평라인의 소정의 범위에 속하는 최상단 또는 최하단의 픽셀을 가지는 자막판정 연결객체를 배경으로 판정하는 단계를 포함하는 것을 특징으로 하는 의사결정트리를 이용한 다양한 크기의 한글자막 추출 방법
19 19
제 5항에 있어서, 상기 (e)단계는, (e1) 상기 자막탐색 결과 영상에 속하는 연결객체를 모두 포함하는 최소 사각 영역을 추출하는 단계; (e2) 상기 최소 사각 영상을 포함되는 연결객체 위치에 해당하는 상기 전처리된 영상을 소정의 임계치를 기준으로 자막과 배경으로 이진화하여 최종 영상을 생성하는 단계를 포함하는 것을 특징으로 하는 의사결정트리를 이용한 다양한 크기의 한글자막 추출 방법
20 20
제 19항에 있어서, 상기 (e2)단계에서, 상기 임계치는 정제된 방향별 에지 영상(REX)의 에지와 대응되는 전처리된 영상(G)의 밝기 값의 평균으로 정하고, 상기 정제된 방향별 에지 영상(REX)은 상기 자막탐색 결과영상에 속하는 연결객체에 대응되는 정제된 방향별 에지 영상(REX)인 것을 특징으로 하는 의사결정트리를 이용한 다양한 크기의 한글자막 추출 방법
21 21
제 20항에 있어서, 상기 (e2)단계에서, 상기 정제된 방향별 에지의 에지 대응쌍 간의 중심픽셀의 밝기를 구하여, 상기 임계치를 기준으로 자막 또는 배경으로 이진화할 때, 상기 전처리된 영상의 픽셀과 임계치의 차이가 중심픽셀의 밝기와 임계치의 차이보다 작으면, 자막으로, 더 크면, 배경으로 이진화하는 것을 특징으로 하는 의사결정트리를 이용한 다양한 크기의 한글자막 추출 방법
22 22
제 1항 또는 제 2항의 다양한 크기의 한글자막 추출을 위한 의사결정트리 생성방법을 기록한 컴퓨터로 읽을 수 있는 기록매체
23 23
제 3항 내지 제 21항 중 어느 한 항의 의사결정트리를 이용한 다양한 크기의 한글자막 추출 방법을 기록한 컴퓨터로 읽을 수 있는 기록매체
24 24
한글자막이 포함된 원 영상에서 다수의 방향에 따른 방향별 에지들을 추출하고, 에지들을 연결하여 구성된 연결객체를 생성하고, 상기 연결객체가 자막인지 배경인지를 판정하여, 자막을 추출하는 한글자막 추출 시스템에 있어서, 영상의 연결객체를 대상으로, 상기 연결객체의 방향별 에지의 픽셀비율 및 중심픽셀의 밝기 편차에 의해, 연결객체가 자막 또는 배경인지를 결정하는 의사결정트리를 구성하는 의사결정트리 생성부; 원 영상을 입력받는 영상입력수단; 상기 원 영상의 색상차원을 감소시켜 전처리된 영상을 생성하는 전처리 수단; 상기 전처리된 영상으로부터 방향별 에지를 추출하여 방향별 에지 영상을 만들고, 상기 방향별 에지 영상을 모두 합한 영상에서 에지 대응쌍을 가지지 못하는 에지를 제외하여 자막에지 후보 영상을 생성하는 방향에지 추출부; 상기 자막에지 후보 영상에서 연결된 에지들로부터 연결객체를 추출하여 자막후보 연결객체 영상을 생성하고, 상기 연결객체의 방향별 에지의 픽셀비율 및 중심픽셀의 밝기 편차를 구하여 상기 의사결정트리에 따라 상기 연결객체를 자막 또는 배경으로 판정하여 자막탐색 결과 영상을 생성하는 연결객체 추출부; 상기 자막탐색 결과 영상에 속하는 연결객체와 대응되는 전처리된 영상을 자막과 배경으로 이진화하여 이진화된 자막 영상을 생성하는 자막분리 수단; 상기 생성된 자막 영상을 출력하는 자막부분 출력부를 포함하는 것을 특징으로 하는 의사결정트리를 이용한 다양한 크기의 한글자막 추출 시스템
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 지식경제부 (재)유비쿼터스사업단 유비쿼터스 컴퓨팅 및 네트워크 원천기술 개발사업 자율형 상황인지 커뮤니티 컴퓨팅 미들웨어 개발