맞춤기술찾기

홈으로 가기
맞춤기술찾기
이전대상기술
프린트하기

이전대상기술

내용 기반 멀티 모달 특징값을 이용한 유해 동영상 차단방법 및 그 장치

  • 기술번호 : KST2015093796
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
상담신청 PDF 받기
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 내용 기반 멀티 모달 특징값을 이용한 유해 동영상 차단 방법 및 그 장치는 유해 동영상 분류 모델과 비유해 동영상 분류 모델로 이루어지는 판별모델을 구축하는 단계; 동영상 컨텐츠에서 비디오 스트림과 오디오 스트림으로 분리하는 단계; 상기 분리된 비디오 스트림에 대하여 소정의 비주얼 특징값을 추출하여 샷(shot) 경계를 검출한 후 각 샷에서 적어도 하나 이상의 키 프레임을 추출하고 상기 샷과 키 프레임정보를 생성하는 단계; 상기 비디오 스트림에 대하여 소정의 선처리를 수행한 후 상기 샷과 키 프레임 정보를 기초로 상기 키 프레임의 멀티 모달 특징값을 추출하는 단계; 상기 멀티 모달 특징값을 상기 판별모델에 입력하여 샷의 유해성을 판단하는 단계; 및 상기 샷 기준의 판단 결과를 종합하여 상기 동영상 컨텐츠의 유해성을 판단하는 단계;를 포함하는 것을 특징으로 하며, 키프레임 기반 판단 엔진과 프레임 기반 판단 엔진을 이용한 점진적 차단 방법을 이용하고, 멀티모달(multi-modal) 특징값들을 이용함으로써, 인터넷을 통한 유해 동영상 차단, P2P를 통한 유해 동영상 유통 제어, 디지털 방송 스트림의 실시간 유해 정보 감시 시스템에 적용될 수 있다.내용 기반 차단, 유해 정보 판별, 멀티 모달 특징
Int. CL G06T 7/00 (2006.01)
CPC G06K 9/00718(2013.01) G06K 9/00718(2013.01) G06K 9/00718(2013.01) G06K 9/00718(2013.01) G06K 9/00718(2013.01) G06K 9/00718(2013.01)
출원번호/일자 1020050112966 (2005.11.24)
출원인 한국전자통신연구원, 한국정보통신대학교 산학협력단
등록번호/일자 10-0687732-0000 (2007.02.21)
공개번호/일자
공고번호/일자 (20070227) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2005.11.24)
심사청구항수 16

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국전자통신연구원 대한민국 대전광역시 유성구
2 한국정보통신대학교 산학협력단 대한민국 대전광역시 유성구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 한승완 대한민국 광주 북구
2 이승민 대한민국 대전 대덕구
3 이호균 대한민국 대전 유성구
4 남택용 대한민국 대전 유성구
5 노용만 대한민국 대전 유성구
6 양승지 대한민국 강원 원주시 학
7 서경석 대한민국 대전 유성구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 리앤목특허법인 대한민국 서울 강남구 언주로 **길 **, *층, **층, **층, **층(도곡동, 대림아크로텔)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 주식회사 모토브 인천광역시 연수구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 특허출원서
Patent Application		 2005.11.24 수리 (Accepted) 1-1-2005-0679529-41
2 전자문서첨부서류제출서
Submission of Attachment to Electronic Document		 2005.11.28 수리 (Accepted) 1-1-2005-5143322-65
3 등록결정서
Decision to grant		 2007.01.22 발송처리완료 (Completion of Transmission) 9-5-2007-0033959-13
4 출원인정보변경(경정)신고서
Notification of change of applicant's information		 2007.03.21 수리 (Accepted) 4-1-2007-5043304-47
5 출원인정보변경(경정)신고서
Notification of change of applicant's information		 2007.12.24 수리 (Accepted) 4-1-2007-5193163-24
6 출원인정보변경(경정)신고서
Notification of change of applicant's information		 2009.08.04 수리 (Accepted) 4-1-2009-5150899-36
7 출원인정보변경(경정)신고서
Notification of change of applicant's information		 2015.02.02 수리 (Accepted) 4-1-2015-0006137-44
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
(a) 유해 동영상 분류 모델과 비유해 동영상 분류 모델로 이루어지는 판별모델을 구축하는 단계;(b) 동영상 컨텐츠에서 비디오 스트림과 오디오 스트림으로 분리하는 단계;(c) 상기 분리된 비디오 스트림에 대하여 소정의 비주얼 특징값을 추출하여 샷(shot) 경계를 검출한 후 각 샷에서 적어도 하나 이상의 키 프레임을 추출하고 상기 샷과 키 프레임정보를 생성하는 단계;(d) 상기 비디오 스트림에 대하여 소정의 선처리를 수행한 후 상기 샷과 키 프레임 정보를 기초로 상기 키 프레임의 멀티 모달 특징값을 추출하는 단계;(e) 상기 멀티 모달 특징값을 상기 판별모델에 입력하여 샷의 유해성을 판단하는 단계; 및(f) 상기 샷 기준의 판단 결과를 종합하여 상기 동영상 컨텐츠의 유해성을 판단하는 단계;를 포함하는 것을 특징으로 하는 내용 기반 멀티 모달 특징값을 이용한 유해 동영상 차단 방법
2 2
제1항에 있어서, 상기 (a)단계는(a1) 적어도 한 종류 이상의 동영상을 내용을 기반으로 하여 유해동영상과 무해동영상으로 구분하는 단계; 및(a2) 상기 유해동영상과 무해동영상이 가지고 있는 소정의 유해 정보에 따라 각각 적어도 하나 이상의 클래스로 구분하여 SVM(Support Vector Machine)을 포함하는 기계학습을 수행한 후 유해 동영상 분류 모델과 비유해 동영상 분류 모델로 형성하여 상기 판별모델을 생성하는 단계;를 포함하는 것을 특징으로 하는 내용 기반 멀티 모달 특징값을 이용한 유해 동영상 차단 방법
3 3
제1항에 있어서, 상기 (c)단계는(c1) 상기 비주얼 특징값을 나타내는 특징벡터를 기초로 인접한 두 프레임간의 유사도 거리값을 계산하는 단계; 및(c2) 상기 유사도 거리값과 소정의 임계치를 비교한 후 급진적 샷 혹은 점진적 샷으로 구분하여 상기 샷 경계를 검출하는 단계;를 포함하는 것을 특징으로 하는 내용 기반 멀티 모달 특징값을 이용한 유해 동영상 차단 방법
4 4
제3항에 있어서, 상기 (c2)단계는(c21) 상기 유사도 거리값 전체에 대하여 소정의 프레임 크기의 슬라이딩 윈도우를 한 프레임씩 이동하면서 상기 샷 경계 검출을 수행하되, 인접한 두 프레임의 특징벡터간의 유사도 거리값이 상기 슬라이딩 윈도우 간격 구간내에서 가장 크고 소정의 제1임계치보다 크면 상기 급진적 샷으로 결정하는 단계; 및(c22) 상기 유사도 거리값이 소정의 프레임 구간 동안 유사한 값을 가지면서, 상기 구간 동안 현재 프래임에 대해 1/2 이전 프레임과 1/2 이후 프레임에 대한 유사도 거리값보다 소정의 정수배 이상 크면 상기 점진적 샷으로 결정하는 단계;를 포함하는 것을 특징으로 하는 내용 기반 멀티 모달 특징값을 이용한 유해 동영상 차단 방법
5 5
제1항에 있어서, 상기 (d)단계는영상의 에지를 추출하는 샤프닝(sharpening) 혹은/그리고 영상을 표현하는 색상값의 범위를 줄이거나 잡음(noise)을 감소시키는 블러링(blurring)을 수행하는 단계;를 포함하는 것을 특징으로 하는 내용 기반 멀티 모달 특징값을 이용한 유해 동영상 차단 방법
6 6
제1항에 있어서, 상기 멀티 모달 특징값은오디오 특징값, 비주얼 특징값, 시간축 특징값을 포함하는 것을 특징으로 하는 내용 기반 멀티 모달 특징값을 이용한 유해 동영상 차단 방법
7 7
제6항에 있어서, 상기 오디오 특징값은 상기 샷 구간의 파워, 피치(pitch), 음색(timber)을 포함하는 오디오 특성을 대표하며, 상기 비주얼 특징값은 색상, 질감, 모양을 포함하는 비디오 특성을 대표하며, 상기 시간축 특징값은 샷에서의 평균적인 객체 움직임 방향, 카메라의 움직임의 방향 및 정도, 상기 오디오 혹은 비디오 특징값의 변화량을 포함하는 특성을 대표하는 것을 특징으로 하는 내용 기반 멀티 모달 특징값을 이용한 유해 동영상 차단 방법
8 8
제1항에 있어서, 상기 (e)단계는(e1) 상기 키 프레임의 멀티 모달 특징값을 상기 판별 모델에 입력한 결과가 소정의 키 프레임기반 신뢰도 기준치를 초과하는지 판단하여 프레임기반의 판단 필요성을 결정하는 단계;및(e2) 프레임기반의 판단이 필요한 것으로 결정되면 상기 샷의 모든 프레임의 멀티 모달 특징값을 상기 판별 모델에 입력하여 그 결과가 소정의 프레임기반 신뢰도 기준치를 초과하는지 판단하는 단계; 및(e3) 상기 프레임기반 신뢰도 기준치를 초과하면 그 샷을 유해한 것을 결정하는 단계;를 포함하는 것을 특징으로 하는 내용 기반 멀티 모달 특징값을 이용한 유해 동영상 차단 방법
9 9
제8항에 있어서, 상기 (e1)단계는 아래의 수학식 14에 의하여 신뢰도 값이 가장 큰 키 프레임기반 신뢰도 값 을 검출하고, 그 값이 아래의 수학식 15를 만족하면 상기 (e2)단계로의 진행을 결정하는 것을 특징으로 하는 내용 기반 멀티 모달 특징값을 이용한 유해 동영상 차단 방법
10 10
제8항에 있어서, 상기 (e2)단계는아래의 수학식 16에 의하여 신뢰도 값이 가장 큰 키 프레임기반 신뢰도 값 을 검출하고, 그 값이 아래의 수학식 17을 만족하면 상기 샷을 유해한 것을 결정하는 것을 특징으로 하는 내용 기반 멀티 모달 특징값을 이용한 유해 동영상 차단 방법
11 11
제1항에 있어서, 상기 (f)단계는상기 샷의 소정의 유해도 값을 평균하여 소정의 기준치를 초과하는 단계;를 포함하는 것을 특징으로 하는 내용 기반 멀티 모달 특징값을 이용한 유해 동영상 차단 방법
12 12
적어도 한 종류 이상의 동영상을 내용을 기반으로 하여 유해동영상과 무해동영상으로 구분한 후 각각 적어도 하나 이상의 클래스로 구분하여 기계학습을 수행하여 판별모델을 출력하는 SVM 모델부;유해 판별이 요구되는 동영상을 오디오 스트림과 비디오 스트림으로 분리하는 분리부;상기 비디오 스트림에서 소정의 비주얼 특징값을 추출하여 샷(shot) 경계를 검출한 후 각 샷에서 적어도 하나 이상의 키 프레임을 추출하고 상기 샷과 키 프레임정보를 출력하는 제1추출부;상기 샷과 키 프레임 정보를 기초로 상기 키 프레임의 적어도 하나 이상의 특징값을 추출하는 제2추출부; 및멀티 모달 특징값을 상기 판별모델에 입력하여 샷의 유해성을 판단하고, 그 판단 결과를 종합하여 상기 동영상의 유해성을 판단하는 판별부;를 포함하는 것을 특징으로 하는 내용 기반 멀티 모달 특징값을 이용한 유해 동영상 차단 장치
13 13
제12항에 있어서, 상기 제1추출부는상기 비주얼 특징값을 나타내는 특징벡터를 기초로 인접한 두 프레임간의 유사도 거리값을 계산하여 출력하는 비주얼특징추출부; 및상기 유사도 거리값과 소정의 임계치를 입력받아 급진적 샷 혹은 점진적 샷으로 구분하여 상기 샷 경계를 검출하는 샷경계추출부;를 포함하는 것을 특징으로 하는 내용 기반 멀티 모달 특징값을 이용한 유해 동영상 차단 장치
14 14
제12항에 있어서, 상기 샷경계추출부는상기 유사도 거리값 전체에 대하여 m 프레임 크기의 슬라이딩 윈도우를 한 프레임씩 이동하면서 상기 샷 경계 검출을 수행하되, 인접한 두 프레임의 특징벡터간의 유사도 거리값이 상기 m 간격 구간내에서 가장 크고 소정의 제1임계치보다 크면 상기 급진적 샷으로 결정하는 급진적샷결정부; 및상기 유사도 거리값이 소정의 프레임 구간 동안 유사한 값을 가지면서, 상기 구간 동안 상기 구간 동안 1/2 이전 프레임과 1/2 이후 프레임에 대한 유사도 거리값 보다 소정의 정수배 이상 크면 상기 점진적 샷으로 결정하는 점진적샷결정부를 포함하는 것을 특징으로 하는 내용 기반 멀티 모달 특징값을 이용한 유해 동영상 차단 장치
15 15
제12항에 있어서, 상기 제2추출부는상기 샷 구간의 파워, 피치(pitch), 음색(timber)을 포함하는 오디오 특성을 추출하는 오디오추출부;상기 샷 구간의 색상, 질감, 모양을 포함하는 비주얼 특성을 추출하는 비디오추출부; 및상기 샷에서의 평균적인 객체 움직임 방향, 카메라의 움직임의 방향 및 정도, 상기 오디오 혹은 비디오 특징값의 변화량을 포함하는 특성을 추출하는 다중추출부;를 포함하는 것을 특징으로 하는 내용 기반 멀티 모달 특징값을 이용한 유해 동영상 차단 장치
16 16
제12항에 있어서, 상기 판별부는상기 키 프레임의 멀티 모달 특징값을 상기 판별 모델에 입력한 결과가 소정의 키 프레임기반 신뢰도 기준치를 초과하는지 판단하는 프레임기반판별부;프레임기반의 판단이 필요한 것으로 결정되면 상기 샷의 모든 프레임의 멀티 모달 특징값을 상기 판별 모델에 입력하여 그 결과가 소정의 프레임기반 신뢰도 기준치를 초과하는지 판단하는 프레임기반판별부;상기 프레임기반 신뢰도 기준치를 초과하면 그 샷을 유해한 것을 결정하는 샷결정부; 및유해한 것으로 결정된 샷의 신뢰도의 평균값을 계산하여 소정의 기준치를 초과하면 상기 동영상을 유해한 것으로 결정하는 유해판단부;를 포함하는 것을 특징으로 하는 내용 기반 멀티 모달 특징값을 이용한 유해 동영상 차단 장치
지정국 정보가 없습니다
패밀리정보가 없습니다
국가 R&D 정보가 없습니다.