맞춤기술찾기

이전대상기술

동영상 유해성 분석 결과 기반 실시간 스트리밍 차단 시스템 및 방법

  • 기술번호 : KST2020014505
  • 담당센터 : 서울서부기술혁신센터
  • 전화번호 : 02-6124-6930
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 동영상 유해성 분석 결과 기반 실시간 스트리밍 차단 시스템 및 방법이 개시된다. 상기 시스템은 서버에 HTTP 적응적 스트리밍을 위해 동영상을 고정된 재생 길이와 서로 다른 품질(bitrate)을 가지는 세그먼트의 형태로 인코딩하여 저장되며, 실시간 스트리밍 동영상 데이터를 제공하는 동영상 서버; 및 HTTP 적응적 스트리밍 클라이언트이 설치되며, 딥러닝 기반의 유해성 분석 엔진을 사용하여 동영상 프레임 간 유사도를 비교하여 각 프레임의 장면의 길이 정보와 프레임별 유해 확률을 계산하여 최종 유해 등급에 따라 스트리밍 차단을 결정하여 유해한 동영상을 차단하는 사용자 단말을 포함한다.
Int. CL H04N 21/454 (2011.01.01) H04N 21/435 (2011.01.01) G06K 9/00 (2006.01.01) G06N 3/08 (2006.01.01)
CPC H04N 21/4542(2013.01) H04N 21/4542(2013.01) H04N 21/4542(2013.01) H04N 21/4542(2013.01)
출원번호/일자 1020190121056 (2019.09.30)
출원인 광운대학교 산학협력단
등록번호/일자 10-2169073-0000 (2020.10.16)
공개번호/일자
공고번호/일자 (20201022) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2019.09.30)
심사청구항수 10

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 광운대학교 산학협력단 대한민국 서울특별시 노원구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 정광수 경기도 성남시 분당구
2 김민수 경기도 성남시 중원구
3 강정호 서울특별시 구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 이여송 대한민국 서울시 강남구 테헤란로 *** 포스코P&S타워 **층(아이피드림)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 광운대학교 산학협력단 서울특별시 노원구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2019.09.30 수리 (Accepted) 1-1-2019-1000765-92
2 보정요구서
Request for Amendment
2019.10.10 발송처리완료 (Completion of Transmission) 1-5-2019-0161785-40
3 [지정기간연장]기간연장(단축, 경과구제)신청서
[Designated Period Extension] Application of Period Extension(Reduction, Progress relief)
2019.11.11 수리 (Accepted) 1-1-2019-1154223-80
4 [출원서 등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2019.11.25 수리 (Accepted) 1-1-2019-1208101-18
5 [출원서 등 보정]보정서(납부자번호)
[Amendment to Patent Application, etc.] Amendment(Payer number)
2019.11.25 수리 (Accepted) 1-1-2019-1213032-84
6 보정요구서
Request for Amendment
2019.11.25 발송처리완료 (Completion of Transmission) 1-5-2019-0188087-66
7 선행기술조사의뢰서
Request for Prior Art Search
2020.01.14 수리 (Accepted) 9-1-9999-9999999-89
8 선행기술조사보고서
Report of Prior Art Search
2020.03.12 발송처리완료 (Completion of Transmission) 9-6-2020-0078233-80
9 의견제출통지서
Notification of reason for refusal
2020.07.11 발송처리완료 (Completion of Transmission) 9-5-2020-0474658-80
10 [거절이유 등 통지에 따른 의견]의견서·답변서·소명서
2020.08.24 수리 (Accepted) 1-1-2020-0890198-89
11 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2020.08.24 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2020-0890204-76
12 등록결정서
Decision to grant
2020.09.28 발송처리완료 (Completion of Transmission) 9-5-2020-0668371-21
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
HTTP 적응적 스트리밍을 위해 동영상 데이터를 고정된 재생 길이와 서로 다른 품질(bitrate)을 가지는 세그먼트의 형태로 인코딩하여 서버에 저장되며, 실시간 스트리밍 동영상 데이터를 제공하는 동영상 서버; 및 HTTP 적응적 스트리밍 클라이언트가 설치되며, 딥러닝 기반의 유해성 분석 엔진을 사용하여 동영상 프레임 간 유사도를 유해 원본 이미지와 비교하여 각 프레임의 장면의 길이 정보와 프레임별 유해 확률을 계산하여 최종 유해 등급에 따라 스트리밍 차단을 결정하여 유해한 동영상을 차단하는 사용자 단말을 포함하며, 상기 사용자 단말은 상기 HTTP 적응적 스트리밍 클라이언트가 설치되며, 상기 동영상 서버로부터 요청할 동영상에 대한 정보를 기술하는 MPD(Media Presentation Description) 파일을 다운로드하며, 측정한 네트워크 대역폭 및 단말의 상태에 따라 특정 품질(bitrate)의 동영상 세그먼트를 요청하고, 상기 딥러닝 기반의 유해성 분석 엔진은 CNN(Convolutional Neural Network) 모델을 사용하며, 동영상 세그먼트의 주어진 데이터 세트에 대하여 입력 이미지들의 특성을 학습하여 동영상 프레임 간 유사도를 유해 원본 이미지와 비교하여 각 프레임의 장면의 길이 정보와 프레임별 유해 확률을 계산하고, 동영상의 유해성을 분석하여 각각의 동영상 프레임에 대한 유해 확률의 형태로 동영상 유해성 분석 결과를 동영상 스트리밍 차단 제어 모듈로 제공하는, 동영상 유해성 분석 결과 기반 실시간 스트리밍 차단 시스템
2 2
제1항에 있어서, 상기 사용자 단말은 스트리밍되는 동영상 세그먼트로부터 동영상 프레임을 추출하고, 각 동영상 프레임들의 입력 이미지들의 특성을 학습하여 유해 원본 이미지와 비교 이미지를 비교하여 즉, 동영상 프레임 간 유사도를 상기 유해 원본 이미지와 비교하여 각 프레임의 장면의 길이 정보와 프레임별 유해 확률을 계산하고, 동영상의 유해성을 분석하여 각각의 동영상 프레임에 대한 유해성 분석 결과를 제공하는 딥러닝 기반의 유해성 분석 엔진; 동영상 유해성 분석의 효율성을 높이기 위해 중복된 동영상 프레임을 제외하고 동영상 프레임을 추출하는 동영상 프레임 추출 모듈; 및 상기 유해성 분석 결과와 장면 길이 정보를 이용하여 최종 유해 등급을 산출하고, 최종 유해 등급으로 판단된 유해 동영상의 스트리밍을 차단하는 동영상 스트리밍 차단 제어 모듈; 을 포함하는 동영상 유해성 분석 결과 기반 실시간 스트리밍 차단 시스템
3 3
삭제
4 4
제1항에 있어서, 상기 딥러닝 기반의 유해성 분석 엔진은 상기 동영상 프레임 간 유사도 비교 기반의 장면 길이 분석을 위해 SSIM (Structural Similarity; 구조적 유사도 지수) 값을 계산하여 학습된 유해 장면이 포함된 원본 이미지와 프레임의 비교 이미지의 유사도를 비교하는, 동영상 유해성 분석 결과 기반 실시간 스트리밍 차단 시스템
5 5
제4항에 있어서, 상기 SSIM 값은 두 이미지의 픽셀들에 대한 평균 밝기 I(x,y), 이미지의 콘트라스트 값 c(x,y), 그리고 이미지 구조 지수 s(x,y)를 종합하여 다음과 같이 계산되며, 이때 사용되는 가중치 a, b, c의 값은 모두 1로 설정되며, 원본 이미지와 비교 이미지의 유사도를 비교하는 것으로, 가중치가 모두 1로 설정되었기 때문에 SSIM 계산에 있어서, 계산된 SSIM 값을 특정 임계값과 비교하여 유사 여부를 판단하는, 동영상 유해성 분석 결과 기반 실시간 스트리밍 차단 시스템
6 6
제1항에 있어서, 상기 딥러닝 기반의 유해성 분석 엔진은 상기 동영상 세그먼트에서 추출된 각 동영상 프레임들에 대하여 장면 단위로 분류하고, 각 동영상 프레임에 대한 유해성 분석 결과와 장면 길이 정보를 이용하여 각 장면에 대한 유해 등급 및 스트리밍 차단을 결정하기 위한 최종 유해 등급을 산출하며, 상기 유해성 분석 엔진의 입력으로 사용된 동영상 프레임에 대한 유해성 분석 결과는 프레임별 유해 확률로 표현되는, 동영상 유해성 분석 결과 기반 실시간 스트리밍 차단 시스템
7 7
(a) HTTP 적응적 스트리밍을 위해 동영상 데이터를 고정된 재생 길이와 서로 다른 품질(bitrate)을 가지는 세그먼트의 형태로 인코딩하여 동영상 서버에 저장되며, 상기 동영상 서버로부터 실시간 스트리밍 동영상 데이터를 사용자 단말로 제공하는 단계; 및(b) 상기 사용자 단말에 HTTP 적응적 스트리밍 클라이언트가 설치되며, 딥러닝 기반의 유해성 분석 엔진을 사용하여 동영상 프레임 간 유사도를 원본 이미지와 비교하여 각 프레임의 장면의 길이 정보와 프레임별 유해 확률을 계산하여 최종 유해 등급에 따라 스트리밍 차단을 결정하여 유해한 동영상을 차단하는 단계를 포함하며, 상기 사용자 단말은 상기 HTTP 적응적 스트리밍 클라이언트가 설치되며, 상기 동영상 서버로부터 요청할 동영상에 대한 정보를 기술하는 MPD(Media Presentation Description) 파일을 다운로드하며, 측정한 네트워크 대역폭 및 단말의 상태에 따라 특정 품질(bitrate)의 동영상 세그먼트를 요청하고, 상기 딥러닝 기반의 유해성 분석 엔진은 CNN(Convolutional Neural Network) 모델을 사용하며, 동영상 세그먼트의 주어진 데이터 세트에 대하여 입력 이미지들의 특성을 학습하여 유해 원본 이미지와 비교 이미지를 비교하여 즉, 동영상 프레임 간 유사도를 상기 유해 원본 이미지와 비교하여 각 프레임의 장면의 길이 정보와 프레임별 유해 확률을 계산하고, 동영상의 유해성을 분석하여 각각의 동영상 프레임에 대한 유해 확률의 형태로 동영상 유해성 분석 결과를 동영상 스트리밍 차단 제어 모듈로 제공하는, 동영상 유해성 분석 결과 기반 실시간 스트리밍 차단 방법
8 8
삭제
9 9
제7항에 있어서,상기 단계 (b)에서 상기 동영상 서버로부터 동영상 세그먼트들이 사용자 단말로 전송되면, 상기 사용자 단말은 동영상 프레임 간의 유사도 비교를 통해 유해성 분석의 부하를 최소화하도록 적응적으로 동영상 프레임을 추출하며, 추출된 동영상 프레임은 딥러닝 기반의 유해성 분석 엔진으로 전달하며, 상기 사용자 단말의 상기 딥러닝 기반의 유해성 분석 엔진은 CNN(Convolutional Neural Network) 모델을 사용하며, 동영상 세그먼트의 주어진 데이터 세트에 대하여 입력 이미지들의 특성을 학습하여 동영상 프레임 간 유사도를 유해 원본 이미지와 비교하여 각 프레임의 장면의 길이 정보와 프레임별 유해 확률을 계산하고, 동영상의 유해성을 분석하여 각각의 동영상 프레임에 대한 유해 확률의 형태로 동영상 유해성 분석 결과를 동영상 스트리밍 차단 제어 모듈로 제공하는 단계; 및 상기 동영상 스트리밍 차단 제어 모듈은 동영상 프레임 간 유사도를 비교하여 각 프레임 장면의 길이 정보와 프레임별 유해 확률을 계산하여 계산된 최종 유해 등급에 따라 스트리밍 차단을 결정하여 유해 동영상의 차단 제어를 수행하는 단계; 상기 딥러닝 기반의 유해성 분석 엔진은 동영상 세그먼트에서 추출된 동영상 프레임에 대한 유해성 분석 결과와 장면 길이 정보를 이용하여 각 장면에 대한 유해 등급 및 스트리밍 차단을 결정하기 위한 최종 유해 등급을 산출하는 단계; 를 포함하는 동영상 유해성 분석 결과 기반 실시간 스트리밍 차단 방법
10 10
제7항에 있어서, 상기 딥러닝 기반의 유해성 분석 엔진은 상기 동영상 프레임 간 유사도 비교 기반의 장면 길이 분석을 위해 SSIM (Structural Similarity; 구조적 유사도 지수) 값을 계산하여 학습된 유해 장면이 포함된 원본 이미지와 프레임의 비교 이미지의 유사도를 비교하는, 동영상 유해성 분석 결과 기반 실시간 스트리밍 차단 방법
11 11
제10항에 있어서, 상기 SSIM 값은 두 이미지의 픽셀들에 대한 평균 밝기 I(x,y), 이미지의 콘트라스트 값 c(x,y), 그리고 이미지 구조 지수 s(x,y)를 종합하여 다음과 같이 계산되며, 이때 사용되는 가중치 a, b, c의 값은 모두 1로 설정되며, 원본 이미지와 비교 이미지의 유사도를 비교하는 것으로, 가중치가 모두 1로 설정되었기 때문에 SSIM 계산에 있어서, 계산된 SSIM 값을 특정 임계값과 비교하여 유사 여부를 판단하는, 동영상 유해성 분석 결과 기반 실시간 스트리밍 차단 방법
12 12
제7항에 있어서, 상기 딥러닝 기반의 유해성 분석 엔진은 상기 동영상 세그먼트에서 추출된 각 동영상 프레임들에 대하여 장면 단위로 분류하고, 각 동영상 프레임에 대한 유해성 분석 결과와 장면 길이 정보를 이용하여 각 장면에 대한 유해 등급 및 스트리밍 차단을 결정하기 위한 최종 유해 등급을 산출하며, 상기 유해성 분석 엔진의 입력으로 사용된 동영상 프레임에 대한 유해성 분석 결과는 프레임별 유해 확률로 표현되는, 동영상 유해성 분석 결과 기반 실시간 스트리밍 차단 방법
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 과학기술정보통신부 한국전자통신연구원 건강한미디어 환경조성 기술개발 사업 인공지능 기반 유해미디어(음란성) 분석·검출 시스템 개발