맞춤기술찾기

이전대상기술

영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 시스템 및 방법

  • 기술번호 : KST2018012662
  • 담당센터 : 서울동부기술혁신센터
  • 전화번호 : 02-2155-3662
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 시스템 및 방법에 관한 것이다.본 발명에 따른 영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 방법은, 카메라 장치에 의해 디지털 영상 구현장치를 통해 디스플레이되는 디지털 콘텐츠를 시청하는 시청자를 촬영하여 객체를 인식하는 단계; 디지털 영상 구현장치가 카메라 장치에 의해 인식된 객체 중에 신규 객체가 추가되었는지를 판별하는 단계; 신규 객체가 추가되었으면, 디지털 영상 구현장치에 의해 안면인식 알고리즘을 이용하여 각 객체의 얼굴에 따라 성별 및 나이를 추정하는 단계; 디지털 영상 구현장치에 의해 콘텐츠 제공 서버로부터 제공된 비디오 핑거프린트 기반 콘텐츠 메타(meta) 정보를 취득하는 단계; 디지털 영상 구현장치에 의해 취득된 비디오 핑거프린트 기반 콘텐츠 메타 정보를 바탕으로 추가된 신규 객체가 시청 연령 제한에 해당하는지를 판별하는 단계; 및 시청 연령 제한에 해당하면, 디지털 영상 구현장치에 의해 사용자에 의해 미리 설정된 시청 제한 정보에 따라 시청 제어를 수행하여 방송중인 영상을 변환하는 단계를 포함한다.
Int. CL H04N 21/4545 (2011.01.01) H04N 21/454 (2011.01.01) H04N 21/278 (2011.01.01)
CPC H04N 21/45452(2013.01) H04N 21/45452(2013.01) H04N 21/45452(2013.01)
출원번호/일자 1020170030049 (2017.03.09)
출원인 경희대학교 산학협력단, 재단법인 실감교류인체감응솔루션연구단
등록번호/일자
공개번호/일자 10-2018-0103303 (2018.09.19) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2017.03.09)
심사청구항수 16

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 경희대학교 산학협력단 대한민국 경기도 용인시 기흥구
2 재단법인 실감교류인체감응솔루션연구단 대한민국 서울특별시 성북구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 이두황 대한민국 서울특별시 영등포구
2 유도경 대한민국 서울 강남구
3 서효범 대한민국 서울특별시 동대문구
4 유범재 대한민국 서울특별시 서초구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 이준성 대한민국 서울특별시 강남구 삼성로**길 **, ***호 준성특허법률사무소 (대치동, 대치빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 경희대학교 산학협력단 경기도 용인시 기흥구
2 재단법인 실감교류인체감응솔루션연구단 서울특별시 성북구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2017.03.09 수리 (Accepted) 1-1-2017-0236271-69
2 출원인정보변경(경정)신고서
Notification of change of applicant's information
2017.08.10 수리 (Accepted) 4-1-2017-0042500-28
3 선행기술조사의뢰서
Request for Prior Art Search
2018.01.11 수리 (Accepted) 9-1-9999-9999999-89
4 선행기술조사보고서
Report of Prior Art Search
2018.04.09 수리 (Accepted) 9-1-2018-0015088-25
5 의견제출통지서
Notification of reason for refusal
2018.11.09 발송처리완료 (Completion of Transmission) 9-5-2018-0764088-86
6 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2019.01.08 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2019-0024127-11
7 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2019.01.08 수리 (Accepted) 1-1-2019-0024126-65
8 등록결정서
Decision to grant
2019.03.20 발송처리완료 (Completion of Transmission) 9-5-2019-0203866-78
9 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.08.19 수리 (Accepted) 4-1-2019-5164254-26
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
ACR(Automatic Contents Recognition; 영상 콘텐츠 자동 인식기술) 알고리즘이 적용되며, 디지털 콘텐츠를 외부 장치로부터 수신하여 화면에 디스플레이하고, 비디오 핑거프린트(fingerprint) 기반 쿼리(query)를 외부 장치로 요청하는 디지털 영상 구현장치; 상기 디지털 영상 구현장치에 근접 위치되어 디지털 영상 구현장치와 전기적으로 연결되며, 디지털 영상 구현장치를 통해 디스플레이되는 영상물을 시청하는 시청자를 촬영하여 객체를 인식하고, 촬영된 영상 정보를 디지털 영상 구현장치로 전송하는 카메라 장치; 및 디지털 콘텐츠를 상기 디지털 영상 구현장치로 제공하는 한편 디지털 영상 구현장치로부터의 비디오 핑거프린트 쿼리(query) 요청에 대해 응답으로서 콘텐츠 메타(meta) 정보를 제공하는 콘텐츠 제공 서버를 포함하고,사용자에 의해 영상물의 시청 시, 방송되는 영상 콘텐츠의 유해성 여부를상기 디지털 영상 구현장치에 적용된 ACR 알고리즘과 상기 카메라 장치에 의한 객체 인식 기술을 이용하여 자동으로 인식하고, 시청자의 연령에 따라 영상물의 선정성이나 폭력성의 표현 수위를 실시간으로 변환하여 화면에 디스플레이하며,상기 콘텐츠 제공 서버는,디지털 콘텐츠를 스트리밍 방식으로 상기 디지털 영상 구현장치로 제공하는 콘텐츠 스트리밍 서버와;비디오 및 오디오 콘텐츠물로부터 콘텐츠 핑거프린트 정보를 추출하고, 추출된 콘텐츠 핑거프린트 정보를 기반으로 콘텐츠 메타 정보를 생성하는 핑거프린트 서버; 및상기 핑거프린트 서버와 연동하여 콘텐츠 핑거프린트 정보를 수신하고, 핑거프린트 서버에 의해 생성된 콘텐츠 메타 정보를 기반으로 시청 제한 정보를 생성하며, 상기 디지털 영상 구현장치로부터의 비디오 핑거프린트 쿼리(query) 요청에 대해 응답으로서 콘텐츠 메타(meta) 정보를 제공하는 시청 제한 정보 생성 서버를 포함하는 영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 시스템
2 2
제1항에 있어서,상기 디지털 영상 구현장치는,상기 카메라 장치를 통해 인식한 이미지와 메모리에 저장되어 있는 이미지를 비교하여 새로운 객체가 추가되었는지를 확인하고, 새로운 객체가 추가된 경우 안면인식 알고리즘을 이용하여 그 새로운 객체의 성별 및 나이를 추정하는 이미지 처리부;비디오 핑거프린트(fingerprint) 기반 쿼리(query)를 상기 콘텐츠 제공 서버로 요청하고, 상기 콘텐츠 제공 서버로부터 상기 쿼리 요청에 대해 응답으로서 콘텐츠 메타 정보를 수신하는 신호 송수신부;상기 콘텐츠 제공 서버로부터 디지털 콘텐츠를 스트리밍 방식으로 수신하는 스트리밍 서비스부;상기 스트리밍 서비스부를 통해 수신한 스트리밍 디지털 콘텐츠를 디스플레이하는 디스플레이부;사용자에 의해 설정된 시청 제한 정보를 입력받아 저장하는 시청 제한 정보 입력 및 저장부;사용자에 의해 설정된 시청 제한 정보를 취득하고, 상기 콘텐츠 제공 서버로부터 비디오 핑거프린트 정보 기반의 콘텐츠 메타 정보를 취득하며, 취득된 비디오 핑거프린트 정보 기반의 콘텐츠 메타 정보를 바탕으로 시청 제한이 필요한 어린이 및 청소년에 대해 시청 연령 제한에 해당하는지를 판별하고, 시청 연령 제한에 해당하면 사용자에 의해 설정된 시청 제한 정보에 따라 시청 제어를 수행하는 시청 제한 모듈부; 및상기 이미지 처리부, 신호 송수신부, 스트리밍 서비스부, 디스플레이부, 시청 제한 정보 입력 및 저장부, 시청 제한 모듈부와 카메라 장치의 동작을 제어하고, 시스템의 전체적인 상태를 진단 및 조정하는 중앙 제어부를 포함하는 영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 시스템
3 3
제2항에 있어서,상기 시청 제한 정보 입력 및 저장부에 입력되는 시청 제한 정보는 연령별로 해당 디지털 콘텐츠의 플레이 중지, 모자이크 처리, 소리 제거 중 적어도 하나의 방식으로 설정되는 영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 시스템
4 4
제1항에 있어서,상기 디지털 영상 구현장치는 스마트 TV, IPTV, 케이블 TV, 위성 TV, 셋탑박스(STB) 중 적어도 하나를 포함하는 영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 시스템
5 5
삭제
6 6
제1항에 있어서,상기 콘텐츠 핑거프린트 정보는 핑거프린트, 콘텐츠 ID, 채널 ID, 타임 스탬프(time stamp)를 포함하는 영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 시스템
7 7
제1항에 있어서,상기 콘텐츠 메타 정보는 콘텐츠 ID, 채널 ID, 타임 스탬프(time stamp), 시청 제한 정보를 포함하는 영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 시스템
8 8
제1항에 있어서,상기 시청 제한 정보 생성 서버와 콘텐츠 스트리밍 서버는 하나의 장치로 패키지화되어 사용자의 TV나 셋탑박스 근처에 설치되는 영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 시스템
9 9
디지털 영상 구현장치, 카메라 장치, 콘텐츠 제공 서버를 포함하는 영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 시스템을 기반으로 하는 영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 방법으로서,a) 상기 카메라 장치에 의해 디지털 영상 구현장치를 통해 디스플레이되는 디지털 콘텐츠를 시청하는 시청자를 촬영하여 객체를 인식하는 단계;b) 상기 디지털 영상 구현장치에 의해 상기 카메라 장치에 의해 인식된 객체 중에 신규 객체가 추가되었는지를 판별하는 단계;c) 신규 객체가 추가되었으면, 상기 디지털 영상 구현장치에 의해 안면인식 알고리즘을 이용하여 각 객체의 얼굴에 따라 성별 및 나이를 추정하는 단계;d) 상기 디지털 영상 구현장치에 의해 상기 콘텐츠 제공 서버로부터 제공된 비디오 핑거프린트 기반 콘텐츠 메타(meta) 정보를 취득하는 단계;e) 상기 디지털 영상 구현장치에 의해 취득된 비디오 핑거프린트 기반 콘텐츠 메타 정보를 바탕으로 추가된 신규 객체가 시청 연령 제한에 해당하는지를 판별하는 단계; 및f) 시청 연령 제한에 해당하면, 상기 디지털 영상 구현장치에 의해 사용자에 의해 미리 설정된 시청 제한 정보에 따라 시청 제어를 수행하여 방송중인 영상을 변환하는 단계를 포함하고,상기 단계 f)에서 상기 방송중인 영상을 변환함에 있어서, 상기 디지털 영상 구현장치가 상기 카메라 장치에 의해 촬영된 영상 정보를 바탕으로 시청자의 연령을 추정하여, 사용자가 미리 설정한 영상물의 폭력성과 선정성 수준에 따라, 영상물의 선정적이고 폭력적인 장면을 실시간으로 변환하여 송출하는 영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 방법
10 10
제9항에 있어서,상기 단계 a) 이전에 상기 디지털 영상 구현장치에 의해 상기 콘텐츠 제공 서버로부터 제공되는 디지털 콘텐츠를 수신하여 화면에 디스플레이하는 단계를 더 포함하는 영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 방법
11 11
제9항에 있어서,상기 단계 b)의 판별에서 신규 객체가 추가되지 않았으면, 상기 단계 a)로 회귀하는 단계를 더 포함하는 영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 방법
12 12
제9항에 있어서,상기 단계 c)의 안면인식 알고리즘을 이용하여 각 객체의 얼굴에 따라 성별 및 나이를 추정하는 단계는,c-1) 각 객체의 얼굴을 검출하는 단계;c-2) 상기 검출된 얼굴의 이미지 유효성을 평가하는 단계;c-3) 상기 이미지 유효성이 평가된 얼굴의 특징을 추출하는 단계; 및c-4) 상기 추출된 얼굴의 특징 정보를 바탕으로 해당 객체의 성별 및 나이를 추정하는 단계를 포함하는 영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 방법
13 13
제9항에 있어서,상기 단계 c) 이후 단계 d) 이전에, 상기 추정된 성별 및 나이를 바탕으로 상기 디지털 영상 구현장치에 의해 비디오 핑거프린트(fingerprint) 기반 쿼리(query)를 상기 콘텐츠 제공 서버로 요청하는 단계와;상기 콘텐츠 제공 서버에 의해 상기 비디오 핑거프린트 기반 쿼리 요청에 대해 응답으로서 비디오 핑거프린트 기반 콘텐츠 메타(meta) 정보를 제공하는 단계;를 더 포함하는 영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 방법
14 14
제13항에 있어서,상기 콘텐츠 메타(meta) 정보는 콘텐츠 ID, 채널 ID, 타임 스탬프(time stamp), 시청 제한 정보를 포함하는 영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 방법
15 15
제9항에 있어서,상기 단계 e)의 판별에서 시청 연령 제한에 해당하지 않으면, 상기 단계 a)로 회귀하는 단계를 더 포함하는 영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 방법
16 16
제9항에 있어서,상기 단계 f)에서 시청 제어는 디지털 콘텐츠 플레이 중지, 디지털 콘텐츠 모자이크 처리, 디지털 콘텐츠 소리 제거 중 적어도 하나를 포함하는 영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 방법
17 17
삭제
18 18
제9항에 있어서,상기 사용자가 미리 설정한 영상물의 폭력성과 선정성 수준은 상, 중, 하로 설정되는 영상 콘텐츠 자동 인식기술을 이용한 실시간 영상변환 방법
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 미래창조과학부 경희대학교 원천기술개발사업 - 글로벌프런티어사업 공존감 지원 실감교류 확장공간 소프트웨어 프레임워크 및 공존감 증강 방법론 개발