맞춤기술찾기

이전대상기술

컴퓨터와 크라우드 소싱을 이용한 비디오 사전 처리 방법

  • 기술번호 : KST2019021409
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 컴퓨터와 크라우드 소싱을 이용한 비디오 사전 처리 방법에 관한 것으로서, 더욱 상세하게는 비디오에 등장하는 객체에 대하여, 기계학습 기반의 컴퓨터 계산과 인간의 인지능력을 활용한 크라우드 소싱(crowd sourcing) 방식을 결합하여 비디오에 등장하는 인물, 사물 등의 객체에 대한 사전 처리(labelling)를 수행하는 방법에 관한 것이다. 본 발명에 의하면, 기계 학습 기반의 컴퓨터 계산 및 인간의 인지 능력을 활용한 크라우드 소싱(crowd sourcing) 방식을 결합한 파이프라인을 통하여, 적은 노동력으로도 빠르고 정확하게 비디오에 등장하는 객체들에 대한 사전 처리(labelling)를 가능하게 하는 플랫폼을 제공한다.
Int. CL G06K 9/00 (2006.01.01) G06N 99/00 (2019.01.01) G06K 9/62 (2006.01.01)
CPC G06K 9/00711(2013.01) G06K 9/00711(2013.01) G06K 9/00711(2013.01) G06K 9/00711(2013.01) G06K 9/00711(2013.01)
출원번호/일자 1020180048667 (2018.04.26)
출원인 한국과학기술원
등록번호/일자 10-2170416-0000 (2020.10.21)
공개번호/일자 10-2019-0130218 (2019.11.22) 문서열기
공고번호/일자 (20201027) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2018.04.26)
심사청구항수 13

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국과학기술원 대한민국 대전광역시 유성구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 김주호 대전광역시 유성구
2 정준영 대전광역시 유성구
3 송진영 대전광역시 유성구
4 아티 대전광역시 유성구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 장수현 대한민국 서울특별시 서초구 바우뫼로 ***, *층(양재동, 영진빌딩)(두리암특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 한국과학기술원 대전광역시 유성구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2018.04.26 수리 (Accepted) 1-1-2018-0417565-67
2 선행기술조사의뢰서
Request for Prior Art Search
2019.03.15 수리 (Accepted) 9-1-9999-9999999-89
3 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.04.24 수리 (Accepted) 4-1-2019-5081392-49
4 선행기술조사보고서
Report of Prior Art Search
2019.05.10 발송처리완료 (Completion of Transmission) 9-6-2019-0121902-02
5 의견제출통지서
Notification of reason for refusal
2019.11.07 발송처리완료 (Completion of Transmission) 9-5-2019-0805709-72
6 [지정기간연장]기간연장(단축, 경과구제)신청서
[Designated Period Extension] Application of Period Extension(Reduction, Progress relief)
2020.01.07 수리 (Accepted) 1-1-2020-0014260-10
7 [지정기간연장]기간연장(단축, 경과구제)신청서
[Designated Period Extension] Application of Period Extension(Reduction, Progress relief)
2020.02.07 수리 (Accepted) 1-1-2020-0128854-15
8 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2020.03.09 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2020-0245726-35
9 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2020.03.09 수리 (Accepted) 1-1-2020-0245707-78
10 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.05.15 수리 (Accepted) 4-1-2020-5108396-12
11 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.06.12 수리 (Accepted) 4-1-2020-5131486-63
12 등록결정서
Decision to grant
2020.07.20 발송처리완료 (Completion of Transmission) 9-5-2020-0489686-09
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
비디오에 대한 사전처리를 수행하는 방법으로서,(a) 기계학습(machine learning)을 활용한 등장인물의 얼굴 감지를 수행하는 단계;(b) 상기 비디오에 등장하는 인물의 몸(인체)을 감지하는 단계; 및(c) 상기 단계(a)의 얼굴과 상기 단계(b)의 인체를 동일인물의 것으로 매칭시키는 단계를 포함하고,상기 단계(a)는,(a1) 기 설정된 시간 간격으로 화면 프레임(frame)을 샘플링하는 단계;(a2) 얼굴감지 알고리즘을 이용하여 등장인물들의 얼굴 이미지를 확보하는 단계; 및(a3) 확보된 얼굴 이미지를 기반으로 동일인물에 해당하는 얼굴 이미지들을 클러스터링(clustering)하는 단계를 포함하며,상기 단계(a3) 이후,(a4) 상기 단계(a3)에서 클러스터링된 결과에 대하여, 크라우드 단말(crowd)들로부터, 보완 클러스터링된 결과를 수신하여 이로부터 최종 클러스터링 결과를 산출하는 크라우드소싱(crowdsourcing) 단계를 더 포함하고,상기 보완 클러스터링된 결과는,기계학습에 의하여 1차 수행된 클러스터링에서 앞모습, 옆모습 및 다른 표정을 포함하는 원인들 중 하나 이상의 원인으로 인하여 다른 인물이라고 판단되어 다른 클러스터로 분류된 결과에 대하여, 크라우드 단말들이 동일인물로 판단하여 하나의 클러스터로 재 클러스터링한 결과인,비디오 사전처리 방법
2 2
청구항 1에 있어서,상기 단계(a) 이전에,(a0) 사전처리를 수행할 비디오에 대하여, 사전처리 가능한 비디오인지 여부에 대한 판단 결과를 크라우드 단말로부터 수신하는 단계를 더 포함하고,상기 단계(a) 이후의 단계는,상기 단계(a0)의 판단 결과가, 사전처리 가능한 비디오인 경우에 수행하는 것을 특징으로 하는 비디오 사전처리 방법
3 3
삭제
4 4
청구항 1에 있어서,상기 단계(a3)에서,총 클러스터의 수를 미리 설정한 후 상기 클러스터링을 수행하는 것을 특징으로 하는 비디오 사전처리 방법
5 5
삭제
6 6
청구항 1에 있어서,상기 단계(b)는,(b1) 상기 비디오에 등장하는 인물의 몸(인체)을 감지하는 단계; 및(b2) 상기 비디오 각 프레임에서 감지된 인체들에 대하여, 동일인물의 인체인지 여부를 판단하는 단계를 포함하는 것을 특징으로 하는 비디오 사전처리 방법
7 7
청구항 6에 있어서,상기 단계(b2) 이후,(b3) 상기 단계(b2)의 동일인물 인체여부 판단 결과에 대하여, 크라우드 단말(crowd)들로부터, 오류 정정된 결과를 수신하여 이로부터 최종 동일인물 인체여부 판단 결과를 산출하는 단계를 더 포함하는 것을 특징으로 하는 비디오 사전처리 방법
8 8
청구항 1에 있어서,상기 단계(c)의 동일인물의 얼굴과 인체의 매칭은,크라우드 단말들에 의해 매칭된 결과를 수신하여 이로부터 최종 얼굴 및 인체 매칭 결과를 산출하는 방식으로 수행되는 것을 특징으로 하는 비디오 사전처리 방법
9 9
비디오 사전처리 방법을 수행하기 위하여 비일시적 매체에 저장된 컴퓨터 프로그램으로서,비일시적 저장 매체에 저장되며, 프로세서에 의하여,(a) 기계학습(machine learning)을 활용한 등장인물의 얼굴 감지를 수행하는 단계;(b) 상기 비디오에 등장하는 인물의 몸(인체)을 감지하는 단계; 및(c) 상기 단계(a)의 얼굴과 상기 단계(b)의 인체를 동일인물의 것으로 매칭시키는 단계가 실행되도록 하는 명령을 포함하고,상기 단계(a)는,(a1) 기 설정된 시간 간격으로 화면 프레임(frame)을 샘플링하는 단계;(a2) 얼굴감지 알고리즘을 이용하여 등장인물들의 얼굴 이미지를 확보하는 단계; 및(a3) 확보된 얼굴 이미지를 기반으로 동일인물에 해당하는 얼굴 이미지들을 클러스터링(clustering)하는 단계를 포함하며,상기 단계(a3) 이후,(a4) 상기 단계(a3)에서 클러스터링된 결과에 대하여, 크라우드 단말(crowd)들로부터, 보완 클러스터링된 결과를 수신하여 이로부터 최종 클러스터링 결과를 산출하는 크라우드소싱(crowdsourcing) 단계를 더 포함하고,상기 보완 클러스터링된 결과는,기계학습에 의하여 1차 수행된 클러스터링에서 앞모습, 옆모습 및 다른 표정을 포함하는 원인들 중 하나 이상의 원인으로 인하여 다른 인물이라고 판단되어 다른 클러스터로 분류된 결과에 대하여, 크라우드 단말들이 동일인물로 판단하여 하나의 클러스터로 재 클러스터링한 결과인,비디오 사전처리 방법을 수행하기 위하여 비일시적 매체에 저장된 컴퓨터 프로그램
10 10
청구항 9에 있어서,상기 단계(a) 이전에,(a0) 사전처리를 수행할 비디오에 대하여, 사전처리 가능한 비디오인지 여부에 대한 판단 결과를 크라우드 단말로부터 수신하는 단계를 더 포함하고,상기 단계(a) 이후의 단계는,상기 단계(a0)의 판단 결과가, 사전처리 가능한 비디오인 경우에 수행하는 것을 특징으로 하는, 비디오 사전처리 방법을 수행하기 위하여 비일시적 매체에 저장된 컴퓨터 프로그램
11 11
삭제
12 12
청구항 9에 있어서,상기 단계(a3)에서,총 클러스터의 수를 미리 설정한 후 상기 클러스터링을 수행하는 것을 특징으로 하는, 비디오 사전처리 방법을 수행하기 위하여 비일시적 매체에 저장된 컴퓨터 프로그램
13 13
삭제
14 14
청구항 9에 있어서,상기 단계(b)는,(b1) 상기 비디오에 등장하는 인물의 몸(인체)을 감지하는 단계; 및(b2) 상기 비디오 각 프레임에서 감지된 인체에 대하여, 동일인물의 인체인지 여부를 판단하는 단계를 포함하는 것을 특징으로 하는, 비디오 사전처리 방법을 수행하기 위하여 비일시적 매체에 저장된 컴퓨터 프로그램
15 15
청구항 14에 있어서,상기 단계(b2) 이후,(b3) 상기 단계(b2)의 동일인물 인체여부 판단 결과에 대하여, 크라우드 단말(crowd)들로부터, 오류 정정된 결과를 수신하여 이로부터 최종 동일인물 인체여부 판단 결과를 산출하는 단계를 더 포함하는 것을 특징으로 하는, 비디오 사전처리 방법을 수행하기 위하여 비일시적 매체에 저장된 컴퓨터 프로그램
16 16
청구항 9에 있어서,상기 단계(c)의 동일인물의 얼굴과 인체의 매칭은,크라우드 단말들에 의해 매칭된 결과를 수신하여 이로부터 최종 얼굴 및 인체 매칭 결과를 산출하는 방식으로 수행되는 것을 특징으로 하는, 비디오 사전처리 방법을 수행하기 위하여 비일시적 매체에 저장된 컴퓨터 프로그램
17 17
비디오 사전처리 방법을 수행하기 위한 장치로서,적어도 하나의 프로세서; 및,컴퓨터로 실행가능한 명령을 저장하는 메모리를 포함하되,상기 메모리에 저장된 상기 컴퓨터로 실행가능한 명령은, 상기 적어도 하나의 프로세서에 의하여,(a) 기계학습(machine learning)을 활용한 등장인물의 얼굴 감지를 수행하는 단계;(b) 상기 비디오에 등장하는 인물의 몸(인체)을 감지하는 단계; 및(c) 상기 단계(a)의 얼굴과 상기 단계(b)의 인체를 동일인물의 것으로 매칭시키는 단계가 실행되도록 하고,상기 단계(a)는,(a1) 기 설정된 시간 간격으로 화면 프레임(frame)을 샘플링하는 단계;(a2) 얼굴감지 알고리즘을 이용하여 등장인물들의 얼굴 이미지를 확보하는 단계; 및(a3) 확보된 얼굴 이미지를 기반으로 동일인물에 해당하는 얼굴 이미지들을 클러스터링(clustering)하는 단계를 포함하며,상기 단계(a3) 이후,(a4) 상기 단계(a3)에서 클러스터링된 결과에 대하여, 크라우드 단말(crowd)들로부터, 보완 클러스터링된 결과를 수신하여 이로부터 최종 클러스터링 결과를 산출하는 크라우드소싱(crowdsourcing) 단계를 더 포함하고,상기 보완 클러스터링된 결과는,기계학습에 의하여 1차 수행된 클러스터링에서 앞모습, 옆모습 및 다른 표정을 포함하는 원인들 중 하나 이상의 원인으로 인하여 다른 인물이라고 판단되어 다른 클러스터로 분류된 결과에 대하여, 크라우드 단말들이 동일인물로 판단하여 하나의 클러스터로 재 클러스터링한 결과인,비디오 사전처리 방법을 수행하기 위한 장치
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 과학기술정보통신부 한국과학기술원 원천기술개발사업 크라우드소싱 기반 컨텍스트 빅 데이터 수집 기술 개발 및 대규모 공개 데이터셋 구축