맞춤기술찾기

이전대상기술

시각언어 기반의 영상주석 자동 생성 장치 및 방법

  • 기술번호 : KST2015092171
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 시각언어(Visual language)를 기반으로 초대용량 영상에 대한 영상주석을 자동 생성하는 장치 및 방법에 관한 것이다. 본 발명의 일면에 따른 시각언어 기반의 영상주석 자동 생성 장치는 입력영상을 수신하는 영상입력부와, 영상입력부가 수신한 입력영상의 특징 정보를 추출하는 영상분석부와, 영상분석부가 추출한 특징 정보를 이용하여 입력영상에 대한 유사영상 및 유사영상이 포함하는 텍스트 정보를 검색하는 검색부 및 검색부가 검색한 텍스트 정보를 이용하여 입력영상에 대한 영상 주석을 구성하는 영상주석구성부를 포함한다.
Int. CL G06F 17/00 (2019.01.01) G06F 16/00 (2019.01.01) G06F 3/14 (2006.01.01)
CPC
출원번호/일자 1020130153299 (2013.12.10)
출원인 한국전자통신연구원
등록번호/일자 10-2156440-0000 (2020.09.09)
공개번호/일자 10-2015-0067899 (2015.06.19) 문서열기
공고번호/일자 (20200917) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2018.04.11)
심사청구항수 9

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국전자통신연구원 대한민국 대전광역시 유성구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 오원근 대한민국 대전광역시 유성구
2 나상일 대한민국 대전광역시 유성구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인지명 대한민국 서울특별시 강남구 남부순환로**** 차우빌딩*층

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 한국전자통신연구원 대전광역시 유성구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2013.12.10 수리 (Accepted) 1-1-2013-1130539-22
2 [출원서등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2014.03.28 수리 (Accepted) 1-1-2014-0300045-89
3 출원인정보변경(경정)신고서
Notification of change of applicant's information
2015.02.02 수리 (Accepted) 4-1-2015-0006137-44
4 [심사청구]심사청구(우선심사신청)서
[Request for Examination] Request for Examination (Request for Preferential Examination)
2018.04.11 수리 (Accepted) 1-1-2018-0362476-23
5 의견제출통지서
Notification of reason for refusal
2019.06.17 발송처리완료 (Completion of Transmission) 9-5-2019-0427533-77
6 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2019.08.19 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2019-0850646-92
7 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2019.08.19 수리 (Accepted) 1-1-2019-0850647-37
8 최후의견제출통지서
Notification of reason for final refusal
2019.12.30 발송처리완료 (Completion of Transmission) 9-5-2019-0938605-18
9 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2020.03.02 보정승인 (Acceptance of amendment) 1-1-2020-0223295-43
10 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2020.03.02 수리 (Accepted) 1-1-2020-0223296-99
11 등록결정서
Decision to grant
2020.06.09 발송처리완료 (Completion of Transmission) 9-5-2020-0394465-10
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
입력영상을 수신하는 영상입력부; 상기 영상입력부가 수신한 입력영상의 특징 정보를 추출하는 영상분석부; 상기 영상분석부가 추출한 특징 정보를 이용하여 상기 입력영상에 대한 유사영상 및 상기 유사영상이 포함하는 텍스트 정보를 검색하여, 상기 입력영상에 대한 텍스트 정보를 선정하는 검색부; 및상기 검색부가 선정한 텍스트 정보를 분석하여 키워드 리스트를 생성하고, 상기 키워드 리스트 내의 텍스트 정보에 대한 의미론적 해석을 통해 상기 입력영상에 대한 영상 주석을 구성하는 영상주석구성부를 포함하고, 상기 검색부는 영상 및 메타데이터 DB가 포함하는 영상의 특징 정보를 수신하고, 상기 영상 및 메타데이터 DB가 포함하는 영상의 특징 정보 및 상기 입력영상의 특징 정보를 비교하여, 상기 입력영상에 대한 유사영상을 선택하고, 상기 유사영상이 포함하는 텍스트 정보를 이용하여 후보집단을 설정하고, 상기 후보집단이 포함하는 텍스트 정보 중 기설정된 빈도 이상의 텍스트 정보를 상기 입력영상에 대한 텍스트 정보로 선정하고, 상기 영상주석구성부는 상기 키워드 리스트 내에 포함되는 텍스트 정보에 대하여 의미론적 해석 기법을 적용하여, 상기 입력영상이 포함하는 복수의 객체의 조합에 대해 상기 입력영상이 포함하는 내용을 문장으로 표현하는 상기 영상 주석을 생성하는 것인 시각언어 기반의 영상주석 자동 생성 장치
2 2
제1항에 있어서, 상기 영상분석부는 상기 입력영상을 분석하여, 상기 입력영상이 포함하는 객체의 색상, 질감, 이름, 모양, 위치 및 객체 간의 위치 관계 중 적어도 어느 하나를 상기 입력영상의 특징 정보로 추출하는 것인 시각언어 기반의 영상주석 자동 생성 장치
3 3
삭제
4 4
제1항에 있어서, 상기 검색부는 상기 영상 및 메타데이터 DB가 포함하는 영상의 특징 정보 및 상기 입력영상의 특징 정보의 유사도를 산출하고, 상기 산출한 유사도가 기설정값 이상인 상기 영상 및 메타데이터 DB가 포함하는 영상을 상기 입력영상에 대한 유사영상으로 선택하는 것인 시각언어 기반의 영상주석 자동 생성 장치
5 5
삭제
6 6
삭제
7 7
(a) 입력영상을 수신하는 영상 입력 단계; (b) 상기 영상 입력 단계에서 수신한 입력영상의 특징 정보를 추출하는 특징정보 추출 단계; (c) 상기 추출한 특징 정보를 이용하여 상기 입력영상과 유사한 영상을 검색하고, 유사영상이 포함하는 텍스트 정보를 검색하는 유사영상 및 텍스트 정보 검색 단계; (d) 상기 입력영상의 특징 정보 및 상기 유사영상이 포함하는 텍스트 정보를 분석하여 상기 입력영상에 대한 텍스트 정보를 선정하는 텍스트 정보 선정 단계; 및(e) 상기 선정한 텍스트 정보를 이용하여 키워드 리스트를 구성하고, 상기 키워드 리스트 내의 텍스트 정보에 대한 의미론적 해석을 통해 상기 입력영상이 포함하는 복수의 객체의 조합에 대해 상기 입력영상이 포함하는 내용을 문장으로 표현하는 영상 주석을 생성하는 단계를 포함하고, 상기 (d) 단계는 메타데이터 DB 내의 유사영상이 포함하는 텍스트 정보를 이용하여 후보집단을 설정하고, 상기 후보집단 중 적어도 어느 하나의 텍스트 정보에 대한 선택 정보를 수신하여 상기 입력영상에 대한 텍스트 정보를 선정하거나, 상기 후보집단 중 기설정된 빈도 이상의 텍스트 정보를 상기 입력영상에 대한 텍스트 정보로 선정하고, 상기 (e) 단계는 상기 (d) 단계에서 선정한 상기 입력영상에 대한 텍스트 정보를 이용하여 키워드 리스트를 생성하고, 상기 키워드 리스트를 이용하여 상기 입력영상이 포함하는 복수의 객체의 조합에 따라 상기 입력영상이 포함하는 내용을 문장으로 표현하는 상기 영상 주석을 생성하는 것인 시각언어 기반의 영상주석 자동 생성 방법
8 8
제7항에 있어서, 상기 (b) 단계는상기 입력영상을 분석하여, 상기 입력영상 내의 객체의 색상, 질감, 이름, 모양, 위치, 객체간의 상호 관계 중 적어도 어느 하나를 포함하는 특징 정보를 추출하는 것인 시각언어 기반의 영상주석 자동 생성 방법
9 9
삭제
10 10
삭제
11 11
삭제
12 12
입력영상을 수신하고, 상기 입력영상 및 상기 입력영상에 대한 영상주석 요청 신호를 송신하는 단말; 및상기 단말로부터 상기 입력영상 및 입력 영상에 대한 영상주석 요청 신호를 수신하고, 상기 입력영상의 특징 정보를 추출하고, 상기 입력영상의 특징 정보에 따라 영상 및 메타데이터 DB를 검색하여 생성한 키워드 리스트 내의 텍스트 정보에 대한 의미론적 해석을 통해 상기 입력영상에 대한 영상 주석을 구성하는 서버를 포함하고, 상기 서버는 영상 및 메타데이터 DB가 포함하는 영상의 특징 정보를 수신하고, 상기 영상 및 메타데이터 DB가 포함하는 영상의 특징 정보 및 상기 입력영상의 특징 정보를 비교하여, 상기 입력영상에 대한 유사영상을 선택하고, 상기 유사영상이 포함하는 텍스트 정보를 이용하여 후보집단을 설정하고, 상기 후보집단이 포함하는 텍스트 정보 중 기설정된 빈도 이상의 텍스트 정보를 상기 입력영상에 대한 텍스트 정보로 선정하고, 상기 키워드 리스트 내에 포함되는 텍스트 정보에 대하여 의미론적 해석 기법을 적용하여, 상기 입력영상이 포함하는 복수의 객체의 조합에 대해 상기 입력영상이 포함하는 내용을 문장으로 표현하는 상기 영상 주석을 생성하는 것인 시각언어 기반의 영상주석 자동 생성 시스템
13 13
제12항에 있어서, 상기 서버는상기 단말로부터 수신한 입력영상을 분석하여 상기 입력영상이 포함하는 객체의 색상, 질감, 이름, 모양, 위치, 객체 간의 상호 관계 중 적어도 어느 하나를 상기 입력영상의 특징 정보로 추출하는 것인 시각언어 기반의 영상주석 자동 생성 시스템
14 14
제12항에 있어서, 상기 서버는 클라우드 컴퓨팅, 웹 또는 타 서버에서 기수집한 영상, 상기 영상에 대한 특징 정보 및 텍스트를 포함하는 상기 영상 및 메타데이터 DB를 검색하여 상기 입력영상에 대한 유사영상을 선택하는 것인 시각언어 기반의 영상주석 자동 생성 시스템
15 15
삭제
16 16
삭제
17 17
삭제
18 18
제12항에 있어서, 상기 서버는 상기 후보집단 중 적어도 어느 하나의 텍스트 정보에 대한 선택 정보를 수신하고, 상기 선택 정보에 따라 상기 입력영상에 대한 텍스트 정보를 선정하는 것인 시각언어 기반의 영상주석 자동 생성 시스템
지정국 정보가 없습니다
순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - 패밀리정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 US09606975 US 미국 FAMILY
2 US20150161094 US 미국 FAMILY

DOCDB 패밀리 정보

순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - DOCDB 패밀리 정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 US2015161094 US 미국 DOCDBFAMILY
2 US9606975 US 미국 DOCDBFAMILY
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 舊지경부 ETRI 정보통신표준화 및 인증지원사업 디지털 콘텐츠 핑거프린팅 표준개발