맞춤기술찾기

이전대상기술

공간-물체 관계 그래프에 기반한 객체 인식 방법 및 그 장치(Apparatus and Method of Object Recognition based on Space-Object Relation Graph)

  • 기술번호 : KST2017009522
  • 담당센터 : 서울서부기술혁신센터
  • 전화번호 : 02-6124-6930
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 영상에서 객체를 인식하는 방법 및 그 장치에 관한 것이다.본 발명에 따른 입력 영상에서의 객체 인식 방법은, 상기 영상에서 객체를 검출하고, 상기 검출한 객체를 인식하여, 상기 객체에 대응하는 적어도 하나 이상의 후보 부류를 결정하는 객체 인식 단계; 상기 영상에 포함된 상기 객체 중에서 인식 정확도를 기준으로 주요 객체를 선별하는 주요 객체 선별 단계; 공간과 물체 간의 관계를 미리 정의한 공간-물체 관계 모델을 이용하여, 상기 선별한 주요 객체가 속하는 상기 공간을 추정하는 공간 추정 단계; 상기 추정한 공간에 따라 상기 객체에 대응하는 상기 후보 부류 중 일부를 선별하는 후보 부류 선별 단계; 및 상기 선별한 후보 부류 중에서 상기 객체의 부류를 결정하는 부류 결정 단계를 포함할 수 있다.
Int. CL G06K 9/00 (2016.01.10) G06K 9/62 (2016.01.10)
CPC G06K 9/00624(2013.01) G06K 9/00624(2013.01) G06K 9/00624(2013.01) G06K 9/00624(2013.01)
출원번호/일자 1020150167923 (2015.11.27)
출원인 연세대학교 산학협력단
등록번호/일자
공개번호/일자 10-2017-0062290 (2017.06.07) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2015.11.27)
심사청구항수 20

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 연세대학교 산학협력단 대한민국 서울특별시 서대문구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 변혜란 대한민국 서울특별시 서대문구
2 임광용 대한민국 서울특별시 서대문구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인우인 대한민국 서울특별시 강남구 역삼로 ***, *층(역삼동, 중평빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 연세대학교 산학협력단 서울특별시 서대문구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2015.11.27 수리 (Accepted) 1-1-2015-1163318-81
2 의견제출통지서
Notification of reason for refusal
2017.01.13 발송처리완료 (Completion of Transmission) 9-5-2017-0033753-50
3 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2017.03.08 수리 (Accepted) 1-1-2017-0231593-94
4 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2017.03.08 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2017-0231594-39
5 등록결정서
Decision to grant
2017.07.26 발송처리완료 (Completion of Transmission) 9-5-2017-0523543-84
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
객체 인식 방법에 있어서,특정 공간을 촬영한 입력 영상으로부터 객체를 검출하고, 상기 검출한 객체를 인식하여, 상기 객체에 대응하는 적어도 하나 이상의 후보 부류를 결정하는 객체 인식 단계;상기 영상에 포함된 상기 객체 중에서 인식 정확도를 기준으로 주요 객체를 선별하는 주요 객체 선별 단계;공간과 물체 간의 관계를 미리 정의한 공간-물체 관계 모델을 이용하여, 상기 주요 객체가 포함된 상기 입력 영상에 대하여 상기 선별한 주요 객체가 속하는 상기 공간을 추정하는 공간 추정 단계;상기 추정한 공간에 기반하여 상기 객체에 대응하는 상기 후보 부류 중에서 일부를 선별하는 후보 부류 선별 단계; 및상기 선별한 후보 부류 중에서 상기 객체의 부류를 결정하는 부류 결정 단계를 포함하는 것을 특징으로 하는 객체 인식 방법
2 2
제1항에 있어서,상기 객체 인식 단계는 상기 검출한 객체를 미리 정해진 객체 인식 알고리즘을 이용하여 인식하되, 상기 객체에 대하여 상기 후보 부류 별 상기 인식 정확도를 산출하고, 상기 산출한 인식 정확도를 기준으로 소정의 개수의 상기 후보 부류를 결정하는 것을 특징으로 하는 객체 인식 방법
3 3
제1항에 있어서,상기 객체 인식 단계는 상기 객체를 상기 후보 부류로 인식하는 정확도를 상기 인식 정확도로 산출하는 것을 특징으로 하는 객체 인식 방법
4 4
제2항에 있어서,상기 객체 인식 단계는 CNN(Convolutional Neural Network) 방법을 이용하여 상기 객체를 인식하여, 상기 객체에 대하여 소정의 개수의 상기 후보 부류를 결정하는 것을 특징으로 하는 객체 인식 방법
5 5
제1항에 있어서,상기 주요 객체 선별 단계는 상기 영상에 포함된 상기 객체 중에서, 상기 객체의 상기 인식 정확도와 소정의 임계치를 비교하여, 그 비교 결과에 따라 상기 주요 객체를 선별하는 것을 특징으로 하는 객체 인식 방법
6 6
제1항에 있어서,상기 공간 추정 단계는 상기 공간-물체 관계 모델에서 상기 주요 객체에 대응하는 상기 공간을 검색하고, 상기 검색한 공간을 기초로 상기 주요 객체가 속하는 상기 공간을 추정하는 것을 특징으로 하는 객체 인식 방법
7 7
제6항에 있어서,상기 공간 추정 단계는 상기 영상에서 선별된 각 상기 주요 객체에 대응하는 상기 공간을 상기 공간-물체 관계 모델에서 검색하고, 상기 검색된 공간들 중에서 검색된 횟수를 기초로 상기 주요 객체가 속하는 상기 공간을 결정하는 것을 특징으로 하는 객체 인식 방법
8 8
제6항에 있어서,상기 공간-물체 관계 모델은 적어도 하나 이상의 상기 공간에 대하여, 각 상기 공간 별로 상기 공간에 존재하는 상기 물체를 미리 정의한 모델인 것을 특징으로 하는 객체 인식 방법
9 9
제8항에 있어서,상기 공간-물체 관계 모델은 상기 공간과 상기 물체 간의 소속 관계를 노드와 에지 간의 연결 그래프로 나타낸 그래프 모델인 것을 특징으로 하는 객체 인식 방법
10 10
제1항에 있어서,상기 후보 부류 선별 단계는 상기 후보 부류 중에서 상기 공간-물체 관계 모델에서 상기 추정한 공간과 관계된 상기 물체에 대응하는 상기 후보 부류를 선별하는 것을 특징으로 하는 객체 인식 방법
11 11
제10항에 있어서,상기 공간-물체 관계 모델은 상기 공간과 상기 물체 간의 소속 관계를 노드와 에지 간의 연결 그래프로 나타낸 그래프 모델이고,상기 후보 부류 선별 단계는 상기 후보 부류 중에서 상기 그래프 모델에서 상기 추정한 공간에 대응하는 공간 노드와 연결된 물체 노드에 대응하는 상기 후보 부류를 선별하는 것을 특징으로 하는 객체 인식 방법
12 12
제1항에 있어서,상기 부류 결정 단계는 상기 후보 부류의 상기 인식 정확도의 크기를 기준으로, 상기 선별한 후보 부류 중 상기 객체의 상기 부류를 결정하는 것을 특징으로 하는 객체 인식 방법
13 13
제1항에 있어서,상기 후보 부류 중에서 상기 주요 객체와 관련된 상기 후보 부류를 상기 공간-물체 관계 모델에서 검색하고, 상기 검색한 상기 후보 부류의 상기 인식 정확도를 보정하는 인식 정확도 보정 단계를 더 포함하는 것을 특징으로 하는 객체 인식 방법
14 14
제13항에 있어서,상기 인식 정확도 보정 단계는 상기 후보 부류 선별 단계에서 선별한 상기 후보 부류 중에서 상기 주요 객체와 관련된 상기 후보 부류를 상기 공간-물체 관계 모델에서 검색하여, 상기 검색한 상기 후보 부류의 상기 인식 정확도를 보정하고,상기 부류 결정 단계는 상기 보정된 인식 정확도를 기초로 상기 후보 부류 선별 단계에서 선별한 상기 후보 부류 중에서 상기 객체의 상기 부류를 결정하는 것을 특징으로 하는 객체 인식 방법
15 15
제13항에 있어서,상기 공간-물체 관계 모델은 상기 공간과 상기 물체 간의 소속 관계를 노드와 에지 간의 연결 그래프로 나타낸 그래프 모델이고,상기 인식 정확도 보정 단계는,상기 그래프 모델에서 상기 주요 객체에 대응하는 상기 노드와 연결된 상기 후보 부류에 대응하는 상기 노드를 검색하고,상기 주요 객체에 대응하는 상기 노드와 상기 후보 부류에 대응하는 상기 노드 간의 연결 정보를 기초로, 상기 검색한 상기 후보 부류의 상기 인식 정확도를 보정하는 것을 특징으로 하는 객체 인식 방법
16 16
제15항에 있어서,상기 인식 정확도 보정 단계는 상기 그래프 모델에서 상기 주요 객체에 대응하는 상기 노드와 상기 후보 부류에 대응하는 상기 노드 간의 연결 홉(Hop) 거리에 따라 가중치를 산출하고, 상기 산출한 가중치를 적용하여 상기 후보 부류의 상기 인식 정확도를 보정하는 것을 특징으로 하는 객체 인식 방법
17 17
객체 인식 장치에 있어서,특정 공간을 촬영한 입력 영상으로부터 객체를 검출하고, 상기 검출한 객체를 인식하여, 상기 객체에 대응하는 적어도 하나 이상의 후보 부류를 결정하는 객체 인식부;상기 영상에 포함된 상기 객체 중에서 인식 정확도를 기준으로 주요 객체를 선별하는 주요 객체 선별부;공간과 물체 간의 관계를 미리 정의한 공간-물체 관계 모델을 이용하여, 상기 주요 객체가 포함된 상기 입력 영상에 대하여 상기 선별한 주요 객체가 속하는 상기 공간을 추정하는 공간 추정부;상기 추정한 공간에 기반하여 상기 객체에 대응하는 상기 후보 부류 중에서 일부를 선별하는 후보 부류 선별부; 및상기 선별한 후보 부류 중에서 상기 객체의 부류를 결정하는 부류 결정부를 포함하는 것을 특징으로 하는 객체 인식 장치
18 18
제17항에 있어서,상기 공간 추정부는 상기 공간-물체 관계 모델에서 상기 주요 객체에 대응하는 상기 공간을 검색하고, 상기 검색한 공간을 기초로 상기 주요 객체가 속하는 상기 공간을 추정하는 것을 특징으로 하는 객체 인식 장치
19 19
제17항에 있어서,상기 후보 부류 선별부는 상기 후보 부류 중에서 상기 공간-물체 관계 모델에서 상기 추정한 공간과 관계된 상기 물체에 대응하는 상기 후보 부류를 선별하는 것을 특징으로 하는 객체 인식 장치
20 20
제17항에 있어서,상기 후보 부류 중에서 상기 주요 객체와 관련된 상기 후보 부류를 상기 공간-물체 관계 모델에서 검색하고, 상기 검색한 상기 후보 부류의 상기 인식 정확도를 보정하는 인식 정확도 보정부를 더 포함하는 것을 특징으로 하는 객체 인식 장치
지정국 정보가 없습니다
순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - 패밀리정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 WO2017090830 WO 세계지적재산권기구(WIPO) FAMILY

DOCDB 패밀리 정보

순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - DOCDB 패밀리 정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 WO2017090830 WO 세계지적재산권기구(WIPO) DOCDBFAMILY
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 미래창조과학부 연세대학교 산학협력단 중견연구자지원사업 장면 요소 정보 간 관련성 분석을 통한 영상 장면 해석 기술 연구(3/3)(2013.6.1~2016.5.31)