맞춤기술찾기

이전대상기술

모바일 환경 객체 신뢰도 평가와 학습을 통한 융합 객체 추적 시스템 및 방법(System and Method for Multi Object Tracking based on Reliability Assessment of Learning in Mobile Environment)

  • 기술번호 : KST2018001010
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 객체의 색상정보를 이용한 추적 기술과 객체의 특징점 정보를 이용한 추적 기술을 융합하여 다양한 환경 변화에도 강건한 객체 추적이 가능하도록 한 모바일 환경 객체 신뢰도 평가와 학습을 통한 융합 객체 추적 시스템 및 방법에 관한 것으로, 모바일 환경에서 학습된 정보를 이용하여 초기 객체를 자동으로 인식하고 인식된 객체의 정보를 업데이트 하는 초기화 모듈;객체의 색상정보를 이용한 추적과 객체의 특징점 정보를 이용한 추적을 융합하여 상기 초기화 모듈에서 인식된 객체를 추적하는 객체 추적 모듈;상기 초기화 모듈에서의 객체 검출, 인식 과정에서 생성된 가장 높은 신뢰도를 갖는 Level 0의 객체 정보를 기준으로 객체 추적에 성공한 객체를 평가하여 신뢰할 수 있는 객체인지 평가하여 학습을 하고, 신뢰도 수준을 결정하는 학습 모듈;상기 학습 모듈에서 학습된 객체의 정보를 이용하여 객체의 위치를 재탐색하고, 재탐색에 성공하였을 때 현재 재탐색된 객체의 정보를 기준으로 학습된 정보를 재정렬하는 객체 재탐색 모듈;을 포함하는 하는 것이다.
Int. CL G06T 7/00 (2016.08.21) G06T 7/20 (2016.08.21) H04N 7/18 (2016.08.21) G08B 13/196 (2016.08.21)
CPC G06T 7/11(2013.01) G06T 7/11(2013.01) G06T 7/11(2013.01) G06T 7/11(2013.01)
출원번호/일자 1020160090757 (2016.07.18)
출원인 단국대학교 천안캠퍼스 산학협력단
등록번호/일자
공개번호/일자 10-2018-0009180 (2018.01.26) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2017.10.17)
심사청구항수 12

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 단국대학교 천안캠퍼스 산학협력단 대한민국 충청남도 천안시 동남구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 김영섭 대한민국 서울특별시 강남구
2 이창현 대한민국 경기도 광명시 새터로**번
3 한우리 대한민국 충청남도 천안시 동남구
4 박인호 대한민국 경상남도 진주시 소호로 **,

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 정기택 대한민국 서울특별시 서초구 강남대로**길 **, *층 (반포동, 새로나빌딩)(스카이특허법률사무소)
2 오위환 대한민국 서울특별시 서초구 강남대로**길 **, *층 (반포동, 새로나빌딩)(스카이특허법률사무소)
3 나성곤 대한민국 서울특별시 서초구 강남대로**길 **, *층 (반포동, 새로나빌딩)(스카이특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 단국대학교 천안캠퍼스 산학협력단 충청남도 천안시 동남구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2016.07.18 수리 (Accepted) 1-1-2016-0693220-58
2 [심사청구]심사청구(우선심사신청)서
[Request for Examination] Request for Examination (Request for Preferential Examination)
2017.10.17 수리 (Accepted) 1-1-2017-1021514-17
3 선행기술조사의뢰서
Request for Prior Art Search
2018.05.10 수리 (Accepted) 9-1-9999-9999999-89
4 선행기술조사보고서
Report of Prior Art Search
2018.07.09 수리 (Accepted) 9-1-2018-0034257-35
5 의견제출통지서
Notification of reason for refusal
2018.08.20 발송처리완료 (Completion of Transmission) 9-5-2018-0560395-69
6 [지정기간연장]기간연장(단축, 경과구제)신청서
[Designated Period Extension] Application of Period Extension(Reduction, Progress relief)
2018.10.22 수리 (Accepted) 1-1-2018-1041903-67
7 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2018.10.25 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2018-1056301-32
8 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2018.10.25 수리 (Accepted) 1-1-2018-1056286-34
9 등록결정서
Decision to grant
2018.10.30 발송처리완료 (Completion of Transmission) 9-5-2018-0736645-17
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
모바일 환경에서 학습된 정보를 이용하여 초기 객체를 자동으로 인식하고 인식된 객체의 정보를 업데이트 하는 초기화 모듈;객체의 색상정보를 이용한 추적과 객체의 특징점 정보를 이용한 추적을 융합하여 상기 초기화 모듈에서 인식된 객체를 추적하는 객체 추적 모듈;상기 초기화 모듈에서의 객체 검출, 인식 과정에서 생성된 가장 높은 신뢰도를 갖는 Level 0의 객체 정보를 기준으로 객체 추적에 성공한 객체를 평가하여 신뢰할 수 있는 객체인지 평가하여 학습을 하고, 신뢰도 수준을 결정하는 학습 모듈;상기 학습 모듈에서 학습된 객체의 정보를 이용하여 객체의 위치를 재탐색하고, 재탐색에 성공하였을 때 현재 재탐색된 객체의 정보를 기준으로 학습된 정보를 재정렬하는 객체 재탐색 모듈;을 포함하고,상기 학습 모듈에서의 신뢰도 수준을 결정하는 과정에서, Level 0의 기준 객체와 추적에 성공한 객체 사이의 매칭된 특징점이 포함된 라벨의 종류가 많을수록 신뢰도 수준이 높은 것으로 판단하고, 매칭된 특징점의 수가 많을수록 신뢰도 수준이 높은 것으로 판단하는 것을 특징으로 하는 모바일 환경 객체 신뢰도 평가와 학습을 통한 융합 객체 추적 시스템
2 2
제 1 항에 있어서, 상기 초기화 모듈은,SURF(Speeded-Up Robust Features) 특징점 묘사자를 학습한 정보와 LSH(Locality Sensitive Hashing)를 이용하여 학습된 정보와 현재 객체가 포함된 영상에 대하여 특징점을 매칭 및 비교하고 객체의 초기 정보와 위치정보를 업데이트하는 것을 특징으로 하는 모바일 환경 객체 신뢰도 평가와 학습을 통한 융합 객체 추적 시스템
3 3
제 1 항에 있어서, 상기 객체 추적 모듈은,객체의 히스토그램 정보중 가장 많은 색상을 기준으로 마스크를 생성하고,전경과 객체를 분리한 뒤 히스토그램 정보를 이용한 객체 추적 시스템(Camshift)를 적용하여 예상 객체 영역을 확보하는 것을 특징으로 하는 모바일 환경 객체 신뢰도 평가와 학습을 통한 융합 객체 추적 시스템
4 4
제 3 항에 있어서, 상기 객체 추적 모듈은,확보된 객체 영역을 다시 10x10 크기의 서브 윈도우(sub windows)로 세분화하여 객체의 정보와 유사한 영역을 확보하여 2차 마스크를 생성하고,2차 마스크를 통해 전경과 객체를 분리한 뒤, 분리된 객체 정보에 특징점을 추출하여 연산량을 줄이는 것을 특징으로 하는 모바일 환경 객체 신뢰도 평가와 학습을 통한 융합 객체 추적 시스템
5 5
제 1 항에 있어서, 상기 학습 모듈에서의 신뢰도 수준을 결정하는 과정에서,객체정보에 대한 신뢰도는 초기화 모듈에서 검출된 객체 정보가 가장 신뢰성 있는 객체 정보로써 Level 0으로 정의하고, 객체를 추적하면서 Level 6까지의 객체 정보에 대한 신뢰도 수준을 정의하는 것을 특징으로 하는 모바일 환경 객체 신뢰도 평가와 학습을 통한 융합 객체 추적 시스템
6 6
제 5 항에 있어서, 객체 추적에 실패하였을 경우 이러한 신뢰도 수준의 객체 정보를 이용하여 객체를 재탐색 하고, 가장 유사한 정보를 가장 신뢰성 있는 Level 0로 정의하여 객체 정보를 재 정렬하는 것을 특징으로 하는 모바일 환경 객체 신뢰도 평가와 학습을 통한 융합 객체 추적 시스템
7 7
삭제
8 8
제 1 항에 있어서, 상기 객체 재탐색 모듈은,객체 추적이 실패하였을 때, 학습 모듈에서 학습된 객체의 정보를 이용하여 예상 객체 위치와 영역을 재탐색하고,현재 객체 정보와 가장 유사한 객체 정보를 기준으로 학습된 객체 정보를 정렬하는 것을 특징으로 하는 모바일 환경 객체 신뢰도 평가와 학습을 통한 융합 객체 추적 시스템
9 9
초기화 모듈에서 추적하고 싶은 객체를 선택하고 정보 초기화를 수행하는 단계;객체 선택이 완료되면, 객체 정보를 추출하는 단계;객체 추적 모듈에서 객체를 추적하기 위해 히스토그램 색상정보만을 이용한 추적과 특징점을 추적하기 위한 방법을 융합하여 객체 추적을 하는 단계;추적된 객체 정보가 계속해서 학습 모듈로 들어가고, 추적이 성공한 것으로 판단되면, 초기화 모듈을 통하여 얻은 표준 객체 정보(Standard object information)와 비교하여 일치 정도를 평가하는 단계;프레임마다 객체정보를 얻어서 Level 1 ~ Level 6까지 구성하여 객체를 추적하여 학습하는 단계;만약 객체 추적이 실패하면 객체 추적 모듈은 정지하고 객체 재탐색 모듈이 동작을 하여 재탐색을 하는 단계;를 포함하고,상기 표준 객체 정보는 추적하고 싶은 객체의 특징점, 색상정보, 모양을 추출한 것이고, 표준 객체 정보는 학습 모듈을 통해 가장 신뢰성 있는 정보 Level 0으로 데이터베이스에 저장되는 것을 특징으로 하는 모바일 환경 객체 신뢰도 평가와 학습을 통한 융합 객체 추적 방법
10 10
삭제
11 11
제 9 항에 있어서, 프레임마다 객체정보를 얻어서 Level 1 ~ Level 6까지 구성하여 객체를 추적하여 학습하는 단계에서,추적된 객체정보가 Level 1이 되고, 계속해서 추적을 하고 정보를 얻고 그 다음 프레임에서 얻는 정보가 Level 1보다 더 신뢰할 수 있는 정보이면 이 정보가 Level 1이 되고 이전의 정보는 Level 2가 되는 것을 특징으로 하는 모바일 환경 객체 신뢰도 평가와 학습을 통한 융합 객체 추적 방법
12 12
제 9 항에 있어서, 초기화 모듈은 인식된 객체의 정보를 업데이트 하고, 객체를 포함한 윈도우 포즈 정보를 업데이트 하기 위해 이전에 성공한 객체의 특징점 정보를 이용하여 현재 검출된 객체의 특징점과 매칭하여 6 자유도를 갖는 포즈 변화량 호모그래피(Homography)를 구하는 것을 특징으로 하는 모바일 환경 객체 신뢰도 평가와 학습을 통한 융합 객체 추적 방법
13 13
제 12 항에 있어서, 호모그래피를 이용하여 객체의 포즈를 업데이트 할 때 ,카메라는 고정되어있고 객체가 움직일 경우와, 객체가 고정되어있고 카메라가 움직이는 경우와, 객체와 카메라 모두 움직이는 경우를 구분하여 객체의 포즈를 정의하는 것을 특징으로 하는 모바일 환경 객체 신뢰도 평가와 학습을 통한 융합 객체 추적 방법
14 14
제 13 항에 있어서, 카메라는 고정되어있고 객체가 움직일 경우 객체만을 포함한 특징점 변화량만을 고려하여 호모그래피를 구하고, 객체를 포함한 윈도우 영역을 업데이트 하여 객체의 포즈를 정의하고,객체가 고정되어있고 카메라가 움직이는 경우, 객체를 포함한 윈도우 전체의 특징점을 제외하고 배경 영상만의 특징점을 고려하여 카메라의 포즈 변화를 계산 한 뒤, 객체가 포함된 윈도우의 위치정보를 업데이트 하여 객체의 포즈를 정의하고,객체와 카메라 모두 움직이는 경우, 객체만을 포함한 특징점의 변화량 만을 고려하여 호모그래피를 구한 후, 객체를 포함한 윈도우에 적용시켜 객체의 포즈를 정의하는 것을 특징으로 하는 모바일 환경 객체 신뢰도 평가와 학습을 통한 융합 객체 추적 방법
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 미래창조과학부 단국대학교 천안캠퍼스 중견연구자지원사업/핵심연구 현재와 과거가 공존하는 증강영상과 타임라인을 활용한 Historical Heritage Time View 기술 개발