맞춤기술찾기

이전대상기술

CCTV 환경에서의 보행자 추적 장치 및 방법

  • 기술번호 : KST2022011144
  • 담당센터 : 서울서부기술혁신센터
  • 전화번호 : 02-6124-6930
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 기지정된 방식에 따라 인가된 입력 영상의 다수의 프레임 각각에서 보행자가 포함된 영역을 추출하여 패치를 획득하는 보행자 검출부, 미리 학습된 인공 신경망으로 구현되어, 학습된 방식에 따라 패치의 특징을 추출하여 패치 특징맵을 획득하는 특징 추출 네트워크 및 다수 프레임의 영상 중 서로 다른 프레임 영상에서 획득된 패치 특징맵을 서로 비교하여 대응하는 패치 특징맵을 탐색하여 보행자를 추적하는 추적부를 포함하고, 특징 추출 네트워크는 학습 시에 보행자의 포함 여부에 무관하게 획득된 학습 영상에 식별자가 부여된 학습 데이터를 인가받아 학습 데이터의 다수의 프레임의 특징을 추출하여 학습 특징맵을 획득하고, 별도로 구비된 학습부가 학습 특징맵을 분류하여 계산되는 손실을 역전파하여 학습되어, 학습 데이터로 보행자들에 대해 미리 레이블된 대량의 패치를 필요로 하지 않는 보행자 추적 장치 및 방법을 제공할 수 있다.
Int. CL G06T 7/246 (2017.01.01) G06K 9/00 (2022.01.01) G06T 7/11 (2017.01.01) H04N 7/18 (2006.01.01) G06T 7/292 (2017.01.01) G06N 3/08 (2006.01.01)
CPC G06T 7/246(2013.01) G06V 40/10(2013.01) G06T 7/11(2013.01) H04N 7/181(2013.01) G06T 7/292(2013.01) G06N 3/08(2013.01) G06T 2207/20081(2013.01) G06T 2207/20084(2013.01) G06T 2210/12(2013.01)
출원번호/일자 1020200155092 (2020.11.19)
출원인 연세대학교 산학협력단
등록번호/일자
공개번호/일자 10-2022-0068373 (2022.05.26) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 공개
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2020.11.19)
심사청구항수 13

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 연세대학교 산학협력단 대한민국 서울특별시 서대문구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 이상윤 서울특별시 서초구
2 정태영 서울특별시 서대문구
3 조명아 경기도 성남시 분당구
4 조수환 서울특별시 양천구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 민영준 대한민국 서울특별시 강남구 남부순환로 ****, *층(도곡동, 차우빌딩)(맥스국제특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2020.11.19 수리 (Accepted) 1-1-2020-1240899-87
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
기지정된 방식에 따라 인가된 입력 영상의 다수의 프레임 각각에서 보행자가 포함된 영역을 추출하여 패치를 획득하는 보행자 검출부; 미리 학습된 인공 신경망으로 구현되어, 학습된 방식에 따라 상기 패치의 특징을 추출하여 패치 특징맵을 획득하는 특징 추출 네트워크; 및 다수 프레임의 영상 중 서로 다른 프레임 영상에서 획득된 패치 특징맵을 서로 비교하여 대응하는 패치 특징맵을 탐색하여 보행자를 추적하는 추적부를 포함하고, 상기 특징 추출 네트워크는 학습 시에 보행자의 포함 여부에 무관하게 획득된 학습 영상에 식별자가 부여된 학습 데이터를 인가받아 상기 학습 데이터의 다수의 프레임의 특징을 추출하여 학습 특징맵을 획득하고, 별도로 구비된 학습부가 상기 학습 특징맵을 분류하여 계산되는 손실을 역전파하여 학습되는 보행자 추적 장치
2 2
제1항에 있어서, 상기 학습 데이터는 다수의 카메라에서 획득된 다수의 영상 각각에서 기지정된 시간 길이의 연속되는 프레임을 추출하여 획득되는 상기 학습 영상에 상기 식별자를 부여하여 획득되는 보행자 추적 장치
3 3
제2항에 있어서, 상기 학습 영상은 카메라의 회전 또는 이동 등의 변화 없이 고정된 위치를 촬영하여 획득된 영상인 보행자 추적 장치
4 4
제3항에 있어서, 상기 학습부는 학습 시에 상기 특징 추출 네트워크와 함께 학습이 수행되어, 학습되는 방식에 따라 상기 특징 추출 네트워크에서 획득된 상기 학습 특징맵을 분류하는 영상 분류부; 및 상기 학습 특징맵의 분류 결과와 상기 학습 데이터에 부여된 식별자를 비교하여 기지정된 방식으로 손실을 계산하고, 계산된 손실을 역전파하여 상기 특징 추출 네트워크와 상기 영상 분류부를 학습시키는 손실 역전파부를 포함하는 보행자 추적 장치
5 5
제1항에 있어서, 상기 보행자 검출부는 미리 학습된 방식에 따라 상기 입력 영상의 각 프레임에서 보행자가 포함된 영역을 추정하여, 보행자가 포함된 영역을 나타내는 경계 박스의 위치 및 크기를 설정하는 경계 박스 설정부; 및 상기 입력 영상에서 설정된 경계 박스에 대응하는 영역을 추출하여 상기 패치를 획득하는 패치 획득부를 포함하는 보행자 추적 장치
6 6
제1항에 있어서, 상기 추적부는 기지정된 기간 동안의 다수의 프레임 각각에 대응하는 패치 특징맵이 인가되면, 인가된 패치 특징맵을 저장하고, 현재 인가된 패치 특징 맵과 저장된 패치 특징맵들 사이의 유사도를 분석하여, 동일 보행자에 대한 패치 특징맵들을 판별하여 매칭시키고, 매칭된 패치 특징맵들의 각 프레임에서의 위치를 확인하여 보행자를 추적하는 보행자 추적 장치
7 7
보행자 검출부, 특징 추출 네트워크 및 추적부를 포함하는 보행자 추적 장치의 보행자 추적 방법에 있어서, 학습 시에 인공 신경망으로 구현되는 상기 특징 추출 네트워크가 보행자의 포함 여부에 무관하게 획득된 학습 영상에 식별자가 부여된 학습 데이터를 인가받아 상기 학습 데이터의 다수의 프레임의 특징을 추출하여 학습 특징맵을 획득하면, 획득된 상기 학습 특징맵을 분류하여 계산되는 손실을 역전파하여 상기 특징 추출 네트워크를 학습시키는 단계; 상기 특징 추출 네트워크에 대한 학습이 종료된 이후, 상기 보행자 검출부가 기지정된 방식에 따라 인가된 입력 영상의 다수의 프레임 각각에서 보행자가 포함된 영역을 추출하여 패치를 획득하는 단계; 상기 특징 추출 네트워크가 학습된 방식에 따라 상기 패치의 특징을 추출하여 패치 특징맵을 획득하는 단계; 및 상기 추적부가 다수 프레임의 영상 중 서로 다른 프레임 영상에서 획득된 패치 특징맵을 서로 비교하여 대응하는 패치 특징맵을 탐색하여 보행자를 추적하는 단계를 포함하는 보행자 추적 방법
8 8
제7항에 있어서, 상기 학습 데이터는 다수의 카메라에서 획득된 다수의 영상 각각에서 기지정된 시간 길이의 연속되는 프레임을 추출하여 획득되는 상기 학습 영상에 상기 식별자를 부여하여 획득되는 보행자 추적 방법
9 9
제8항에 있어서, 상기 학습 영상은 카메라의 회전 또는 이동 등의 변화 없이 고정된 위치를 촬영하여 획득된 영상인 보행자 추적 방법
10 10
제9항에 있어서, 상기 학습시키는 단계는 학습 시에 상기 특징 추출 네트워크와 함께 학습이 수행되는 인공 신경망을 이용하여, 학습되는 방식에 따라 상기 특징 추출 네트워크에서 획득된 상기 학습 특징맵을 분류하는 단계; 및 상기 학습 특징맵의 분류 결과와 상기 학습 데이터에 부여된 식별자를 비교하여 기지정된 방식으로 손실을 계산하고, 계산된 손실을 역전파하는 단계를 포함하는 보행자 추적 방법
11 11
제7항에 있어서, 상기 패치를 획득하는 단계는 미리 학습된 방식에 따라 상기 입력 영상의 각 프레임에서 보행자가 포함된 영역을 추정하는 단계; 추정된 보행자가 포함된 영역을 나타내는 경계 박스의 위치 및 크기를 설정하는 단계; 및 상기 입력 영상에서 설정된 경계 박스에 대응하는 영역을 추출하여 상기 패치를 획득하는 단계를 포함하는 보행자 추적 방법
12 12
제11항에 있어서, 상기 보행자를 추적하는 단계는 기지정된 기간 동안의 다수의 프레임 각각에 대응하는 패치 특징맵이 인가되면, 인가된 패치 특징맵을 저장하는 단계; 현재 인가된 패치 특징 맵과 저장된 패치 특징맵들 사이의 유사도를 분석하여, 동일 보행자에 대한 패치 특징맵들을 판별하여 매칭시키는 단계; 및 매칭된 패치 특징맵들의 각 프레임에서의 위치를 확인하여 보행자를 추적하는 단계를 포함하는 보행자 추적 방법
13 13
제7항 내지 제12항 중 어느 한 항에 따른 보행자 추적 방법을 실행하기 위한 프로그램 명령어가 기록된 기록 매체
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 과학기술정보통신부 연세대학교 산학협력단 복합인지기술개발사업 이종 CCTV 영상에서의 딥러닝 기반 실종자 초동 신원확인 및 추적 시스템 (2단계)(1/3)