맞춤기술찾기

이전대상기술

영상 감시 시스템에서의 실시간 쓰레기 투기 행위 탐지 방법 및 장치

  • 기술번호 : KST2019021175
  • 담당센터 :
  • 전화번호 :
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 영상 감시 시스템에서의 실시간 쓰레기 투기 행위 탐지 방법 및 장치가 제공된다. 입력되는 이미지로부터 움직임이 있는 영역인 변화 영역을 검출하고, 관절들이 있는 영역에 대응하는 관절 좌표를 포함하는 관절 정보를 생성하며, 상기 변화 영역과 상기 관절 정보를 이용하여 상기 이미지로부터 사람이 들고 가는 물체를 검출한다. 그리고 상기 검출된 물체와 상기 관절 좌표 사이의 거리를 토대로, 상기 물체가 투기되는 행위를 검출한다.
Int. CL G06T 7/246 (2017.01.01) G06T 7/269 (2017.01.01)
CPC G06T 7/246(2013.01) G06T 7/246(2013.01) G06T 7/246(2013.01) G06T 7/246(2013.01) G06T 7/246(2013.01)
출원번호/일자 1020180052753 (2018.05.08)
출원인 한국전자통신연구원
등록번호/일자
공개번호/일자 10-2019-0128500 (2019.11.18) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2019.01.10)
심사청구항수 20

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국전자통신연구원 대한민국 대전광역시 유성구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 윤기민 대한민국 대전광역시 유성구
2 권용진 대한민국 대전광역시 유성구
3 문진영 대한민국 대전광역시 유성구
4 오성찬 대한민국 대전광역시 유성구
5 박종열 대한민국 대전광역시 중구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 팬코리아특허법인 대한민국 서울특별시 강남구 논현로**길 **, 역삼***빌딩 (역삼동)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 한국전자통신연구원 대전광역시 유성구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2018.05.08 수리 (Accepted) 1-1-2018-0452118-37
2 [심사청구]심사청구(우선심사신청)서
[Request for Examination] Request for Examination (Request for Preferential Examination)
2019.01.10 수리 (Accepted) 1-1-2019-0034626-61
3 선행기술조사의뢰서
Request for Prior Art Search
2019.07.15 수리 (Accepted) 9-1-9999-9999999-89
4 선행기술조사보고서
Report of Prior Art Search
2019.09.06 수리 (Accepted) 9-1-2019-0042815-80
5 의견제출통지서
Notification of reason for refusal
2020.02.25 발송처리완료 (Completion of Transmission) 9-5-2020-0142987-43
6 [거절이유 등 통지에 따른 의견]의견서·답변서·소명서
2020.04.23 수리 (Accepted) 1-1-2020-0419370-66
7 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2020.04.23 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2020-0419371-12
8 등록결정서
Decision to grant
2020.06.16 발송처리완료 (Completion of Transmission) 9-5-2020-0411998-88
9 [명세서등 보정]보정서(심사관 직권보정)
2020.09.05 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2020-5022808-01
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
탐지 장치가, 입력되는 이미지로부터 쓰레기 투기 행위를 탐지하는 방법으로서, 상기 탐지 장치가, 입력되는 이미지로부터 움직임이 있는 영역인 변화 영역을 검출하는 단계;상기 탐지 장치가, 상기 이미지로부터 관절들이 있는 영역에 대응하는 관절 좌표를 포함하는 관절 정보를 생성하는 단계;상기 탐지 장치가, 상기 관절 정보를 토대로 상기 이미지로부터 관절을 추정하고, 상기 관절 추정 결과를 토대로 상기 이미지로부터 사람을 추적하는 단계;상기 탐지 장치가, 상기 변화 영역과 상기 관절 정보를 이용하여 상기 이미지로부터 상기 추적된 사람이 들고 가는 물체를 검출하는 단계; 및상기 탐지 장치가, 상기 검출된 물체와 상기 관절 좌표 사이의 거리를 토대로, 상기 물체가 투기되는 행위를 검출하는 단계를 포함하는 탐지 방법
2 2
제1항에 있어서,상기 물체가 투기되는 행위를 검출하는 단계는, 모든 관절 좌표와 상기 물체 사이의 각각의 거리의 변화를 토대로 투기 행위의 발생 여부를 결정하는, 탐지 방법
3 3
제1항에 있어서,상기 물체가 투기되는 행위를 검출하는 단계는, 모든 관절 좌표별 투기 행위 검출 결과들 중에서 설정 개수의 투기 행위 검출 결과가 물체가 투기된 것을 나타내는 경우, 투기 행위가 발생한 것으로 결정하는, 탐지 방법
4 4
제3항에 있어서,상기 물체가 투기되는 행위를 검출하는 단계는, 각 관절 좌표별로 물체와의 거리를 측정하는 단계;상기 관절 좌표별로 측정되는 거리를 토대로 거리 관계 변화를 획득하는 단계; 상기 획득된 거리 관계 변화와 미리 설정된 값의 비교 결과를 토대로, 각 관절 좌표별로 투기 행위 검출 결과를 획득하는 단계; 및모든 관절 좌표의 투기 행위 검출 결과들 중에서 설정 개수의 투기 행위 검출 결과가 물체가 투기된 것을 나타내는 경우, 최종적으로 투기 행위의 발생 여부를 결정하는 단계를 포함하는, 탐지 방법
5 5
제4항에 있어서,상기 각 관절 좌표별로 투기 행위 검출 결과를 획득하는 단계는, 상기 획득된 거리 관계 변화가 상기 미리 설정된 값보다 큰 경우 투기 행위가 발생한 것으로 결정하는 단계; 및상기 획득된 거리 관계 변화가 상기 미리 설정된 값보다 같거나 작은 경우 투기 행위가 발생하지 않은 것으로 결정하는 단계를 포함하는, 탐지 방법
6 6
제4항에 있어서,상기 거리 관계 변화는, 임의 관절 좌표에 대하여 현재 측정된 상기 물체와의 거리와 모델링한 거리 사이의 차이값을 나타내며, 상기 모델링한 거리는 상기 임의 관절 좌표와 상기 물체 사이의 거리의 평균을 나타내고, 상기 미리 설정된 값은 상기 임의 관절 좌표와 상기 물체 사이의 거리를 모델링한 표준 편차와 설정값을 토대로 미리 설정되는 값인, 탐지 방법
7 7
제1항에 있어서,상기 물체가 투기되는 행위를 검출하는 단계는, 상기 관절 정보를 토대로 사람의 손의 좌표를 획득하는 단계; 및상기 손의 좌표와 상기 물체 사이의 거리가 설정값 이상으로 멀어지는 경우, 투기 행위가 발생한 것으로 결정하는 단계를 포함하는, 탐지 방법
8 8
제1항에 있어서,상기 물체를 검출하는 단계는, 상기 변화 영역과 상기 관절 정보를 이용하여 상기 추적된 사람의 손 주변에서 변화 영역이 큰 부분을 찾고, 상기 찾아진 부분의 면적이 설정값 이상으로 크고 상기 찾아진 부분이 상기 추적된 사람에 속한 부분이 아닌 것으로 판단되면, 상기 찾아진 부분을 물체로서 검출하는, 탐지 방법
9 9
제1항에 있어서,상기 추적된 사람별로, 상기 물체를 검출하는 단계 및 상기 물체가 투기되는 행위를 검출하는 단계를 수행하는, 탐지 방법
10 10
제1항에 있어서,상기 이미지로부터 사람을 추적하는 단계는, 상기 관절 추정 결과를 토대로 획득되는 머리 위치를 이용하여 상기 이미지로부터 사람을 추적하는, 탐지 방법
11 11
제1항에 있어서,상기 탐지 장치가, 사람의 포즈가 미리 설정된 포즈인 경우에 투기 행위가 발생한 것으로 결정하는 제1 방법 및 투기 발생 가능 영역에 사람이 진입하는 상태를 토대로 투기 행위가 발생한 것으로 하는 제2 방법 중 적어도 하나의 방법을 이용하여, 투기 행위가 발생하는지를 최종 결정하는 단계를 더 포함하는 탐지 방법
12 12
제11항에 있어서,상기 투기 행위가 발생하는지를 최종 결정하는 단계는, 상기 이미지로부터 사람이 들고 가는 물체가 검출되지 않거나, 상기 검출된 물체와 상기 관절 좌표 사이의 거리를 토대로 상기 물체가 투기되는 것으로 검출되지 않은 경우에, 추정되는 사람의 포즈가 상체를 구부리는 포즈에 해당하면, 투기 행위가 발생하는 것으로 최종 결정하는 단계를 포함하는, 탐지 방법
13 13
제11항에 있어서,상기 투기 행위가 발생하는지를 최종 결정하는 단계는, 상기 물체를 검출하는 단계에서 검출된 물체를 들고 가는 사람이 상기 투기 발생 가능 영역에 진입하거나 상기 투기 발생 가능 영역에 진입하여 설정 시간 이상 머무르는 경우에, 투기 행위가 발생하는 것으로 최종 결정하는 단계를 포함하는, 탐지 방법
14 14
제11항에 있어서,상기 제2 방법이 사용되는 경우, 상기 이미지로부터 투기 발생 가능 영역을 검출하는 단계를 더 포함하고, 미리 설정된 쓰레기 특성을 학습시킨 맵을 이용하여 상기 이미지로부터 상기 투기 발생 가능 영역을 검출하는, 탐지 방법
15 15
입력되는 이미지로부터 쓰레기 투기 행위를 탐지하는 장치로서,이미지를 입력받도록 구성된 입출력부; 그리고 상기 입출력부와 연결되고, 상기 이미지로부터 쓰레기 투기 행위를 검출하도록 구성된 프로세서를 포함하며, 상기 프로세서는, 상기 입출력부로부터 전달되는 이미지로부터 움직임이 있는 영역인 변화 영역을 검출하고, 관절들이 있는 영역에 대응하는 관절 좌표를 포함하는 관절 정보를 생성하며, 상기 관절 정보를 토대로 상기 이미지로부터 관절을 추정하고, 상기 관절 추정 결과를 토대로 상기 이미지로부터 사람을 추적하고, 상기 변화 영역과 상기 관절 정보를 이용하여 상기 이미지로부터 상기 추적된 사람이 들고 가는 물체를 검출하고, 상기 검출된 물체와 상기 관절 좌표 사이의 거리를 토대로, 상기 물체가 투기되는 행위를 검출하도록 구성되는, 탐지 장치
16 16
제15항에 있어서,상기 프로세서는 추가로, 모든 관절 좌표와 상기 물체 사이의 각각의 거리를 측정하고, 각 관절별로 측정된 거리를 이용하여 투기 행위를 검출하며, 상기 모든 관절 좌표별 투기 행위 검출 결과들 중에서 설정 개수의 투기 행위 검출 결과가 물체가 투기된 것을 나타내는 경우, 투기 행위가 발생한 것으로 결정하도록 구성되는, 탐지 장치
17 17
제15항에 있어서,상기 프로세서는, 각 관절 좌표별로 획득되는 상기 물체와의 거리를 토대로 하는 거리 관계 변화가 미리 설정된 값보다 큰 경우 투기 행위가 발생한 것으로 결정하고, 상기 획득된 거리 관계 변화가 상기 미리 설정된 값보다 같거나 작은 경우 투기 행위가 발생하지 않은 것으로 결정하도록 구성되며,상기 거리 관계 변화는, 임의 관절 좌표에 대하여 현재 측정된 상기 물체와의 거리와 모델링한 거리 사이의 차이값을 나타내며, 상기 모델링한 거리는 상기 임의 관절 좌표와 상기 물체 사이의 거리의 평균을 나타내고, 상기 미리 설정된 값은 상기 임의 관절 좌표와 상기 물체 사이의 거리를 모델링한 표준 편차와 설정값을 토대로 미리 설정되는 값인, 탐지 장치
18 18
제15항에 있어서,상기 프로세서는, 상기 관절 정보를 토대로 상기 이미지로부터 관절을 추정하고, 상기 관절 추정 결과를 토대로 획득되는 머리 위치를 이용하여 상기 이미지로부터 사람을 추적하도록 구성되며, 상기 추적된 사람별로, 물체를 검출하고 검출된 물체가 투기되는 행위를 검출하는 과정이 개별적으로 수행되는, 탐지 장치
19 19
제15항에 있어서,상기 프로세서가, 상기 검출된 물체와 상기 관절 좌표 사이의 거리를 토대로 상기 물체가 투기되는 행위를 검출하는 것 이외에, 사람의 포즈가 미리 설정된 포즈인 경우에 투기 행위가 발생한 것으로 결정하는 제1 방법 및 투기 발생 가능 영역에 사람이 진입하는 상태를 토대로 투기 행위가 발생한 것으로 하는 제2 방법 중 적어도 하나의 방법을 추가적으로 이용하여, 투기 행위가 발생하는지를 최종 결정하도록 구성되는, 탐지 장치
20 20
제19항에 있어서,상기 프로세서가, 상기 이미지로부터 사람이 들고 가는 물체가 검출되지 않거나, 상기 검출된 물체와 상기 관절 좌표 사이의 거리를 토대로 상기 물체가 투기되는 것으로 검출되지 않은 경우에, 추정되는 사람의 포즈가 상체를 구부리는 포즈에 해당하면, 투기 행위가 발생하는 것으로 최종 결정하도록 구성되거나, 상기 검출된 물체를 들고 가는 사람이 상기 투기 발생 가능 영역에 진입하거나 상기 투기 발생 가능 영역에 진입하여 설정 시간 이상 머무르는 경우에, 투기 행위가 발생하는 것으로 최종 결정하도록 구성되는, 탐지 장치
지정국 정보가 없습니다
순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - 패밀리정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 US20190347486 US 미국 FAMILY

DOCDB 패밀리 정보

순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - DOCDB 패밀리 정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
DOCDB 패밀리 정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 과학기술정보통신부 한국전자통신연구원 국가전략프로젝트사업 (딥뷰-1세부) 실시간 대규모 영상 데이터 이해·예측을 위한 고성능 비주얼 디스커버리 플랫폼 개발