요약 | 본 발명은 행위 인식 장치 및 방법에 관한 것으로, 더욱 상세하게는 대상 검출 및 추적 정보를 이용한 대상의 행위 인식 장치 및 방법에 관한 것이다. 본 발명은 다양한 조명 환경 및 날씨 환경에서 안정적으로 대상의 행위를 인식 할 수 있으며 복잡한 특징을 사용하지 않기 때문에 실시간 행위 인식이 가능하다. |
---|---|
Int. CL | G06K 9/00 (2006.01.01) G06K 9/20 (2006.01.01) |
CPC | G06K 9/00335(2013.01)G06K 9/00335(2013.01)G06K 9/00335(2013.01)G06K 9/00335(2013.01)G06K 9/00335(2013.01) |
출원번호/일자 | 1020160013087 (2016.02.02) |
출원인 | 동국대학교 산학협력단 |
등록번호/일자 | 10-1756916-0000 (2017.07.05) |
공개번호/일자 | |
공고번호/일자 | (20170712) 문서열기 |
국제출원번호/일자 | |
국제공개번호/일자 | |
우선권정보 | |
법적상태 | 등록 |
심사진행상태 | 수리 |
심판사항 | |
구분 | 신규 |
원출원번호/일자 | |
관련 출원번호 | |
심사청구여부/일자 | Y (2016.02.02) |
심사청구항수 | 16 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 동국대학교 산학협력단 | 대한민국 | 서울특별시 중구 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 박강령 | 대한민국 | 서울특별시 강남구 |
2 | 간바야르 | 몽고 | 대전광역시 서구 |
3 | 울럭벡 | 우즈베키스탄 | 대전광역시 서구 |
4 | 이지훈 | 대한민국 | 경기도 부천시 소사구 |
5 | 전은솜 | 대한민국 | 서울특별시 노원구 |
6 | 김종현 | 대한민국 | 서울특별시 중구 |
7 | 김영곤 | 대한민국 | 경기도 안산시 상록구 |
8 | 최종석 | 대한민국 | 서울특별시 강동구 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 특허법인이지 | 대한민국 | 서울특별시 금천구 가산디지털*로 ***(가산동, KCC웰츠밸리) ***-*** |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 동국대학교 산학협력단 | 서울특별시 중구 |
번호 | 서류명 | 접수/발송일자 | 처리상태 | 접수/발송번호 |
---|---|---|---|---|
1 | [특허출원]특허출원서 [Patent Application] Patent Application |
2016.02.02 | 수리 (Accepted) | 1-1-2016-0113594-60 |
2 | 선행기술조사의뢰서 Request for Prior Art Search |
2016.11.10 | 수리 (Accepted) | 9-1-9999-9999999-89 |
3 | 선행기술조사보고서 Report of Prior Art Search |
2017.01.10 | 수리 (Accepted) | 9-1-2017-0001582-62 |
4 | 의견제출통지서 Notification of reason for refusal |
2017.01.11 | 발송처리완료 (Completion of Transmission) | 9-5-2017-0027240-54 |
5 | [명세서등 보정]보정서 [Amendment to Description, etc.] Amendment |
2017.03.13 | 보정승인간주 (Regarded as an acceptance of amendment) | 1-1-2017-0247607-64 |
6 | [거절이유 등 통지에 따른 의견]의견(답변, 소명)서 [Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation) |
2017.03.13 | 수리 (Accepted) | 1-1-2017-0247558-14 |
7 | 등록결정서 Decision to grant |
2017.07.03 | 발송처리완료 (Completion of Transmission) | 9-5-2017-0465653-58 |
8 | 출원인정보변경(경정)신고서 Notification of change of applicant's information |
2019.08.16 | 수리 (Accepted) | 4-1-2019-5163486-33 |
번호 | 청구항 |
---|---|
1 |
1 행위 인식 장치에 있어서,가시광선 배경 영상을 생성하고, 가시광선 배경 영상과 입력된 가시광선 영상의 차영상을 이용하여 가시광선 대상 후보 영역을 검출하는 가시광선 대상 영역 검출부;열화상 배경 영상을 생성하고, 생성한 열화상 배경영상과 입력된 열화상 영상의 차 영상을 이용하여 열화상 대상 후보영역을 검출하는 열화상 대상 영역 검출부;검출한 가시광선 대상 영역 및 열화상 대상 영역을 결합하여 결합 대상 영역 정보를 생성하는 대상 영역 결합부;결합 대상 영역 정보를 바탕으로 대상을 추적하여 대상 추적 정보를 생성하는 대상 추적부; 대상 추적 정보를 이용하여 대상의 행위를 인식하는 대상 행위 인식부; 및복수의 대상들에 대한 대상 행위 인식 결과가 있을 때 복수의 대상 간의 상호간 행위의 유무를 판단하는 대상 상호 행위 인식부를 포함하되,상기 대상 상호 행위 인식부는 복수의 대상 행위 인식 결과 중 걷기나 뛰기가 있는 경우 대상의 행위가 상호간의 행위가 있었다고 판단하고, 복수의 대상 사이의 거리 변화 정보가 미리 정의된 거리 변화 임계치보다 큰 경우 상호간의 행위를 멀어지기로 판단하고, 작은 경우 접근하기로 판단하는 행위 인식 장치 |
2 |
2 삭제 |
3 |
3 삭제 |
4 |
4 행위 인식 장치에 있어서,가시광선 배경 영상을 생성하고, 가시광선 배경 영상과 입력된 가시광선 영상의 차영상을 이용하여 가시광선 대상 후보 영역을 검출하는 가시광선 대상 영역 검출부;열화상 배경 영상을 생성하고, 생성한 열화상 배경영상과 입력된 열화상 영상의 차 영상을 이용하여 열화상 대상 후보영역을 검출하는 열화상 대상 영역 검출부;검출한 가시광선 대상 영역 및 열화상 대상 영역을 결합하여 결합 대상 영역 정보를 생성하는 대상 영역 결합부;결합 대상 영역 정보를 바탕으로 대상을 추적하여 대상 추적 정보를 생성하는 대상 추적부; 및 대상 추적 정보를 이용하여 대상의 행위를 인식하는 대상 행위 인식부를 포함하되,상기 대상 행위 인식부는입력되는 대상 영역의 가로 길이 정보 및 세로 길이 정보를 생성하는 가로세로정보 생성부;입력되는 N(여기서, N은 자연수)개의 대상 영역의 누적 가로크기 변화 정보를 이용하여 손 흔들기, 발차기, 주먹 찌르기, 뛰기 및 걷기 중 어느 하나의 행위를 인식하는 가로크기 변화 비교부; 및 입력된 N개의 대상 영역 정보 중 X축 방향의 중심점 속도를 바탕으로 뛰기를 인식하거나 중심점 Y축 좌표 위치의 변화 정보를 누적하여 걷기나 뛰기 중의 어느 하나의 행위로 판단하는 중심점 위치 변화 비교부를 포함하는 행위 인식 장치 |
5 |
5 삭제 |
6 |
6 제4항에 있어서,상기 대상 행위 인식부는입력된 N개의 대상 영역 정보 중 가로길이 대 세로길이 비율의 평균값을 이용하여 뛰기, 서기 및 앉기 중 어느 하나로 인식하는 가로세로비율 비교부를 더 포함하는 행위 인식 장치 |
7 |
7 제4항에 있어서,상기 대상 행위 인식부는입력된 대상 영상에서 손 또는 발 위치를 결정하고, 입력된 N개의 대상 영상들 중 일부 영상들에서 발의 X축 좌표 위치를 이용하여 발차기를 인식하거나 손의 X축 좌표 위치 변화 정보를 계산하여 손 흔들기를 인식하는 손발 위치 비교부를 더 포함하는 행위 인식 장치 |
8 |
8 행위 인식 방법에 있어서,가시광선 배경 영상을 생성하고, 가시광선 배경 영상과 입력된 가시광선 영상의 차영상을 이용하여 가시광선 대상 후보 영역을 검출하는 단계;열화상 배경 영상을 생성하고, 생성한 열화상 배경영상과 입력된 열화상 영상의 차 영상을 이용하여 열화상 대상 후보영역을 검출하는 단계;검출한 가시광선 대상 영역 및 열화상 대상 영역을 결합하여 결합 대상 영역 정보를 생성하는 단계;결합 대상 영역 정보를 바탕으로 대상을 추적하여 대상 추적 정보를 생성하는 단계; 및대상 추적 정보를 이용하여 대상의 행위를 인식하는 단계를 포함하되,상기 대상 추적 정보를 이용하여 대상의 행위를 인식하는 단계는 추적한 대상 영상 및 대상 영역 정보가 적어도 N개(여기서, N은 자연수) 누적하는 단계;상기 대상 영역 정보 중 가로 크기 변화 정보를 미리 정해진 가로 크기 변화 임계치를 비교하는 단계; 및상기 가로 크기 변화 정보가 상기 가로 크기 변화 임계치보다 작고 상기 대상 영역 정보 중 중심점 X축 좌표 위치 변화 정보가 미리 정의된 중심점 X축 좌표 위치 변화 임계치보다 큰 경우 대상의 행위를 뛰기로 인식하는 단계를 더 포함하는 행위 인식 방법 |
9 |
9 제8항에 있어서,상기 가시광선 배경 영상을 생성하고, 가시광선 배경 영상과 입력된 가시광선 영상의 차영상을 이용하여 가시광선 대상 후보 영역을 검출하는 단계는 입력 영상 들간의 차분 영상을 이용하거나 배경 영상과 입력 영상과의 차 영상을 이용하거나 GMM(Gaussian Mixture Models)이나 MOG(Model of Gaussian)의 배경 모델링을 통해 가시광선 대상 영역을 검출하는 행위 인식 방법 |
10 |
10 제8항에 있어서,상기 검출한 가시광선 대상 영역 및 열화상 대상 영역을 결합하여 결합 대상 영역 정보를 생성하는 단계는입력된 영상의 입력 시간이나 각 영상의 품질을 확인하여 각 영상에서 검출된 대상 영역을 선택적으로 활용하거나 가중치를 다르게 하여 가시광선 대상 영역 및 열화상 대상 영역을 결합하는 행위 인식 방법 |
11 |
11 삭제 |
12 |
12 제8항에 있어서,상기 중심점 X축 좌표 위치 변화 정보가 미리 정의된 중심점 X축 좌표 위치 변화 임계치보다 크지 않고 대상 영역 정보 중 가로길이 대 세로길이 비율의 평균값이 미리 정의된 제1 가로 세로 비율 임계치보다 작은 경우 대상의 행위를 걷기로 인식하는 단계를 더 포함하는 행위 인식 방법 |
13 |
13 제8항에 있어서,상기 입력된 N개의 대상 영역 정보 중 가로 크기 변화 정보가 미리 정해진 가로 크기 변화 임계치보다 크지 않고, 중심점 Y축 좌표 위치의 변화 정보가 중심점 Y축 좌표 위치 변화 임계치보다 큰 경우 대상의 행위를 걷기나 뛰기 중의 하나의 행위로 인식하는 단계를 더 포함하는 행위 인식 방법 |
14 |
14 제13항에 있어서,상기 입력된 N개의 대상 영역 정보 중 중심점 Y의 속도가 중심점 Y 속도 변화 임계치 보다 크지 않은 경우는 대상의 행위를 걷기로 인식하는 단계를 더 포함하는 행위 인식 방법 |
15 |
15 제14 항에 있어서,입력된 N개의 대상 영역 정보 중 중심점 Y축 좌표 위치의 변화 정보가 중심점 Y축 좌표 위치 변화 임계치보다 크지 않고 가로길이 대 세로길이 비율의 평균값이 미리 정의된 제2 가로 세로 비율 임계치보다 작은 경우 대상의 행위를 서기로 인식하는 단계를 더 포함하는 행위 인식 방법 |
16 |
16 행위 인식 방법에 있어서,가시광선 배경 영상을 생성하고, 가시광선 배경 영상과 입력된 가시광선 영상의 차영상을 이용하여 가시광선 대상 후보 영역을 검출하는 단계;열화상 배경 영상을 생성하고, 생성한 열화상 배경영상과 입력된 열화상 영상의 차 영상을 이용하여 열화상 대상 후보영역을 검출하는 단계;검출한 가시광선 대상 영역 및 열화상 대상 영역을 결합하여 결합 대상 영역 정보를 생성하는 단계;결합 대상 영역 정보를 바탕으로 대상을 추적하여 대상 추적 정보를 생성하는 단계; 및대상 추적 정보를 이용하여 대상의 행위를 인식하는 단계를 포함하되,상기 대상 추적 정보를 이용하여 대상의 행위를 인식하는 단계는대상 영상 정보에서 손 또는 발 위치를 결정하는 단계; 및 추적한 대상 영상에서 발의 X축 좌표 위치가 미리 정의된 발 X축 좌표 위치 임계치보다 큰 경우 대상의 행위를 발차기로 인식하는 단계를 포함하는 행위 인식 방법 |
17 |
17 제16항에 있어서,발의 X축 좌표 위치가 미리 정의된 발 X축 좌표 위치 임계치보다 크지 않고 영상들에서 손의 X축 좌표 및 Y축 좌표 위치 변화 정보가 미리 정해진 손 X축 좌표 위치 변화 임계치와 손 Y축 좌표 위치 변화 임계치보다 큰 경우 대상의 행위를 손 흔들기로 인식하는 단계를 더 포함하는 행위 인식 방법 |
18 |
18 제17 항에 있어서,상기 손의 X축 좌표 및 Y축 좌표 위치 변화 정보가 미리 정해진 손 X축 좌표 위치 변화 임계치와 손 Y축 좌표 위치 변화 임계치보다 크지 않고 손의 X축 좌표 위치의 누적 변화 정보가 미리 정해진 제2 손 X축 좌표 위치 변화 임계치보다 큰 경우 대상의 행위를 주먹 찌르기로 인식하는 단계를 더 포함하는 행위 인식 방법 |
19 |
19 행위 인식 방법에 있어서,가시광선 배경 영상을 생성하고, 가시광선 배경 영상과 입력된 가시광선 영상의 차영상을 이용하여 가시광선 대상 후보 영역을 검출하는 단계;열화상 배경 영상을 생성하고, 생성한 열화상 배경영상과 입력된 열화상 영상의 차 영상을 이용하여 열화상 대상 후보영역을 검출하는 단계;검출한 가시광선 대상 영역 및 열화상 대상 영역을 결합하여 결합 대상 영역 정보를 생성하는 단계;결합 대상 영역 정보를 바탕으로 대상을 추적하여 대상 추적 정보를 생성하는 단계; 및대상 추적 정보를 이용하여 대상의 행위를 인식하는 단계를 포함하되,상기 대상 추적 정보를 이용하여 대상의 행위를 인식하는 단계는두 대상에 대한 단일 대상 행위 인식 결과가 걷기나 뛰기가 있고, 입력된 N개의 대상 영역 정보 중 두 대상 사이의 거리 변화 정보가 미리 정의된 거리 변화 임계치보다 큰 경우 상호간의 행위를 멀어지기로 대상의 행위를 인식하는 단계; 및입력된 N개의 대상 영역 정보 중 두 대상 사이의 거리 변화 정보가 미리 정의된 거리 변화 임계치보다 작은 경우 접근하기로 대상의 행위를 인식하는 단계를 포함하는 행위 인식 방법 |
20 |
20 제8항 내지 제10항, 제12항 내지 제19항 중 어느 한 항의 행위 인식 방법을 실행하기 위하여 컴퓨터가 판독 가능한 기록매체에 기록한 컴퓨터 프로그램 |
지정국 정보가 없습니다 |
---|
패밀리정보가 없습니다 |
---|
순번 | 연구부처 | 주관기관 | 연구사업 | 연구과제 |
---|---|---|---|---|
1 | 미래창조과학부 | 전자부품연구원 | sw컴퓨팅산업원천기술개발 | 범죄 발생환경, 행동패턴 및 심리정보등 융합정보 적용형 엔트로피 필터링 예측분석기반의 실시간 범죄 예측·예방 시스템 개발 |
공개전문 정보가 없습니다 |
---|
특허 등록번호 | 10-1756916-0000 |
---|
표시번호 | 사항 |
---|---|
1 |
출원 연월일 : 20160202 출원 번호 : 1020160013087 공고 연월일 : 20170712 공고 번호 : 특허결정(심결)연월일 : 20170703 청구범위의 항수 : 16 유별 : G06K 9/00 발명의 명칭 : 행위 인식 장치 및 방법 존속기간(예정)만료일 : |
순위번호 | 사항 |
---|---|
1 |
(권리자) 동국대학교 산학협력단 서울특별시 중구... |
제 1 - 3 년분 | 금 액 | 334,500 원 | 2017년 07월 06일 | 납입 |
제 4 년분 | 금 액 | 196,000 원 | 2020년 06월 29일 | 납입 |
번호 | 서류명 | 접수/발송일자 | 처리상태 | 접수/발송번호 |
---|---|---|---|---|
1 | [특허출원]특허출원서 | 2016.02.02 | 수리 (Accepted) | 1-1-2016-0113594-60 |
2 | 선행기술조사의뢰서 | 2016.11.10 | 수리 (Accepted) | 9-1-9999-9999999-89 |
3 | 선행기술조사보고서 | 2017.01.10 | 수리 (Accepted) | 9-1-2017-0001582-62 |
4 | 의견제출통지서 | 2017.01.11 | 발송처리완료 (Completion of Transmission) | 9-5-2017-0027240-54 |
5 | [명세서등 보정]보정서 | 2017.03.13 | 보정승인간주 (Regarded as an acceptance of amendment) | 1-1-2017-0247607-64 |
6 | [거절이유 등 통지에 따른 의견]의견(답변, 소명)서 | 2017.03.13 | 수리 (Accepted) | 1-1-2017-0247558-14 |
7 | 등록결정서 | 2017.07.03 | 발송처리완료 (Completion of Transmission) | 9-5-2017-0465653-58 |
8 | 출원인정보변경(경정)신고서 | 2019.08.16 | 수리 (Accepted) | 4-1-2019-5163486-33 |
기술정보가 없습니다 |
---|
과제고유번호 | 1711029774 |
---|---|
세부과제번호 | R0101-15-0190 |
연구과제명 | 범죄 발생환경, 행동패턴 및 심리정보등 융합정보 적용형 엔트로피 필터링 예측분석기반의 실시간 범죄 예측·예방 시스템 개발 |
성과구분 | 출원 |
부처명 | 미래창조과학부 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2015 |
연구기간 | 201309~201608 |
기여율 | 1 |
연구개발단계명 | 응용연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1711029774 |
---|---|
세부과제번호 | R0101-15-0190 |
연구과제명 | 범죄 발생환경, 행동패턴 및 심리정보등 융합정보 적용형 엔트로피 필터링 예측분석기반의 실시간 범죄 예측·예방 시스템 개발 |
성과구분 | 등록 |
부처명 | 미래창조과학부 |
연구관리전문기관명 | |
연구주관기관명 | |
성과제출연도 | 2015 |
연구기간 | 201309~201608 |
기여율 | 1 |
연구개발단계명 | 응용연구 |
6T분류명 | IT(정보기술) |
[1020160013095] | 시선 추적 장치 및 방법 | 새창보기 |
---|---|---|
[1020160013087] | 행위 인식 장치 및 방법 | 새창보기 |
[1020150115593] | 위성 사진을 이용한 CCTV 화면에서의 거리 측정 방법 | 새창보기 |
[KST2015188579][동국대학교] | 영상 인식 기반의 주차장의 빈 주차면 인식 장치 및 방법 | 새창보기 |
---|---|---|
[KST2015188654][동국대학교] | 발자국 에너지 이미지를 이용한 사용자 인식방법 및 그 장치 | 새창보기 |
[KST2017015027][동국대학교] | 다방향 인식을 이용한 태권도 동작 평가 장치 및 방법(Apparatus and method for evaluating Taekwondo motion using multi-directional recognition) | 새창보기 |
[KST2018012446][동국대학교] | 환자 참여형 실시간 전자의무기록 방법 및 시스템 | 새창보기 |
[KST2020010651][동국대학교] | 딥러닝 기반 얼굴 인식 출석체크 시스템 | 새창보기 |
[KST2019031874][동국대학교] | 도로 표지 인식 장치 및 방법 | 새창보기 |
[KST2018016172][동국대학교] | CNN 기반 지정맥 인식 장치 및 인식 방법 | 새창보기 |
[KST2019016828][동국대학교] | 드론의 제어 신호 생성 방법 및 제어 장치 | 새창보기 |
[KST2020010644][동국대학교] | 태그 클라우드 생성 장치 및 방법 | 새창보기 |
[KST2019031869][동국대학교] | 행위 인식 장치 및 방법 | 새창보기 |
[KST2019031881][동국대학교] | 성별 인식 장치 및 방법 | 새창보기 |
[KST2015188169][동국대학교] | 지문 및 정맥 정보 검출 장치 | 새창보기 |
[KST2015231050][동국대학교] | 얼굴 인식 장치 및 방법(DEVICE AND METHOD FOR FACE RECOGNITION) | 새창보기 |
[KST2019018488][동국대학교] | 디지털 영상 이미지를 이용한 위급상황 분석장치 및 방법 | 새창보기 |
[KST2020010658][동국대학교] | 얼굴 인식 기반 가상 피팅 시스템 | 새창보기 |
[KST2019031836][동국대학교] | 시선 추적 장치 및 방법 | 새창보기 |
[KST2015188525][동국대학교] | 인터페이스 시스템 및 방법 | 새창보기 |
[KST2016017878][동국대학교] | 얼굴 영상 기반 성별 인식 방법 및 장치(METHOD AND COMPUTING DEVICE FOR GENDER RECOGNITION BASED ON FACIAL IMAGE) | 새창보기 |
[KST2019017179][동국대학교] | 딥 러닝 기반의 차량 운전자 시선 추적 장치 및 방법 | 새창보기 |
[KST2015188592][동국대학교] | 대화형 로봇 장치 및 그 제어방법 | 새창보기 |
[KST2019019648][동국대학교] | 보행자 검출 장치 및 방법 | 새창보기 |
[KST2019031862][동국대학교] | 홍채인식을 위한 단일 비트 CMOS 이미지센서 | 새창보기 |
[KST2015188355][동국대학교] | 신원 인식 장치 및 방법 | 새창보기 |
[KST2016016912][동국대학교] | 나이 추정 장치 및 방법(DEVICE AND METHOD FOR HUMAN AGE ESTIMATION) | 새창보기 |
[KST2016017879][동국대학교] | 원거리 가시광선 영상과 열 영상에 기반한 성별 인식 방법 및 장치(METHOD AND COMPUTING DEVICE FOR GENDER RECOGNITION BASED ON LONG DISTANCE VISIBLE LIGHT IMAGE AND THERMAL IMAGE) | 새창보기 |
[KST2020010682][동국대학교] | 사람 재식별 장치 및 방법 | 새창보기 |
[KST2014029176][동국대학교] | 지정맥 인식을 이용한 바이오 인식 방법 | 새창보기 |
[KST2019031892][동국대학교] | 나선 신경망 기법을 이용한 보행자 인식 장치 및 방법 | 새창보기 |
[KST2016016609][동국대학교] | 눈 개폐 분류 장치 및 방법(DEVICE AND METHOD FOR CLASSIFYING OPEN AND CLOSE EYES) | 새창보기 |
[KST2019031854][동국대학교] | NUI/NUX에 기반하여 드로잉 영상을 처리하는 장치 및 방법 | 새창보기 |
심판사항 정보가 없습니다 |
---|