맞춤기술찾기

이전대상기술

딥러닝 모델을 이용한 낙상 상황 검출 방법 및 장치

  • 기술번호 : KST2022014201
  • 담당센터 : 부산기술혁신센터
  • 전화번호 : 051-606-6561
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 딥러닝 모델을 이용한 낙상 상황 검출방법 및 장치를 제공한다. 본 발명의 딥러닝 모델을 이용한 낙상 상황 검출방법은, 깊이 영상으로부터 사람의 신체 영역에 대한 복수의 관절 부위를 검출하는 단계; 상기 검출된 관절 부위들 각각에 대해 신체 영역의 중심을 기준으로 좌우 대칭인 한쌍의 점좌표를 획득하는 단계; 상기 검출된 관절 부위들 중 적어도 2개 이상의 쌍에 대한 점좌표를 이용하여 신체 영역의 중심선을 검출하는 단계; 상기 중심선과 사람이 서있는 지면에 평행한 수평기준라인 사이의 각도를 계산하는 단계; 상기 깊이 영상을 구성하는 복수의 이미지 프레임들에 대해 중심선과 수평기준라인 사이의 각도들을 계산하여 각도 변화량을 계산하는 단계; 상기 중심선과 수평기준라인의 각도가 미리 설정된 임계 각도 이하인지를 판단하는 단계; 상기 중심선과 수평기준라인의 각도가 임계 각도 이하인 경우, 복수의 이미지 프레임들로부터 획득한 각도 변화량이 미리 설정된 임계 각도변화량보다 큰지를 판단하는 단계; 상기 각도 변화량이 임계 각도변화량보다 큰 경우에는 사람에게 낙상 상황이 발생한 것으로 판단하는 단계를 포함할 수 있다.
Int. CL G06K 9/00 (2022.01.01) G08B 21/04 (2006.01.01) G06T 7/70 (2017.01.01) G06T 7/50 (2017.01.01)
CPC G06V 40/10(2013.01) G08B 21/0446(2013.01) G06T 7/60(2013.01) G06T 7/70(2013.01) G06T 7/50(2013.01) G06V 2201/033(2013.01)
출원번호/일자 1020210009665 (2021.01.22)
출원인 동의대학교 산학협력단
등록번호/일자
공개번호/일자 10-2022-0106580 (2022.07.29) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 공개
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2021.01.22)
심사청구항수 12

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 동의대학교 산학협력단 대한민국 부산광역시 부산진구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 권순각 부산광역시 부산진구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 이정훈 대한민국 서울특별시 강남구 학동로**길 **(논현동) 하나빌딩 *층(특허법률사무소리플러스)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2021.01.22 수리 (Accepted) 1-1-2021-0090095-77
2 보정요구서
Request for Amendment
2021.01.23 발송처리완료 (Completion of Transmission) 1-5-2021-0014115-25
3 [출원서 등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2021.01.25 수리 (Accepted) 1-1-2021-0098448-77
4 [출원서 등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2021.04.07 수리 (Accepted) 1-1-2021-0407818-27
5 선행기술조사의뢰서
Request for Prior Art Search
2022.03.15 수리 (Accepted) 9-1-9999-9999999-89
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
깊이 영상으로부터 사람의 신체 영역에 대한 복수의 관절 부위를 검출하는 단계;상기 검출된 관절 부위들 각각에 대해 신체 영역의 중심을 기준으로 좌우 대칭인 한쌍의 점좌표를 획득하는 단계;상기 검출된 관절 부위들 중 적어도 2개 이상의 쌍에 대한 점좌표를 이용하여 신체 영역의 중심선을 검출하는 단계;상기 중심선과 사람이 서있는 지면에 평행한 수평기준라인 사이의 각도를 계산하는 단계;상기 깊이 영상을 구성하는 복수의 이미지 프레임들에 대해 중심선과 수평기준라인 사이의 각도들을 계산하여 각도 변화량을 계산하는 단계;상기 중심선과 수평기준라인의 각도가 미리 설정된 임계 각도 이하인지를 판단하는 단계;상기 중심선과 수평기준라인의 각도가 임계 각도 이하인 경우, 복수의 이미지 프레임들로부터 획득한 각도 변화량이 미리 설정된 임계 각도변화량보다 큰지를 판단하는 단계; 및상기 각도 변화량이 임계 각도변화량보다 큰 경우에는 사람에게 낙상 상황이 발생한 것으로 판단하는 단계를 포함하는딥러닝 모델을 이용한 낙상 상황 검출방법
2 2
제1항에 있어서,상기 복수의 이미지 프레임들은 상기 중심선과 수평기준라인 사이의 각도가 임계 각도 이하인 영역인 이미지 프레임을 기준으로 전후 복수의 이미지 프레임들인딥러닝 모델을 이용한 낙상 상황 검출방법
3 3
제1항에 있어서,상기 신체 영역의 중심을 기준으로 좌우 대칭인 한쌍의 점좌표를 획득하는 단계는,상기 복수의 관절 부위 중 한쌍의 점좌표를 획득한 제1 관절 부위와 상기 복수의 관절 부위 중 한쌍의 점좌표를 구성하지 못한 제2 관절 부위를 제공하는 단계;상기 제2 관절 부위에 대한 하나의 점좌표와 상기 제1 관절 부위에 대한 한쌍의 점좌표를 이용하여 상기 제2 관절 부위의 하나의 점좌표와 대응되는 추정 점좌표를 획득하는 단계;상기 제1 관절 부위의 한쌍의 점좌표와 상기 제2 관절 부위의 점좌표와 추정 점좌표를 이용하여 신체 영역의 중심선을 검출하는 단계를 포함하는딥러닝 모델을 이용한 낙상 상황 검출방법
4 4
제3항에 있어서,상기 추정 점좌표를 획득하는 단계는,상기 제2 관절 부위의 점좌표와 상기 제1 관절 부위의 한쌍의 점좌표 중 상기 제2 관절 부위의 점좌표 영역에 존재하는 점좌표를 이용하여 수평기준라인에 수직한 제1 및 제2 수직라인을 획득하는 단계;상기 제1 및 제2 수직라인 상에 존재하는 상기 제2 관절 부위의 점좌표와 상기 제1 관절 부위의 점좌표 사이의 거리를 계산하는 단계;상기 계산된 거리를 이용하여 제2 관절 부위의 점좌표와 대응되는 추정 점좌표를 획득하는 단계를 포함하는딥러닝 모델을 이용한 낙상 상황 검출방법
5 5
제1항에 있어서,상기 중심선과 사람이 서있는 지면에 평행한 수평기준라인 사이의 각도(θ)를 계산하는 단계는,상기 중심선을 검출하기 위해 이용한 두 쌍의 관절 부위에 대한 점좌표들에 대한 중심점을 획득하는 단계;상기 중심점의 좌표를 이용하여 수학식(1)에 의해 각도를 계산하는 단계를 포함하는
6 6
제5항에 있어서,상기 깊이 영상을 구성하는 복수의 이미지 프레임들에 대해 중심선과 수평기준라인 사이의 각도들을 계산하여 각도 변화량(ω)을 계산하는 단계는,n번째 이미지 프레임에 대해 아래 수학식 (2)에 의해 구해지는
7 7
깊이 영상을 제공하는 영상 제공부;상기 영상 제공부의 깊이 영상에 기초하여 사람의 신체 영역에 대한 관절 부위와 신체 영역의 중심선을 영상 검출 및 판단부; 및상기 영상 검출 및 판단부에서 검출한 정보와 낙상 유무의 판단 정보를 표시하는 표시부를 포함하고,상기 영상 검출 및 판단부는 적어도 하나의 메모리와 적어도 하나의 프로세서를 포함하는 영상처리부를 포함하며,상기 영상 검출 및 판단부는,깊이 영상으로부터 사람의 신체 영역에 대한 복수의 관절 부위를 검출하고,상기 검출된 관절 부위들 각각에 대해 신체 영역의 중심을 기준으로 좌우 대칭인 한쌍의 점좌표를 획득하고,상기 검출된 관절 부위들 중 적어도 2개 이상의 쌍에 대한 점좌표를 이용하여 신체 영역의 중심선을 검출하고,상기 중심선과 사람이 서있는 지면에 평행한 수평기준라인 사이의 각도를 계산하고,상기 깊이 영상을 구성하는 복수의 이미지 프레임들에 대해 중심선과 수평기준라인 사이의 각도들을 계산하여 각도 변화량을 계산하고,상기 중심선과 수평기준라인의 각도가 미리 설정된 임계 각도 이하인지를 판단하고,상기 중심선과 수평기준라인의 각도가 임계 각도 이하인 경우, 복수의 이미지 프레임들로부터 획득한 각도 변화량이 미리 설정된 임계 각도변화량보다 큰지를 판단하고,상기 각도 변화량이 임계 각도변화량보다 큰 경우에는 사람에게 낙상 상황이 발생한 것으로 판단하는 딥러닝 모델을 이용한 낙상 상황 검출장치
8 8
제7항에 있어서,상기 복수의 이미지 프레임들은 상기 중심선과 수평기준라인 사이의 각도가 임계 각도 이하인 영역인 이미지 프레임을 기준으로 전후 복수의 이미지 프레임들인딥러닝 모델을 이용한 낙상 상황 검출장치
9 9
제7항에 있어서,상기 신체 영역의 중심을 기준으로 좌우 대칭인 한쌍의 점좌표를 획득하는 것은,상기 복수의 관절 부위 중 한쌍의 점좌표를 획득한 제1 관절 부위와 상기 복수의 관절 부위 중 한쌍의 점좌표를 구성하지 못한 제2 관절 부위를 제공하고,상기 제2 관절 부위에 대한 하나의 점좌표와 상기 제1 관절 부위에 대한 한쌍의 점좌표를 이용하여 상기 제2 관절 부위의 하나의 점좌표와 대응되는 추정 점좌표를 획득하고,상기 제1 관절 부위의 한쌍의 점좌표와 상기 제2 관절 부위의 점좌표와 추정 점좌표를 이용하여 신체 영역의 중심선을 검출하는딥러닝 모델을 이용한 낙상 상황 검출장치
10 10
제9항에 있어서,상기 추정 점좌표를 획득하는 것은,상기 제2 관절 부위의 점좌표와 상기 제1 관절 부위의 한쌍의 점좌표 중 상기 제2 관절 부위의 점좌표 영역에 존재하는 점좌표를 이용하여 수평기준라인에 수직한 제1 및 제2 수직라인을 획득하고,상기 제1 및 제2 수직라인 상에 존재하는 상기 제2 관절 부위의 점좌표와 상기 제1 관절 부위의 점좌표 사이의 거리를 계산하고,상기 계산된 거리를 이용하여 제2 관절 부위의 점좌표와 대응되는 추정 점좌표를 획득하는딥러닝 모델을 이용한 낙상 상황 검출장치
11 11
제7항에 있어서,상기 중심선과 사람이 서있는 지면에 평행한 수평기준라인 사이의 각도(θ)를 계산하는 것은,상기 중심선을 검출하기 위해 이용한 두 쌍의 관절 부위에 대한 점좌표들에 대한 중심점을 획득하고,상기 중심점의 좌표를 이용하여 수학식(1)에 의해 각도를 계산하는
12 12
제11항에 있어서,상기 깊이 영상을 구성하는 복수의 이미지 프레임들에 대해 중심선과 수평기준라인 사이의 각도들을 계산하여 각도 변화량(ω)을 계산하는 것은,n번째 이미지 프레임에 대해 아래 수학식 (2)에 의해 구해지는
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 과학기술정보통신부 동의대학교 산학협력단 지역지능화혁신인재양성(Grand ICT연구센터) Grand ICT연구센터(동의대학교)