| 1 |
1
사용자단말기와 통신을 수행할 수 있고, 사용자가 착용하는 스마트글래스; 및 사용자단말기 및 보호자단말기가 접속할 수 있는 서비스서버를 포함하는 인공지능에 기반한 시니어 케어를 위한 길안내 및 사물식별 시스템으로서,상기 스마트글래스는,프레임부; 상기 스마트글래스 전면에 배치되어 사용자 시점에서의 영상정보를 수집하는 촬영모듈; 상기 프레임부의 일 측면에 체결되어 사용자의 주시 방향에 따라 적외선을 조사하여 반환되는 신호를 센싱하여 지면과의 거리정보를 도출하는 적외선센서부; 상기 적외선센서부의 일 측면에 체결되는 제1안경다리부; 상기 프레임부의 타 측면에 체결되는 제2안경다리부; 사용자의 움직임신호를 측정하는 움직임센서부; 상기 사용자단말기와 통신을 수행하는 통신모듈; 영상 혹은 정보를 디스플레이하는 글래스디스플레이부; 및 소리를 출력하는 스피커부;를 포함하고,상기 프레임부의 일 측면, 상기 적외선센서부 및 상기 제1안경다리부 각각에는 제1관통홀, 제2관통홀 및 제3관통홀이 형성되어 있고, 상기 제1관통홀, 상기 제2관통홀 및 상기 제3관통홀에 삽입되는 고정막대에 의하여 상기 프레임부의 일 측면에 상기 적외선센서부 및 상기 제1안경다리부가 체결되며,상기 고정막대의 일 단에는 각도조절부가 체결되어 상기 각도조절부의 회전 방향에 상응하여 상기 적외선센서부가 회전하고, 상기 각도조절부에는 각도지시막대가 배치되어 상기 각도조절부의 회전에 따라 상기 각도지시막대는 상기 각도조절부의 회전각도를 지시하고,상기 사용자단말기는 상기 스마트글래스로부터 상기 영상정보, 상기 거리정보 및 상기 움직임신호를 수신하여 상기 서비스서버로 송신하고,상기 서비스서버는,상기 영상정보의 이미지프레임에서 객체를 검출하고, 검출된 객체에 대한 장애물정보를 생성하는 장애물정보생성부;상기 적외선센서부가 도출한 각각의 상기 거리정보에 기초하여 거리들의 평균값을 산출하고, 상기 평균값이 기설정된 기준을 충족하는지 여부에 따른 단차정보를 도출하는 단차정보생성부;시간에 따른 X, Y, 및 Z축 방향의 변위량을 포함하는 상기 움직임신호에 기초하여 사용자의 낙상상태정보를 포함하는 동작상태정보를 도출하는 상태정보생성부;상기 장애물정보, 상기 단차정보, 및 상기 동작상태정보에 기초하여 상기 스마트글래스, 상기 사용자단말기, 혹은 상기 보호자단말기에 제공될 위험알림정보를 생성하는 위험알림정보제공부; 및사용자단말기로부터 목적지에 대한 입력을 수신하고, 해당 목적지로의 경로정보를 포함하는 길안내정보를 생성하는 길안내정보제공부;를 포함하고,상기 사용자단말기는 상기 서비스서버로부터 상기 위험알림정보 및 길안내정보를 수신하여 상기 스마트글래스로 송신하고,상기 장애물정보생성부는,상기 영상정보에 기초하여 학습된 인공신경망에 의하여 영상에 포함된 1 이상의 객체를 검출하고, 검출된 객체를 인식하는 객체검출단계;인식된 객체가 기설정된 장애물기준에 해당하는지 여부를 판별하는 단계; 및장애물로 판별된 객체에 대한 음성출력정보 및 장애물로 판별된 객체에 대한 디스플레이정보를 포함하는 상기 장애물정보를 생성하는 단계;를 수행하고,상기 영상정보는 복수의 이미지프레임을 포함하고,상기 객체검출단계에서는,상기 복수의 이미지프레임 중 기설정된 시간구간에서 기설정된 기준에 부합하는, 객체의 움직임에 따라 촬영된 블러이미지가 기설정된 개수 이상 수집된 경우에, 해당 블러이미지에 포함된 객체가 기설정된 속도 이상으로 움직이는 것으로 판별하고,상기 장애물정보생성부는 상기 객체검출단계에서 해당 블러이미지에 포함된 객체가 기설정된 속도 이상으로 움직이는 것으로 판별한 경우에 해당 블러이미지에 포함된 객체의 움직임알림정보를 포함하는 장애물정보를 생성하고,상기 적외선센서부는, 3 이상의 적외선센서모듈을 포함하여 각각의 적외선센서모듈이 일정 간격으로 배치되고, 3 이상의 적외선센서모듈은 적외선센서모듈별로 해당 적외선센서모듈 및 해당 적외선센서모듈에서 적외선을 조사하는 지면의 특정 위치간의 거리를 각각 산출하고,상기 단차정보생성부는,상기 3 이상의 적외선센서모듈이 도출한 각각의 상기 거리정보에 기초하여 거리들의 평균값을 산출하는 단계;상기 3 이상의 적외선센서모듈이 도출한 각각의 상기 거리정보 사이의 복수의 차이값들을 도출하고, 상기 복수의 차이값들의 오차값을 산출하는 단계; 및상기 평균값이 기설정된 제1단차임계기준에 부합하지 않고, 상기 오차값이 기설정된 제2단차임계기준에 부합하지 않는 경우, 상기 단차정보를 도출하는 단계;를 수행하고,상기 상태정보생성부는,상기 스마트글래스에서 측정된 시간의 따른 X축 방향의 변위량, Y축 방향의 변위량, 및 Z축 방향의 변위량에 기초하여 각각의 변위량이 기설정된 기준에 부합하는지 여부를 판별하는 제1낙상상태판별을 수행하는 단계;상기 제1낙상상태판별을 수행하는 단계에서 낙상으로 판별된 경우에, 상기 사용자단말기에서 측정된 X축 방향의 변위량, Y축 방향의 변위량, 및 Z축 방향의 변위량에 기초하여 각각의 변위량이 기설정된 기준에 부합하는지 여부를 판별하여 사용자의 제2낙상상태판별을 수행하는 단계;상기 제1낙상상태판별을 수행하는 단계에서의 판별결과가 기설정된 기준에 부합하고, 상기 제2낙상상태판별을 수행하는 단계에서의 판별결과가 기설정된 기준에 부합하는 경우에 사용자가 낙상한 것으로 판별되는 사용자의 상기 낙상상태정보를 도출하는 단계;를 수행하는, 인공지능에 기반한 시니어 케어를 위한 길안내 및 사물식별 시스템
|
| 2 |
2
삭제
|
| 3 |
3
삭제
|
| 4 |
4
삭제
|
| 5 |
5
삭제
|
| 6 |
6
삭제
|
| 7 |
7
삭제
|
| 8 |
8
청구항 1에 있어서,상기 위험알림정보는,상기 영상정보에 기초하여 장애물로 판별된 객체에 대한 음성출력정보 및 장애물로 판별된 객체에 대한 디스플레이정보; 및 상기 영상정보에서 기설정된 속도 이상으로 움직이는 객체에 대한 움직임알림정보;를 포함하는 장애물정보;3 이상의 적외선센서모듈이 도출한 거리들의 평균값이 기설정된 제1단차임계기준에 부합하는지 여부에 따른 단차위험에 대한 알림정보;상기 사용자의 낙상상태에 대한 알림정보;를 포함하고,상기 위험알림정보제공부는,상기 장애물정보 및 단차위험에 대한 알림정보를 사용자단말기에 송신하고,상기 사용자의 낙상상태를 포함하는 동작상태정보를 사용자단말기 및 보호자단말기 중 1 이상에 송신하는, 인공지능에 기반한 시니어케어를 위한 길안내 및 사물식별 시스템
|
| 9 |
9
청구항 1에 있어서,상기 길안내정보제공부는,사용자단말기로부터 목적지에 대한 입력을 수신하는 단계;사용자의 현위치정보 및 입력된 목적지에 기초하여 목적지까지의 경로정보를 도출하는 단계;상기 경로정보에 기초하여 해당 경로에서 예측되는 장애물에 대한 음성출력정보 및 디스플레이정보를 포함하는 경로장애물정보를 도출하는 단계; 및상기 경로정보 및 상기 경로장애물정보를 포함하는 길안내정보를 상기 스마트글래스에 직접적 혹은 간접적으로 제공하는 단계;를 수행하는, 인공지능에 기반한 시니어 케어를 위한 길안내 및 사물식별 시스템
|
| 10 |
10
사용자단말기와 통신을 수행할 수 있고, 사용자가 착용하는 스마트글래스; 및 사용자단말기 및 보호자단말기가 접속할 수 있는 서비스서버를 포함하는 시스템에서 수행되는 인공지능에 기반한 시니어 케어를 위한 길안내 및 사물식별 방법으로서,상기 스마트글래스는,프레임부; 상기 스마트글래스 전면에 배치되어 사용자 시점에서의 영상정보를 수집하는 촬영모듈; 상기 프레임부의 일 측면에 체결되어 사용자의 주시 방향에 따라 적외선을 조사하여 반환되는 신호를 센싱하여 지면과의 거리정보를 도출하는 적외선센서부; 상기 적외선센서부의 일 측면에 체결되는 제1안경다리부; 상기 프레임부의 타 측면에 체결되는 제2안경다리부; 사용자의 움직임신호를 측정하는 움직임센서부; 상기 사용자단말기와 통신을 수행하는 통신모듈; 영상 혹은 정보를 디스플레이하는 글래스디스플레이부; 및 소리를 출력하는 스피커부;를 포함하고,상기 프레임부의 일 측면, 상기 적외선센서부 및 상기 제1안경다리부 각각에는 제1관통홀, 제2관통홀 및 제3관통홀이 형성되어 있고, 상기 제1관통홀, 상기 제2관통홀 및 상기 제3관통홀에 삽입되는 고정막대에 의하여 상기 프레임부의 일 측면에 상기 적외선센서부 및 상기 제1안경다리부가 체결되며,상기 고정막대의 일 단에는 각도조절부가 체결되어 상기 각도조절부의 회전 방향에 상응하여 상기 적외선센서부가 회전하고, 상기 각도조절부에는 각도지시막대가 배치되어 상기 각도조절부의 회전에 따라 상기 각도지시막대는 상기 각도조절부의 회전각도를 지시하고,상기 사용자단말기에 의하여 상기 스마트글래스로부터 상기 영상정보, 상기 거리정보 및 상기 움직임신호를 수신하여 상기 서비스서버로 송신하는 단계;상기 서비스서버에 의하여,상기 영상정보의 이미지프레임에서 객체를 검출하고, 검출된 객체에 대한 장애물정보를 생성하는 장애물정보생성단계;상기 적외선센서부가 도출한 각각의 상기 거리정보에 기초하여 거리들의 평균값을 산출하고, 상기 평균값이 기설정된 기준을 충족하는지 여부에 따른 단차정보를 도출하는 단차정보생성단계;시간에 따른 X, Y, 및 Z축 방향의 변위량을 포함하는 상기 움직임신호에 기초하여 사용자의 낙상상태정보를 포함하는 동작상태정보를 도출하는 상태정보생성단계;상기 장애물정보, 상기 단차정보, 및 상기 동작상태정보에 기초하여 상기 스마트글래스, 상기 사용자단말기, 혹은 상기 보호자단말기에 제공될 위험알림정보를 생성하는 위험알림정보제공단계; 및사용자단말기로부터 목적지에 대한 입력을 수신하고, 해당 목적지로의 경로정보를 포함하는 길안내정보를 생성하는 길안내정보제공단계;를 포함하고,상기 사용자단말기에 의하여 상기 서비스서버로부터 상기 위험알림정보 및 길안내정보를 수신하여 상기 스마트글래스로 송신하는 단계를 포함하고,상기 장애물정보생성단계는,상기 영상정보에 기초하여 학습된 인공신경망에 의하여 영상에 포함된 1 이상의 객체를 검출하고, 검출된 객체를 인식하는 객체검출단계;인식된 객체가 기설정된 장애물기준에 해당하는지 여부를 판별하는 단계; 및장애물로 판별된 객체에 대한 음성출력정보 및 장애물로 판별된 객체에 대한 디스플레이정보를 포함하는 상기 장애물정보를 생성하는 단계;를 포함하고,상기 영상정보는 복수의 이미지프레임을 포함하고,상기 객체검출단계에서는,상기 복수의 이미지프레임 중 기설정된 시간구간에서 기설정된 기준에 부합하는, 객체의 움직임에 따라 촬영된 블러이미지가 기설정된 개수 이상 수집된 경우에, 해당 블러이미지에 포함된 객체가 기설정된 속도 이상으로 움직이는 것으로 판별하고,상기 장애물정보생성단계는 상기 객체검출단계에서 해당 블러이미지에 포함된 객체가 기설정된 속도 이상으로 움직이는 것으로 판별한 경우에 해당 블러이미지에 포함된 객체의 움직임알림정보를 포함하는 장애물정보를 생성하고,상기 적외선센서부는, 3 이상의 적외선센서모듈을 포함하여 각각의 적외선센서모듈이 일정 간격으로 배치되고, 3 이상의 적외선센서모듈은 적외선센서모듈별로 해당 적외선센서모듈 및 해당 적외선센서모듈에서 적외선을 조사하는 지면의 특정 위치간의 거리를 각각 산출하고,상기 단차정보생성단계는,상기 3 이상의 적외선센서모듈이 도출한 각각의 상기 거리정보에 기초하여 거리들의 평균값을 산출하는 단계;상기 3 이상의 적외선센서모듈이 도출한 각각의 상기 거리정보 사이의 복수의 차이값들을 도출하고, 상기 복수의 차이값들의 오차값을 산출하는 단계; 및상기 평균값이 기설정된 제1단차임계기준에 부합하지 않고, 상기 오차값이 기설정된 제2단차임계기준에 부합하지 않는 경우, 상기 단차정보를 도출하는 단계;를 포함하고,상기 상태정보생성단계는,상기 스마트글래스에서 측정된 시간의 따른 X축 방향의 변위량, Y축 방향의 변위량, 및 Z축 방향의 변위량에 기초하여 각각의 변위량이 기설정된 기준에 부합하는지 여부를 판별하는 제1낙상상태판별을 수행하는 단계;상기 제1낙상상태판별을 수행하는 단계에서 낙상으로 판별된 경우에, 상기 사용자단말기에서 측정된 X축 방향의 변위량, Y축 방향의 변위량, 및 Z축 방향의 변위량에 기초하여 각각의 변위량이 기설정된 기준에 부합하는지 여부를 판별하여 사용자의 제2낙상상태판별을 수행하는 단계;상기 제1낙상상태판별을 수행하는 단계에서의 판별결과가 기설정된 기준에 부합하고, 상기 제2낙상상태판별을 수행하는 단계에서의 판별결과가 기설정된 기준에 부합하는 경우에 사용자가 낙상한 것으로 판별되는 사용자의 상기 낙상상태정보를 도출하는 단계;를 포함하는, 인공지능에 기반한 시니어 케어를 위한 길안내 및 사물식별 방법
|
