| 1 |
1
사용자단말기와 데이터 송수신을 수행할 수 있고, 요양사가 착용하는 스마트글래스; 및 사용자단말기 및 보호자단말기가 접속할 수 있는 서비스서버를 포함하는 인공지능에 기반한 헬스케어서비스를 제공하는 시스템으로서,상기 스마트글래스는,음성정보를 수집하는 마이크부; 상기 스마트글래스 전면에 배치되어 요양사 시점에서의 영상정보를 수집하는 촬영모듈; 상기 사용자단말기와 통신을 수행하는 통신모듈; 요양사의 안구운동에 따른 시선정보를 수집하는 시선추적모듈; 및 영상 혹은 정보를 디스플레이하는 글래스디스플레이부;를 포함하고,상기 사용자단말기는,상기 스마트글래스로부터 상기 음성정보, 상기 영상정보, 및 상기 시선정보를 수신하여 상기 서비스서버로 송신하고,상기 서비스서버는,사용자 시점에서의 영상정보를 수신하고, 상기 영상정보의 1 이상의 요양대상자에 대한 세부정보가 상기 글래스디스플레이부에 표시되도록 제어하는 대상자정보제공부;상기 요양사 시점에서의 영상정보 및 상기 시선정보에 기초하여 도출된 요양사의 주의집중정도를 포함하는 요양상황정보에 기초하여 상기 1 이상의 요양대상자에 대한 케어알림정보를 송신하는 대상자케어알림부;상기 음성정보, 상기 요양사 시점에서의 영상정보, 요양사의 상기 시선정보 및 기계학습된 추론모델에 기초하여 음성분석정보, 영상분석정보, 및 시선분석정보를 포함하는 요양상황정보를 생성하는 요양상황정보생성부; 및상기 보호자단말기 혹은 상기 사용자단말기에 상기 요양상황정보를 제공하는 요양상황정보제공부;를 포함하고,상기 대상자케어알림부는,상기 요양사 시점에서의 영상정보 및 요양사의 상기 시선정보를 수신하는 단계;상기 영상정보, 상기 시선정보 및 기계학습된 제1추론모델에 기초하여 각각의 요양대상자에 대한 요양사의 주의집중정도를 도출하는 단계;상기 영상정보 및 기계학습된 제2추론모델에 기초하여 1 이상의 요양대상자 각각의 개별상태정보를 도출하는 단계; 및상기 1 이상의 요양대상자의 개별상태정보 및 상기 요양사의 주의집중정도를 포함하는 상기 요양상황정보에 기초하여 기설정된 기준에 따라 특정 요양대상자에 대한 케어알림정보를 송신하는 단계;를 수행하는, 인공지능에 기반한 헬스케어서비스를 제공하는 시스템
|
| 2 |
2
청구항 1에 있어서
|
| 3 |
3
삭제
|
| 4 |
4
청구항 1에 있어서,상기 요양상황정보생성부는,상기 음성정보에 기초하여 상기 음성정보를 텍스트 형태로 변환한 텍스트음성정보 및 음성세기정보를 포함하는 상기 음성분석정보를 도출하는 단계;상기 요양사의 시선정보에 기초하여 각각의 요양대상자에 대한 관심빈도통계를 포함하는 상기 시선분석정보를 도출하는 단계; 및상기 요양사 시점에서의 영상정보에 기초하여 1 이상의 요양대상자의 얼굴특징정보 및 행동특징정보를 도출하는 단계; 및상기 얼굴특징정보 및 행동특징정보를 포함하는 대상자특징정보를 기계학습된 추론모델에 입력하여 1 이상의 요양대상자 각각의 개별상태정보를 포함하는 상기 영상분석정보를 도출하는 단계;를 수행하는, 인공지능에 기반한 헬스케어서비스를 제공하는 시스템
|
| 5 |
5
청구항 1에 있어서,상기 요양상황정보생성부는,상기 음성정보로부터 요양사의 음성을 추출하고, 노이즈를 제거하여 전처리음성정보를 도출하는 단계; 및상기 전처리음성정보에 기초하여 음성세기정보를 추출하는 단계;를 수행하고,상기 요양상황정보제공부는,상기 보호자단말기에 상기 음성세기정보를 시간에 따른 데이터 형태로 디스플레이하여 특정 시점의 음성세기정보를 선택할 수 있는 인터페이스를 제공하고,상기 보호자단말기로부터 선택 입력된 특정 시점에 상응하는 상기 음성정보를 재생시키는, 인공지능에 기반한 헬스케어서비스를 제공하는 시스템
|
| 6 |
6
청구항 1에 있어서,상기 요양상황정보생성부는,STT(Speech to Text)모듈을 포함하고, STT모듈에 의하여 상기 음성정보를 텍스트 형태로 변환한 텍스트음성정보를 도출하고,상기 요양상황정보제공부는,상기 보호자단말기에 텍스트 형태로 변환된 상기 텍스트음성정보를 디스플레이하여 상기 음성정보를 각각의 단어 혹은 문장별로 선택할 수 있는 인터페이스를 제공하고,상기 보호자단말기로부터 단어 혹은 문장이 선택 입력되는 경우에, 해당 단어 혹은 문장에 상응하는 상기 음성정보를 재생시키는, 인공지능에 기반한 헬스케어서비스를 제공하는 시스템
|
| 7 |
7
청구항 1에 있어서
|
| 8 |
8
청구항 1에 있어서,상기 요양상황정보제공부에 의하여 제공되는 보호자단말기에서의 화면은,상기 음성정보에 기초하여 도출된 음성세기정보에 기초하여 시간에 따른 데이터 형태의 상기 음성세기정보가 디스플레이되는 음성그래프레이어;상기 요양상황정보생성부에서 STT모듈에 의하여 변환된 텍스트 형태의 텍스트음성정보가 디스플레이되는 음성텍스트레이어; 및상기 음성정보를 재생할 수 있는 음성출력레이어;를 포함하는, 인공지능에 기반한 헬스케어서비스를 제공하는 시스템
|
| 9 |
9
청구항 1에 있어서,상기 인공지능에 기반한 헬스케어서비스를 제공하는 시스템은,상기 요양대상자가 착용하는 웨어러블단말기를 더 포함하고,상기 웨어러블단말기는,요양대상자의 심박정보, 혈압정보, 혈중산소포화도정보, 및 움직임정보 중 1 이상을 포함하는 요양대상자생체정보를 수집하여 상기 서비스서버로 송신하고,상기 서비스서버는,상기 요양대상자생체정보에 기초하여 요양대상자의 신체상태를 판단하고, 판단한 요양대상자의 신체상태 및 신체상태에 따른 케어알림정보를 도출하고, 상기 사용자단말기 혹은 상기 스마트글래스에 직접적 혹은 간접적으로 상기 케어알림정보를 송신하는, 인공지능에 기반한 헬스케어서비스를 제공하는 시스템
|
| 10 |
10
사용자단말기와 데이터 송수신을 수행할 수 있고, 요양사가 착용하는 스마트글래스; 및 사용자단말기 및 보호자단말기가 접속할 수 있는 서비스서버를 포함하는 시스템에서 수행되는 인공지능에 기반한 헬스케어서비스를 제공하는 방법으로서,상기 스마트글래스는,음성정보를 수집하는 마이크; 상기 스마트글래스 전면에 배치되어 1 이상의 요양대상자에 대한 영상정보를 수집하는 촬영모듈; 상기 사용자단말기와 통신을 수행하는 통신모듈; 요양사의 안구운동에 따른 시선정보를 수집하는 시선추적모듈; 및 영상 혹은 정보를 디스플레이하는 글래스디스플레이부;를 포함하고,상기 사용자단말기에 의하여,상기 스마트글래스로부터 상기 음성정보, 상기 영상정보, 및 상기 시선정보를 수신하여 상기 서비스서버로 송신하는 단계;상기 서비스서버에 의하여,사용자 시점에서의 영상정보를 수신하고, 상기 영상정보의 1 이상의 요양대상자에 대한 세부정보가 상기 글래스디스플레이부에 표시되도록 제어하는 대상자정보제공단계;상기 요양사 시점에서의 영상정보 및 상기 시선정보에 기초하여 요양사의 주의집중정도를 포함하는 요양상황정보에 기초하여 상기 1 이상의 요양대상자에 대한 케어알림정보를 송신하는 대상자케어알림단계;상기 음성정보, 상기 요양사 시점에서의 영상정보, 요양사의 상기 시선정보 및 기계학습된 추론모델에 기초하여 음성분석정보, 영상분석정보, 및 시선분석정보를 포함하는 요양상황정보를 생성하는 요양상황정보생성단계; 및상기 보호자단말기 혹은 상기 사용자단말기에 상기 요양상황정보를 제공하는 요양상황정보제공단계;를 포함하고,상기 대상자케어알림단계는,상기 요양사 시점에서의 영상정보 및 요양사의 상기 시선정보를 수신하는 단계;상기 영상정보, 상기 시선정보 및 기계학습된 제1추론모델에 기초하여 각각의 요양대상자에 대한 요양사의 주의집중정도를 도출하는 단계;상기 영상정보 및 기계학습된 제2추론모델에 기초하여 1 이상의 요양대상자 각각의 개별상태정보를 도출하는 단계; 및상기 1 이상의 요양대상자의 개별상태정보 및 상기 요양사의 주의집중정도를 포함하는 상기 요양상황정보에 기초하여 기설정된 기준에 따라 특정 요양대상자에 대한 케어알림정보를 송신하는 단계;를 포함하는, 인공지능에 기반한 헬스케어서비스를 제공하는 방법
|
