| 1 |
1
환자 의료진 간 XR 기반 실감형 커뮤니케이션 시스템에 있어서,수술실 내에 설치되어 의료진의 재실 여부 및 수술실 상황을 확인하기 위한 영상 데이터 및 음성 데이터를 카메라로부터 수집하는 데이터 획득부,상기 수집된 영상으로부터 의료진 별 특징을 추출하는 특징 추출부,상기 추출된 특징을 학습모델에 적용하여 의료진을 식별하는 제어부,상기 수집된 영상으로부터 상기 의료진의 신원이 표시된 3D 증강 영상을 생성하는 증강현실 영상 생성부, 그리고 상기 3D 증강 영상 및 음성을 수술실 밖에 있는 보호자가 착용한 XR 모듈로 실시간 제공하는 증강현실 영상 제공부를 포함하는 실감형 커뮤니케이션 시스템
|
| 2 |
2
제1항에 있어서, 상기 증강현실 영상 제공부는, 상기 의료진이 수술 중에 특정 모션으로 동작하면, 상기 XR 모듈을 통해 상기 보호자에게 수술 동의서 서명을 요청하기 위한 화면을 제공하는 실감형 커뮤니케이션 시스템
|
| 3 |
3
제2항에 있어서, 상기 보호자로부터 XR 모듈을 통해 가상의 2D 서명 또는 3D 서명을 입력받으면, 상기 입력된 가상 서명에 대한 스마트 컨트랙트 트랜잭션을 블록체인 서버상에 등록하는 블록체인 등록부를 더 포함하는 실감형 커뮤니케이션 시스템
|
| 4 |
4
제1항에 있어서, 상기 특징 추출부는,상기 카메라 모듈로부터 수집된 영상으로부터 전신 뼈 및 관절을 추출하고,상기 증강현실 영상 생성부는,상기 전신 뼈 및 관절을 스켈레톤 형태로 변환하여 3D 증강 영상을 생성하는 실감형 커뮤니케이션 시스템
|
| 5 |
5
제1항에 있어서,상기 제어부는,상기 의료진의 얼굴 인식 또는 상기 전신 뼈 및 관절의 형태나 길이를 통하여 상기 의료진을 식별하는 실감형 커뮤니케이션 시스템
|
| 6 |
6
제1항에 있어서, 상기 XR 모듈은 헤드마운트 디스플레이 형태로 구현되며, XR 안경, XR 헤드셋 및 스마트 글래스 중에서 적어도 하나를 포함하는 실감형 커뮤니케이션 시스템
|
| 7 |
7
제1항에 있어서, 상기 제어부는,상기 의료진의 이상 행동 또는 이상 상황을 감지 시에 상기 XR 모듈을 통하여 상기 보호자에게 알람 신호를 제공하는 실감형 커뮤니케이션 시스템
|
| 8 |
8
환자 의료진 간 XR 기반 실감형 커뮤니케이션 시스템을 이용한 실감형 커뮤니케이션 방법에 있어서,수술실 내에 설치되어 의료진의 재실 여부 및 수술실 상황을 확인하기 위한 카메라로부터 영상 데이터 및 음성 데이터를 수집하는 단계,상기 수집된 영상으로부터 의료진 별 특징을 추출하는 단계,상기 추출된 특징을 학습모델에 적용하여 의료진을 식별하는 단계,상기 수집된 영상으로부터 상기 의료진의 신원이 표시된 3D 증강 영상을 생성하는 단계, 그리고 상기 3D 증강 영상 및 음성을 수술실 밖에 있는 보호자가 착용한 XR 모듈로 실시간 제공하는 단계를 포함하는 실감형 커뮤니케이션 방법
|
| 9 |
9
제8항에 있어서, 상기 3D 증강 영상 및 음성을 수술실 밖에 있는 보호자가 착용한 XR 모듈로 실시간 제공하는 단계는,상기 의료진이 수술 중에 특정 모션으로 동작하면, 상기 XR 모듈을 통해 상기 보호자에게 수술 동의서 서명을 요청하기 위한 화면을 제공하는 실감형 커뮤니케이션 방법
|
| 10 |
10
제9항에 있어서, 상기 보호자로부터 XR 모듈을 통해 가상의 2D 서명 또는 3D 서명을 입력받으면, 상기 입력된 가상 서명에 대한 스마트 컨트랙트 트랜잭션을 블록체인 서버상에 등록하는 단계를 더 포함하는 실감형 커뮤니케이션 방법
|
| 11 |
11
제8항에 있어서, 상기 수집된 영상으로부터 의료진 별 특징을 추출하는 단계는,상기 수집된 영상으로부터 전신 뼈 및 관절을 추출하고,상기 수집된 영상으로부터 상기 의료진의 신원이 표시된 3D 증강 영상을 생성하는 단계는,상기 전신 뼈 및 관절을 스켈레톤 형태로 변환하여 3D 증강 영상을 생성하는 실감형 커뮤니케이션 방법
|
| 12 |
12
제8항에 있어서,상기 추출된 특징을 학습모델에 적용하여 의료진을 식별하는 단계는,상기 의료진의 얼굴 인식 또는 상기 전신 뼈 및 관절의 형태나 길이를 통하여 상기 의료진을 식별하는 실감형 커뮤니케이션 방법
|
| 13 |
13
제8항에 있어서, 상기 XR 모듈은 헤드마운트 디스플레이 형태로 구현되며, XR 안경, XR 헤드셋 및 스마트 글래스 중에서 적어도 하나를 포함하는 실감형 커뮤니케이션 방법
|
| 14 |
14
제8항에 있어서, 상기 추출된 특징을 학습모델에 적용하여 의료진을 식별하는 단계는,상기 의료진의 이상 행동 또는 이상 상황을 감지 시에 상기 XR 모듈을 통하여 상기 보호자에게 알람 신호를 제공하는 실감형 커뮤니케이션 방법
|
