| 1 |
1
서버와 연결되는 적어도 하나의 가상 환경 시뮬레이터-상기 가상 환경 시뮬레이터는 착용형 디스플레이 장치를 통하여 사용자에게 시각적인 정보를 제공하고, 컨트롤러를 포함함-; 상기 가상 환경 시뮬레이터를 사용하는 사용자가 사용하는 제1 단말기;상기 가상 환경 시뮬레이터로 평가 시뮬레이션을 제공하고, 상기 가상 환경 시뮬레이터로부터 시뮬레이션 결과를 획득하고, 상기 시뮬레이션 결과에 대한 피드백 정보를 제공하는 서버;상기 시뮬레이션 결과에 대한 상기 피드백 정보를 제공하는 평가자가 사용하는 제2 단말기;를 포함하되,상기 시뮬레이션 결과는 상기 사용자가 시뮬레이션을 수행하는 영상을 포함하고, 상기 영상은 수술 시뮬레이션 대상인 가상 오브젝트를 포함하고, 상기 가상 오브젝트는 상기 사용자가 상기 시뮬레이터의 상기 컨트롤러를 통하여 미리 정해진 동작을 수행하는 경우 상기 영상에서 제거되거나 다른 가상 오브젝트로 대체될 수 있고,상기 시뮬레이션 결과는 시뮬레이션에 미리 정해진 동작에 대한 평가 정보를 더 포함하고, 상기 평가 정보는 상기 미리 정해진 동작에 대한 점수 및 상기 미리 정해진 동작에 대한 상기 컨트롤러의 좌표 정보, 상기 미리 정해진 동작에 대한 좌표와 상기 컨트롤러의 좌표 정보와의 오차 정보를 포함할 수 있고, 상기 시뮬레이터는 상기 평가 정보를 상기 서버로 제공할 수 있고, 상기 컨트롤러가 미리 정해진 좌표에 위치하는 경우 상기 미리 정해진 동작을 수행하는 것으로 평가할 수 있고, 상기 컨트롤러가 상기 미리 정해진 좌표와의 오차에 대응하는 점수를 차감하여 시뮬레이션에서 요구되는 상기 미리 정해진 동작에 대한 상기 사용자의 수행을 평가할 수 있고,상기 서버는 수술영상에서 미리 저장된 수술 대상 샘플과 미리 정해진 유사도 이상인 영역이 존재하는 경우 상기 미리 정해진 유사도 이상인 영역을 수술 대상 영역으로 판단하고, 상기 수술 대상 영역을 가상 오브젝트로 대체한 시뮬레이션 영상을 획득할 수 있고, 서버는 미리 저장된 수술 대상 오브젝트 중 상기 수술 대상 영역에 대응하는 수술 대상 오브젝트를 제공할 수 있고, 상기 서버는 상기 가상 환경 시뮬레이터로부터 획득한 상기 시뮬레이션 결과와 상기 제2 단말기로부터 획득한 상기 피드백 정보를 매칭하여 저장하고, 상기 시뮬레이션 결과 및 상기 피드백 정보를 요청하는 제1 단말기로 상기 시뮬레이션 결과 및 상기 피드백 정보를 제공하고, 상기 시뮬레이션 결과에 대한 상기 피드백 정보를 웹 플랫폼 또는 어플리케이션에 제공하고,상기 제2 단말기는 미리 정해진 피드백 UI를 제공하고, 상기 피드백 UI를 통하여 상기 피드백 정보를 획득하고, 상기 피드백 정보는 상기 제2 단말기를 통하여 입력된 코멘트를 포함할 수 있고, 상기 코멘트를 획득하기 위하여 상기 피드백 UI는 상기 영상에 포함된 복수의 이미지 중 적어도 하나의 이미지에 대한 선택을 획득하기 위한 이미지 선택 오브젝트, 이미지 상에 표시를 제공하는 그리기 툴 및 이미지에 대한 코멘트를 입력하는 코멘트 입력창을 제공할 수 있고, 상기 피드백 UI는 코멘트에 해당하는 이미지를 선택하는 경우 상기 영상에서 상기 코멘트에 해당하는 이미지에 대응되는 구간이 재생되도록 제공하는,가상 환경 시뮬레이션 제공 시스템
|
