| 1 |
1
하나 이상의 프로세서들, 및상기 하나 이상의 프로세서들에 의해 실행되는 하나 이상의 프로그램들을 저장하는 메모리를 구비한 컴퓨팅 장치로서, 3D 스캐너를 이용하여 환자의 구강 내부에 대한 구강 영상을 획득하고, 방사선 촬영을 통하여 상기 환자의 구강 내부에 대한 투과 영상을 획득하는 영상 획득 모듈;상기 획득한 구강 영상 및 상기 획득한 투과 영상이 대응되어 겹쳐지도록 병합하여 병합 영상을 생성하는 영상 병합 모듈;상기 생성된 병합 영상 및 기 생성된 치아 삭제 정보를 기반으로 증강현실 콘텐츠를 생성하는 증강현실 콘텐츠 제작 모듈; 및증강현실 장치로부터 상기 환자의 치아 영역을 촬영한 촬영 영상을 획득하고, 상기 획득된 촬영 영상에 상기 증강현실 콘텐츠를 투영하여 사용자에게 치아 삭제 가이드를 제공하는 증강현실 콘텐츠 제공 모듈을 포함하며,상기 증강현실 콘텐츠 제작 모듈은,상기 병합 영상을 기반으로 상기 환자의 치아 영역에 투영되는 3차원 객체를 생성하고, 치아 삭제시 사용하는 실물 드라이버를 가상화하고, 상기 병합 영상에 기 생성된 치아 삭제 정보를 저장하며,상기 증강현실 콘텐츠는, 상기 3차원 객체, 상기 가상화 드라이버 및 상기 치아 삭제 정보를 포함하며,상기 치아 삭제 정보는, 치아 삭제 시 삭제 예정 치아에 부착되는 보철물의 형상에 따른 삭제 예정 치아의 삭제 양 및 삭제 형상에 대한 정보를 포함하며,상기 3차원 객체는, 치관 객체, 치근 객체, 잇몸뼈 객체, 신경관 객체 및 보철물 객체 중 하나 이상을 포함하며,상기 증강현실 콘텐츠 제공 모듈은,상기 3차원 객체 및 상기 치아 삭제 정보를 기반으로 삭제 예정 치아의 삭제 양 및 삭제 형상을 표시하여 제공하는 상기 치아 삭제 가이드를 상기 사용자에게 제공하며,상기 증강현실 콘텐츠 제공 모듈은,상기 촬영 영상의 프레임 간 비교를 통하여 상기 촬영 영상에서 상기 삭제 예정 치아를 추출하고, 상기 삭제 예정 치아의 형상 변화량을 산출하며, 상기 산출된 삭제 예정 치아의 형상 변화량 및 상기 치아 삭제 정보를 기반으로 치아 삭제에 대한 진행도를 표시하여 제공하는 상기 치아 삭제 가이드를 상기 사용자에게 제공하는, 컴퓨팅 장치
|
| 2 |
2
삭제
|
| 3 |
3
삭제
|
| 4 |
4
청구항 1에 있어서,상기 증강현실 콘텐츠 제공 모듈은,상기 3차원 객체, 상기 삭제 예정 치아의 삭제 양 및 삭제 형상을 기반으로 상기 삭제 예정 치아에서 삭제될 영역을 기 설정된 제1 색으로 표시하는 제1 단계, 치아 삭제가 진행됨에 따라 상기 삭제될 영역에서 상기 사용자에 의해 삭제된 영역을 점선으로 표시하는 제2 단계, 및 상기 삭제 예정 치아의 삭제 양 및 삭제 형상을 기반으로 치아 삭제가 완료된 부분의 경우, 상기 삭제 예정 치아를 기 설정된 제2 색으로 표시하는 제3 단계를 포함하는 상기 치아 삭제 가이드를 상기 사용자에게 제공하는, 컴퓨팅 장치
|
| 5 |
5
삭제
|
| 6 |
6
하나 이상의 프로세서들, 및상기 하나 이상의 프로세서들에 의해 실행되는 하나 이상의 프로그램들을 저장하는 메모리를 구비한 컴퓨팅 장치로서, 3D 스캐너를 이용하여 환자의 구강 내부에 대한 구강 영상을 획득하고, 방사선 촬영을 통하여 상기 환자의 구강 내부에 대한 투과 영상을 획득하는 영상 획득 모듈;상기 획득한 구강 영상 및 상기 획득한 투과 영상이 대응되어 겹쳐지도록 병합하여 병합 영상을 생성하는 영상 병합 모듈;상기 생성된 병합 영상 및 기 생성된 치아 삭제 정보를 기반으로 증강현실 콘텐츠를 생성하는 증강현실 콘텐츠 제작 모듈; 및증강현실 장치로부터 상기 환자의 치아 영역을 촬영한 촬영 영상을 획득하고, 상기 획득된 촬영 영상에 상기 증강현실 콘텐츠를 투영하여 사용자에게 치아 삭제 가이드를 제공하는 증강현실 콘텐츠 제공 모듈을 포함하며,상기 증강현실 콘텐츠 제작 모듈은,상기 병합 영상을 기반으로 상기 환자의 치아 영역에 투영되는 3차원 객체를 생성하고, 치아 삭제시 사용하는 실물 드라이버를 가상화하고, 상기 병합 영상에 기 생성된 치아 삭제 정보를 저장하며,상기 증강현실 콘텐츠는, 상기 3차원 객체, 상기 가상화 드라이버 및 상기 치아 삭제 정보를 포함하며,상기 치아 삭제 정보는, 치아 삭제 시 삭제 예정 치아에 부착되는 보철물의 형상에 따른 삭제 예정 치아의 삭제 양 및 삭제 형상에 대한 정보를 포함하며,상기 3차원 객체는, 치관 객체, 치근 객체, 잇몸뼈 객체, 신경관 객체 및 보철물 객체 중 하나 이상을 포함하며,상기 증강현실 콘텐츠 제공 모듈은,상기 3차원 객체 및 상기 치아 삭제 정보를 기반으로 삭제 예정 치아의 삭제 양 및 삭제 형상을 표시하여 제공하는 상기 치아 삭제 가이드를 상기 사용자에게 제공하며,상기 증강현실 콘텐츠 제공 모듈은,상기 3차원 객체 및 상기 치아 삭제 정보를 기반으로 머신 러닝(machine learning) 기반의 기술을 이용하여 치아 삭제를 위한 가상화 드라이버의 진입 위치 및 방향을 산출하고, 상기 산출된 가상화 드라이버의 진입 위치 및 방향을 기반으로 치아 삭제를 진행하기 위한 상기 가상화 드라이버의 경로를 생성하여 제공하는 상기 치아 삭제 가이드를 상기 사용자에게 제공하는, 컴퓨팅 장치
|
| 7 |
7
청구항 1에 있어서,상기 증강현실 콘텐츠 제공 모듈은,상기 3차원 객체를 기반으로 상기 삭제 예정 치아에 상기 보철물의 형상을 부가하고, 상기 삭제 예정 치아와 상기 보철물의 형상이 중첩되는 영역을 표시하여 제공하는 상기 치아 삭제 가이드를 상기 사용자에게 제공하는, 컴퓨팅 장치
|
| 8 |
8
청구항 1에 있어서,상기 영상 병합 모듈은,상기 구강 영상 및 상기 투과 영상 각각에 기 설정된 포인트를 추출하고, 상기 추출된 포인트가 매칭되도록 상기 구강 영상 및 상기 투과 영상을 병합하는, 컴퓨팅 장치
|
| 9 |
9
청구항 8에 있어서,상기 영상 병합 모듈은,상기 구강 영상 및 상기 투과 영상이 입력되는 경우, 이미 학습된 영상 병합 모델을 기반으로 머신 러닝(Machine Learning)을 수행하여 상기 구강 영상 및 상기 투과 영상 각각에 기 설정된 포인트를 추출하고, 상기 추출된 포인트를 기반으로 상기 병합 영상을 생성하는, 컴퓨팅 장치
|
| 10 |
10
청구항 8에 있어서,상기 투과 영상의 기 설정된 포인트는,상기 환자가 스탠트(stent)를 착용하고 촬영하여 상기 스탠트를 기반으로 설정되며,상기 스탠트는,상기 기 설정된 포인트를 가지는 구강 영상을 기반으로 3D 프린터를 이용하여 제작되어 상기 구강 영상과 동일한 포인트를 가지는, 컴퓨팅 장치
|
| 11 |
11
청구항 10에 있어서,상기 영상 병합 모듈은,상기 구강 영상에 설정된 포인트와 상기 투과 영상에 설정된 포인트의 좌표를 각각 추출하고, 상기 추출된 포인트의 좌표가 상호 중첩되도록 상기 구강 영상의 좌표 및 상기 투과 영상의 좌표를 동기화하여 상기 구강 영상과 상기 투과 영상을 상호 병합하는, 컴퓨팅 장치
|
| 12 |
12
청구항 10에 있어서,상기 촬영 영상은,상기 환자가 상기 스탠트를 착용하고 촬영되며,상기 증강현실 콘텐츠 제공 모듈은,상기 촬영 영상의 스탠트를 기반으로 상기 촬영 영상에 설정된 포인트와 상기 병합 영상에 설정된 포인트의 좌표를 추출하고, 상기 추출된 포인트의 좌표가 상호 중첩되도록 상기 구강 영상의 좌표 및 상기 투과 영상의 좌표를 동기화하여 상기 촬영 영상에 상기 증강현실 콘텐츠를 투영하는, 컴퓨팅 장치
|
| 13 |
13
청구항 1에 있어서,상기 증강현실 장치는,상기 사용자에 의해 착용되는 안경 형태의 착용 기기, 및 상기 환자의 치아 영역을 촬영하고, 상기 치아 삭제 가이드를 상기 사용자에게 제공하는 증강현실 기기를 포함하는, 컴퓨팅 장치
|
| 14 |
14
하나 이상의 프로세서들, 및 상기 하나 이상의 프로세서들에 의해 실행되는 하나 이상의 프로그램들을 저장하는 메모리를 구비한 컴퓨팅 장치에서 수행되는 증강현실을 이용한 치아 삭제 가이드 방법으로서,영상 획득 모듈에서, 3D 스캐너를 이용하여 환자의 구강 내부에 대한 구강 영상을 획득하고, 방사선 촬영을 통하여 상기 환자의 구강 내부에 대한 투과 영상을 획득하는 단계;영상 병합 모듈에서, 상기 획득한 구강 영상 및 상기 획득한 투과 영상이 대응되어 겹쳐지도록 병합하여 병합 영상을 생성하는 단계;콘텐츠 제작 모듈에서, 상기 생성된 병합 영상 및 기 생성된 치아 삭제 정보를 기반으로 증강현실 콘텐츠를 생성하는 단계; 및증강현실 콘텐츠 제공 모듈에서, 증강현실 장치로부터 상기 환자의 치아 영역을 촬영한 촬영 영상을 획득하고, 상기 획득된 촬영 영상에 상기 증강현실 콘텐츠를 투영하여 사용자에게 치아 삭제 가이드를 제공하는 단계를 포함하며,상기 증강현실 콘텐츠를 생성하는 단계는,상기 콘텐츠 제작 모듈에서, 상기 병합 영상을 기반으로 상기 환자의 치아 영역에 투영되는 3차원 객체를 생성하는 단계;상기 콘텐츠 제작 모듈에서, 치아 삭제시 사용하는 실물 드라이버를 가상화하는 단계; 및상기 콘텐츠 제작 모듈에서, 상기 병합 영상에 기 생성된 치아 삭제 정보를 저장하는 단계를 더 포함하며,상기 증강현실 콘텐츠는, 상기 3차원 객체, 상기 가상화 드라이버 및 상기 치아 삭제 정보를 포함하며,상기 치아 삭제 정보는, 치아 삭제 시 삭제 예정 치아에 부착되는 보철물의 형상에 따른 삭제 예정 치아의 삭제 양 및 삭제 형상에 대한 정보를 포함하며,상기 3차원 객체는, 치관 객체, 치근 객체, 잇몸뼈 객체, 신경관 객체 및 보철물 객체 중 하나 이상을 포함하며,상기 제공하는 단계는,상기 증강현실 콘텐츠 제공 모듈에서, 상기 3차원 객체 및 상기 치아 삭제 정보를 기반으로 삭제 예정 치아의 삭제 양 및 삭제 형상을 표시하여 제공하는 단계를 더 포함하며,상기 제공하는 단계는,상기 증강현실 콘텐츠 제공 모듈에서, 상기 촬영 영상의 프레임 간 비교를 통하여 상기 촬영 영상에서 상기 삭제 예정 치아를 추출하는 단계;상기 증강현실 콘텐츠 제공 모듈에서, 상기 삭제 예정 치아의 형상 변화량을 산출하는 단계; 및상기 증강현실 콘텐츠 제공 모듈에서, 상기 산출된 삭제 예정 치아의 형상 변화량 및 상기 치아 삭제 정보를 기반으로 치아 삭제에 대한 진행도를 표시하여 제공하는 단계를 더 포함하는, 증강현실을 이용한 치아 삭제 가이드 방법
|
| 15 |
15
삭제
|
| 16 |
16
삭제
|
| 17 |
17
청구항 14에 있어서,상기 제공하는 단계는,상기 증강현실 콘텐츠 제공 모듈에서, 상기 3차원 객체, 상기 삭제 예정 치아의 삭제 양 및 삭제 형상을 기반으로 상기 삭제 예정 치아에서 삭제될 영역을 기 설정된 제1 색으로 표시하는 제1 단계;상기 증강현실 콘텐츠 제공 모듈에서, 치아 삭제가 진행됨에 따라 상기 삭제될 영역에서 상기 사용자에 의해 삭제된 영역을 점선으로 표시하는 제2 단계; 및상기 증강현실 콘텐츠 제공 모듈에서, 상기 삭제 예정 치아의 삭제 양 및 삭제 형상을 기반으로 치아 삭제가 완료된 부분의 경우, 상기 삭제 예정 치아를 기 설정된 제2 색으로 표시하는 제3 단계를 더 포함하는, 증강현실을 이용한 치아 삭제 가이드 방법
|
| 18 |
18
삭제
|
| 19 |
19
하나 이상의 프로세서들, 및 상기 하나 이상의 프로세서들에 의해 실행되는 하나 이상의 프로그램들을 저장하는 메모리를 구비한 컴퓨팅 장치에서 수행되는 증강현실을 이용한 치아 삭제 가이드 방법으로서,영상 획득 모듈에서, 3D 스캐너를 이용하여 환자의 구강 내부에 대한 구강 영상을 획득하고, 방사선 촬영을 통하여 상기 환자의 구강 내부에 대한 투과 영상을 획득하는 단계;영상 병합 모듈에서, 상기 획득한 구강 영상 및 상기 획득한 투과 영상이 대응되어 겹쳐지도록 병합하여 병합 영상을 생성하는 단계;콘텐츠 제작 모듈에서, 상기 생성된 병합 영상 및 기 생성된 치아 삭제 정보를 기반으로 증강현실 콘텐츠를 생성하는 단계; 및증강현실 콘텐츠 제공 모듈에서, 증강현실 장치로부터 상기 환자의 치아 영역을 촬영한 촬영 영상을 획득하고, 상기 획득된 촬영 영상에 상기 증강현실 콘텐츠를 투영하여 사용자에게 치아 삭제 가이드를 제공하는 단계를 포함하며,상기 증강현실 콘텐츠를 생성하는 단계는,상기 콘텐츠 제작 모듈에서, 상기 병합 영상을 기반으로 상기 환자의 치아 영역에 투영되는 3차원 객체를 생성하는 단계;상기 콘텐츠 제작 모듈에서, 치아 삭제시 사용하는 실물 드라이버를 가상화하는 단계; 및상기 콘텐츠 제작 모듈에서, 상기 병합 영상에 기 생성된 치아 삭제 정보를 저장하는 단계를 더 포함하며,상기 증강현실 콘텐츠는, 상기 3차원 객체, 상기 가상화 드라이버 및 상기 치아 삭제 정보를 포함하며,상기 치아 삭제 정보는, 치아 삭제 시 삭제 예정 치아에 부착되는 보철물의 형상에 따른 삭제 예정 치아의 삭제 양 및 삭제 형상에 대한 정보를 포함하며,상기 3차원 객체는, 치관 객체, 치근 객체, 잇몸뼈 객체, 신경관 객체 및 보철물 객체 중 하나 이상을 포함하며,상기 제공하는 단계는,상기 증강현실 콘텐츠 제공 모듈에서, 상기 3차원 객체 및 상기 치아 삭제 정보를 기반으로 삭제 예정 치아의 삭제 양 및 삭제 형상을 표시하여 제공하는 단계를 더 포함하며,상기 제공하는 단계는,상기 증강현실 콘텐츠 제공 모듈에서, 상기 3차원 객체 및 상기 치아 삭제 정보를 기반으로 머신 러닝(machine learning) 기반의 기술을 이용하여 치아 삭제를 위한 가상화 드라이버의 진입 위치 및 방향을 산출하는 단계; 및상기 증강현실 콘텐츠 제공 모듈에서, 상기 산출된 가상화 드라이버의 진입 위치 및 방향을 기반으로 치아 삭제를 진행하기 위한 상기 가상화 드라이버의 경로를 생성하여 제공하는 단계를 더 포함하는, 증강현실을 이용한 치아 삭제 가이드 방법
|
| 20 |
20
청구항 14에 있어서,상기 제공하는 단계는,상기 증강현실 콘텐츠 제공 모듈에서, 상기 3차원 객체를 기반으로 상기 삭제 예정 치아에 상기 보철물의 형상을 부가하는 단계; 및상기 증강현실 콘텐츠 제공 모듈에서, 상기 삭제 예정 치아와 상기 보철물의 형상이 중첩되는 영역을 표시하여 제공하는 단계를 더 포함하는, 증강현실을 이용한 치아 삭제 가이드 방법
|
