맞춤기술찾기

이전대상기술

이미지 기반 실내위치 검출장치 및 검출방법

  • 기술번호 : KST2020003465
  • 담당센터 : 서울서부기술혁신센터
  • 전화번호 : 02-6124-6930
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 BIM 정보와 딥 러닝 네트워크를 이용한 이미지 기반 실내위치 검출장치 및 검출방법에 관한 것으로, 본 발명의 일 실시예에 따른 이미지 기반 실내위치 검출장치는, 사용자 단말기에 내장된 카메라를 통해 촬영된 이미지를 유무선 통신을 통해 수신하는 서버 통신부; 적어도 하나 이상의 건물 내부의 실내 이미지들이 저장된 BIM DB(Building Information Modeling DataBase)가 저장된 서버 저장부; 및, 상기 사용자 단말기로부터 수신된 이미지에서 구조 정보가 포함된 레이어를 추출하고, 추출된 레이어의 구조 정보를 상기 BIM DB에 저장된 어느 하나 이상의 실내 이미지와 매칭하여 기준치 이상의 유사도를 갖는 실내 이미지를 추출하고, 추출된 실내 이미지를 이용하여 사용자의 현재 위치를 검출하는 서버 제어부를 포함한다.
Int. CL G06T 15/06 (2011.01.01) G06T 15/20 (2011.01.01)
CPC G06T 15/06(2013.01) G06T 15/06(2013.01)
출원번호/일자 1020180087618 (2018.07.27)
출원인 연세대학교 산학협력단
등록번호/일자 10-2090779-0000 (2020.03.12)
공개번호/일자 10-2020-0012379 (2020.02.05) 문서열기
공고번호/일자 (20200318) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2018.07.27)
심사청구항수 20

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 연세대학교 산학협력단 대한민국 서울특별시 서대문구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 김형관 서울특별시 강남구
2 하인해 서울특별시 서대문구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 김인철 대한민국 서울특별시 서초구 반포대로**길 **, 매강빌딩*층 에이치앤에이치 H&H 국제특허법률사무소 (서초동)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 연세대학교 산학협력단 서울특별시 서대문구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2018.07.27 수리 (Accepted) 1-1-2018-0743691-14
2 [출원서등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2018.09.28 수리 (Accepted) 1-1-2018-0959665-92
3 [출원서등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2019.04.08 수리 (Accepted) 1-1-2019-0357560-88
4 선행기술조사의뢰서
Request for Prior Art Search
2019.05.15 수리 (Accepted) 9-1-9999-9999999-89
5 선행기술조사보고서
Report of Prior Art Search
2019.07.10 수리 (Accepted) 9-1-2019-0031485-58
6 의견제출통지서
Notification of reason for refusal
2019.11.13 발송처리완료 (Completion of Transmission) 9-5-2019-0821195-79
7 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2020.01.09 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2020-0026971-89
8 [출원서 등 보완]보정서
2020.01.09 수리 (Accepted) 1-1-2020-0026972-24
9 [공지예외적용 보완 증명서류]서류제출서
2020.01.09 수리 (Accepted) 1-1-2020-0026973-70
10 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2020.01.09 수리 (Accepted) 1-1-2020-0026970-33
11 등록결정서
Decision to grant
2020.03.09 발송처리완료 (Completion of Transmission) 9-5-2020-0177763-32
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
사용자 단말기에 내장된 카메라를 통해 촬영된 이미지를 유무선 통신을 통해 수신하는 서버 통신부;적어도 하나 이상의 건물 내부의 실내 이미지들이 저장된 BIM DB(Building Information Modeling DataBase)가 저장된 서버 저장부; 및,상기 사용자 단말기로부터 수신된 이미지에서 구조 정보가 포함된 레이어를 추출하고, 추출된 레이어의 구조 정보를 상기 BIM DB에 저장된 어느 하나 이상의 실내 이미지와 매칭하여 기준치 이상의 유사도를 갖는 실내 이미지를 추출한 후, 추출된 실내 이미지를 이용하여 사용자의 현재 위치를 검출하는 서버 제어부 를 포함하는 이미지 기반 실내위치 검출장치
2 2
청구항 1에 있어서, 상기 BIM DB는,상기 적어도 하나 이상의 건물 내부의 실내 이미지들에 대해 딥 러닝 네트워크를 수행하여 얻은 이미지 레이어들을 저장하는 이미지 기반 실내위치 검출장치
3 3
청구항 2에 있어서, 상기 딥 러닝 네트워크는,VGG-16, VGG-19 중 적어도 어느 하나를 포함하는 콘볼루션 신경망 네트워크(Convolutional neural network, CNN)인 이미지 기반 실내위치 검출장치
4 4
청구항 1에 있어서, 상기 BIM DB는 상기 적어도 하나 이상의 건물 내부의 실내 이미지들에 대해 콘볼루션 신경망 네트워크를 수행하여 얻은 이미지 레이어들을 저장하고,상기 서버 제어부는,상기 사용자 단말기로부터 수신된 이미지에서 구조 정보가 포함된 레이어를 추출하는 레이어 추출모듈;상기 추출된 레이어의 구조 정보를 상기 BIM DB에 저장된 이미지 레이어들의 구조 정보와 매칭하여 기준치 이상의 유사도를 갖는 이미지 레이어를 추출하는 이미지 매칭모듈;상기 추출된 이미지 레이어를 이용하여 사용자의 현재 위치를 검출하는 위치 검출모듈을 포함하는 이미지 기반 실내위치 검출장치
5 5
청구항 4에 있어서, 상기 구조 정보는, 상기 수신된 이미지에 대해 콘볼루션 신경망 네트워크를 수행하여 얻은 이미지 레이어에 포함된 이미지 특징맵의 형상인 이미지 기반 실내위치 검출장치
6 6
청구항 5에 있어서, 상기 이미지 레이어는,상기 콘볼루션 신경망 네트워크를 수행하여 얻은 제4 풀링 레이어인 이미지 기반 실내위치 검출장치
7 7
외부 서버로부터 적어도 하나 이상의 건물 내부의 실내 이미지에 대한 BIM 데이터를 수신하는 통신부;내장된 카메라를 통해 촬영된 이미지에 포함된 구조 정보를 추출하고, 추출된 구조 정보를 상기 수신된 BIM 데이터에 포함된 어느 하나 이상의 실내 이미지와 매칭하여 기준치 이상의 유사도를 갖는 실내 이미지를 추출하고, 추출된 실내 이미지를 이용하여 사용자의 현재 위치를 검출하는 제어부를 포함하는 이미지 기반 실내위치 검출장치
8 8
청구항 7에 있어서, 상기 BIM 데이터는,상기 적어도 하나 이상의 건물 내부의 실내 이미지들에 대해 딥 러닝 네트워크를 수행하여 얻은 이미지 레이어인 이미지 기반 실내위치 검출장치
9 9
청구항 8에 있어서, 상기 딥 러닝 네트워크는,VGG-16, VGG-19 중 적어도 어느 하나를 포함하는 콘볼루션 신경망 네트워크(Convolutional neural network, CNN)인 이미지 기반 실내위치 검출장치
10 10
청구항 7에 있어서, 상기 BIM 데이터는 상기 적어도 하나 이상의 건물 내부의 실내 이미지들에 대해 콘볼루션 신경망 네트워크를 수행하여 얻은 이미지 레이어들이고,상기 제어부는,상기 내장된 카메라를 통해 촬영된 이미지에 포함된 구조 정보를 추출하는 레이어 추출모듈;상기 추출된 구조 정보를 상기 BIM 데이터에 포함된 이미지 레이어들의 구조 정보와 매칭하여 기준치 이상의 유사도를 갖는 이미지 레이어를 추출하는 이미지 매칭모듈;상기 추출된 이미지 레이어를 이용하여 사용자의 현재 위치를 검출하는 위치 검출모듈을 포함하는 이미지 기반 실내위치 검출장치
11 11
청구항 10에 있어서, 상기 구조 정보는, 상기 수신된 이미지에 대해 콘볼루션 신경망 네트워크를 수행하여 얻은 이미지 레이어에 포함된 이미지 특징맵의 형상인 이미지 기반 실내위치 검출장치
12 12
청구항 11에 있어서, 상기 이미지 레이어는,상기 콘볼루션 신경망 네트워크를 수행하여 얻은 제4 풀링 레이어인 이미지 기반 실내위치 검출장치
13 13
적어도 하나 이상의 건물 내부의 실내 이미지 레이어들이 저장된 BIM DB를 형성하여 저장하는 단계;카메라를 통해 촬영된 이미지를 유무선 통신을 통해 수신하는 단계;상기 수신된 이미지에서 구조 정보를 추출하는 단계;상기 추출된 구조 정보를 상기 BIM DB에 저장된 이미지 레이어들의 구조 정보와 매칭하여 기준치 이상의 유사도를 갖는 이미지 레이어를 추출하는 단계;상기 추출된 이미지 레이어를 이용하여 사용자의 현재 위치를 검출하는 단계를 포함하는 이미지 기반 실내위치 검출방법
14 14
청구항 13에 있어서, 상기 BIM DB는 상기 적어도 하나 이상의 건물 내부의 실내 이미지들에 대해 콘볼루션 신경망 네트워크를 수행하여 얻은 이미지 레이어들을 저장한 DB이고,상기 구조 정보는 상기 수신된 이미지에 대해 콘볼루션 신경망 네트워크를 수행하여 얻은 이미지 레이어에 포함된 이미지 특징맵의 형상인 이미지 기반 실내위치 검출방법
15 15
청구항 14에 있어서, 상기 이미지 레이어는,상기 콘볼루션 신경망 네트워크를 수행하여 얻은 제4 풀링 레이어인 이미지 기반 실내위치 검출방법
16 16
외부 서버로부터 적어도 하나 이상의 건물에 대한 BIM 데이터를 수신하는 단계;내장된 카메라를 통해 촬영된 이미지에 포함된 구조 정보를 추출하는 단계;상기 추출된 구조 정보를 상기 수신된 BIM 데이터에 포함된 어느 하나 이상의 실내 이미지와 매칭하여 기준치 이상의 유사도를 갖는 실내 이미지를 추출하는 단계;상기 추출된 이미지 레이어를 이용하여 사용자의 현재 위치를 검출하는 단계를 포함하는 이미지 기반 실내위치 검출방법
17 17
청구항 16에 있어서, 상기 BIM 데이터는 상기 적어도 하나 이상의 건물 내부의 실내 이미지들에 대해 콘볼루션 신경망 네트워크를 수행하여 얻은 이미지 레이어들이고,상기 구조 정보는 상기 수신된 이미지에 대해 콘볼루션 신경망 네트워크를 수행하여 얻은 이미지 레이어에 포함된 이미지 특징맵의 형상인 이미지 기반 실내위치 검출방법
18 18
청구항 17에 있어서, 상기 이미지 레이어는,상기 콘볼루션 신경망 네트워크를 수행하여 얻은 제4 풀링 레이어인 이미지 기반 실내위치 검출방법
19 19
컴퓨터에 의해 실행되며,적어도 하나 이상의 건물 내부의 실내 이미지 레이어들이 저장된 BIM DB를 형성하여 저장하는 단계;카메라를 통해 촬영된 이미지를 유무선 통신을 통해 수신하는 단계;상기 수신된 이미지에서 구조 정보를 추출하는 단계;상기 추출된 구조 정보를 상기 BIM DB에 저장된 이미지 레이어들의 구조 정보와 매칭하여 기준치 이상의 유사도를 갖는 이미지 레이어를 추출하는 단계;상기 추출된 이미지 레이어를 이용하여 사용자의 현재 위치를 검출하는 단계를 실행시키기 위한 프로그램을 기록한 컴퓨터 해독 가능한 기록 매체
20 20
컴퓨터에 의해 실행되며,외부 서버로부터 적어도 하나 이상의 건물에 대한 BIM 데이터를 수신하는 단계;내장된 카메라를 통해 촬영된 이미지에 포함된 구조 정보를 추출하는 단계;상기 추출된 구조 정보를 상기 수신된 BIM 데이터에 포함된 어느 하나 이상의 실내 이미지와 매칭하여 기준치 이상의 유사도를 갖는 실내 이미지를 추출하는 단계;상기 추출된 이미지 레이어를 이용하여 사용자의 현재 위치를 검출하는 단계를 실행시키기 위한 프로그램을 기록한 컴퓨터 해독 가능한 기록 매체
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 국토교통부 연세대학교 산학협력단 국토교통기술연구개발 [국토부/주관] 도로망 유지관리 정보 생성을 위한 일반 차량 탑재 모바일 기기 기반 도로 균열 검출 및 도로 미래 수명 예측 기술(1/2)