맞춤기술찾기

이전대상기술

딥러닝을 이용한 시설물 결함 검측 장치 및 그 방법

  • 기술번호 : KST2021001308
  • 담당센터 : 서울서부기술혁신센터
  • 전화번호 : 02-6124-6930
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 딥러닝을 이용한 시설물 결함 검측 장치 및 그 방법이 개시된다. 딥러닝을 이용한 시설물 결함 검측 장치는, 시설물 영상을 촬영하는 라인 스캔 카메라; 상기 시설물 영상과 기준 영상의 위상 상관(phase correlation) 결과를 이용하여 상기 시설물 영상과 상기 기준 영상을 정합하는 영상 재구성부; 상기 정합된 시설물 영상 및 상기 기준 영상을 딥러닝 기반 시설물 검출 모델에 적용하여 시설물을 검출하는 시설물 검출부; 및 상기 시설물 영상 및 상기 기준 영상에서 검출된 두 시설물간의 호모그래피와 광량 흐름 추정을 통해 영상 변환을 수행하고, 상기 영상 변환된 두 시설물에 모폴로지 연산을 통해 잡음을 제거하여 결함 영역을 검출하는 변형 검사부를 포함한다.
Int. CL G01N 21/88 (2006.01.01) G06T 7/00 (2017.01.01) G06V 10/40 (2022.01.01) G06V 10/75 (2022.01.01)
CPC G01N 21/8851(2013.01) G01N 21/8851(2013.01) G01N 21/8851(2013.01) G01N 21/8851(2013.01) G01N 21/8851(2013.01)
출원번호/일자 1020190161867 (2019.12.06)
출원인 중앙대학교 산학협력단, 투아이시스(주)
등록번호/일자 10-2221317-0000 (2021.02.23)
공개번호/일자
공고번호/일자 (20210302) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2019.12.06)
심사청구항수 12

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 중앙대학교 산학협력단 대한민국 서울특별시 동작구
2 투아이시스(주) 대한민국 경기도 군포시 고산로 ***번길 ** ,

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 백준기 서울특별시 서초구
2 장진범 경기도 수원시 영통구
3 신민우 서울특별시 동작구
4 추연승 충청남도 천안시 서북구
5 임소희 전라북도 전주시 덕진구
6 박종국 경기도 군포시 고산로***번길 **,
7 김정연 경기도 군포시 고산로***번길 **,

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 최관락 대한민국 서울특별시 강남구 강남대로**길 ** (역삼동) 동림빌딩 *층(아이피즈국제특허법률사무소)
2 송인호 대한민국 서울특별시 강남구 강남대로**길 ** (역삼동) 동림빌딩 *층(아이피즈국제특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 중앙대학교 산학협력단 대한민국 서울특별시 동작구
2 투아이시스(주) 대한민국 경기도 군포시 고산로 ***번길 ** ,
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2019.12.06 수리 (Accepted) 1-1-2019-1264879-12
2 선행기술조사의뢰서
Request for Prior Art Search
2020.06.12 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2020.09.08 발송처리완료 (Completion of Transmission) 9-6-2020-0129234-11
4 의견제출통지서
Notification of reason for refusal
2020.09.25 발송처리완료 (Completion of Transmission) 9-5-2020-0665550-83
5 [거절이유 등 통지에 따른 의견]의견서·답변서·소명서
2020.11.23 수리 (Accepted) 1-1-2020-1253558-27
6 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2020.11.23 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2020-1253559-73
7 등록결정서
Decision to grant
2021.02.15 발송처리완료 (Completion of Transmission) 9-5-2021-0126316-08
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
시설물 영상을 촬영하는 라인 스캔 카메라;상기 시설물 영상과 기준 영상의 위상 상관(phase correlation) 결과를 이용하여 상기 시설물 영상과 상기 기준 영상을 정합하는 영상 재구성부;상기 정합된 시설물 영상 및 상기 기준 영상을 딥러닝 기반 시설물 검출 모델에 적용하여 시설물을 검출하는 시설물 검출부; 및상기 시설물 영상 및 상기 기준 영상에서 검출된 두 시설물간의 호모그래피와 광량 흐름 추정을 통해 영상 변환을 수행하고, 상기 영상 변환된 두 시설물에 모폴로지 연산을 통해 잡음을 제거하여 결함 영역을 검출하는 변형 검사부를 포함하되,상기 변형 검사부는, 상기 두 시설물간의 호모그래피 및 광량 흐름 추정에 기반한 영상 변환을 통해 두 시설물의 위치를 보정하는 영상 와핑부;상기 두 시설물간의 밝기를 매칭하는 히스토그램 매칭부; Weber 법칙을 이용하여 상기 두 시설물을 비교한 후 차분하여 결함 후보군을 검출하는 영상 비교부; 및상기 결함 후보군에 대한 모폴로지 연산을 통해 잡음을 제거하여 최종 결함 영역을 검출하는 형태학 처리부를 포함하는 것을 특징으로 하는 시설물 결함 검측 장치
2 2
제1 항에 있어서, 상기 영상 재구성부는, 상기 시설물 영상과 기준 영상의 위상 상관(phase correlation)을 통해 모션 벡터를 도출하고, 상기 모션 벡터를 이용하여 상기 기준 영상의 시설물 위치를 상기 시설물 영상내의 시설물 위치와 근사하도록 상기 기준 영상을 이동시키는 영상 정합부; 및상기 기준 영상의 이동에 따른 시설물의 손실 영역을 이전 구간에서 촬영된 영상을 이용하여 합성하는 영상 합성부를 포함하는 것을 특징으로 하는 시설물 결함 검측 장치
3 3
제1 항에 있어서, 상기 시설물 검출부는, 상기 기준 영상의 가로 및 세로 비율이 1:1이 되도록 복수의 영상으로 분할하는 영상 분할부;상기 분할된 영상에서 딥러닝 기반 시설물 검출 모델에 적용하여 시설물을 검출을 검출하는 시설물 검출부;상기 분할된 영상에서 검출된 시설물들을 상기 기준 영상에 매칭되도록 시설물을 합성하는 시설물 합성부; 및상기 시설물 영상 및 상기 기준 영상에서 시설물을 각각 검출하고, 상기 합성된 시설물과의 위상 상관을 통해 상기 시설물 영상 및 상기 기준 영상의 시설물 위치를 매칭 및 정렬하는 시설물 정렬부를 포함하는 것을 특징으로 하는 시설물 결함 검측 장치
4 4
삭제
5 5
제1 항에 있어서, 상기 히스토그램 매칭부는, 상기 기준 영상과 상기 시설물 영상의 밝기 누적 분포를 도출한 결과를 이용하여 상기 기준 영상의 밝기를 상기 시설물 영상의 밝기 분포에 매칭시키는 것을 특징으로 하는 시설물 결함 검측 장치
6 6
제1 항에 있어서, 상기 영상 비교부는,상기 밝기 매칭된 두 시설물의 절대값 차분을 이용하여 상기 기준 영상과 상기 시설물 영상의 두 시설물에서 밝기 및 모양이 다른 부분을 검출하며, Weber 법칙과 상기 두 시설물의 에지 합의 역을 차분한 결과를 곱하여 최종 차분 결과를 도출하되,상기 최종 차분 결과를 이용하여 결함 후보군을 검출하는 것을 특징으로 하는 시설물 결함 검측 장치
7 7
제1 항에 있어서, 상기 형태학 처리부는, 상기 결함 후보군에 모폴로지 연산을 수행하여 잡음을 제거하고, 닫힘 연산(closing operator)을 통해 최종 결함 영역을 획득하는 것을 특징으로 하는 시설물 결함 검측 장치
8 8
제1 항에 있어서,상기 라인 스캔 카메라는 열차 상단부에 설치되어 구조물 상부를 촬영하는 것을 특징을 하는 시설물 결함 검측 장치
9 9
(a) 시설물 영상을 촬영하는 단계;(b) 상기 시설물 영상과 기준 영상의 위상 상관(phase correlation) 결과를 이용하여 상기 시설물 영상과 상기 기준 영상을 정합하는 단계;(c) 상기 정합된 시설물 영상 및 상기 기준 영상을 딥러닝 기반 시설물 검출 모델에 적용하여 시설물을 검출하는 단계; 및(d) 상기 시설물 영상 및 상기 기준 영상에서 검출된 두 시설물간의 호모그래피와 광량 흐름 추정을 통해 영상 변환을 수행하고, 상기 영상 변환된 두 시설물에 모폴로지 연산을 통해 잡음을 제거하여 결함 영역을 검출하는 단계를 포함하되,상기 (d) 단계는, 상기 두 시설물간의 호모그래피와 광량 흐름 추정에 기반한 영상 변환을 통해 두 시설물의 위치를 보정하는 단계;상기 기준 영상과 상기 시설물 영상의 밝기 누적 분포를 도출한 결과를 이용하여 상기 기준 영상의 밝기를 상기 시설물 영상의 밝기 분포에 매칭시키는 단계;Weber 법칙을 이용하여 상기 두 시설물을 비교한 후 차분하여 결함 후보군을 검출하는 단계; 및 상기 결함 후보군에 대한 모폴로지 연산을 통해 잡음을 제거하여 최종 결함 영역을 검출하는 단계를 포함하는 것을 특징으로 하는 시설물 결함 검측 방법
10 10
제9 항에 있어서, 상기 (b) 단계는, 상기 시설물 영상과 기준 영상의 위상 상관(phase correlation)을 통해 모션 벡터를 도출하고, 상기 모션 벡터를 이용하여 상기 기준 영상의 시설물 위치를 상기 시설물 영상내의 시설물 위치와 근사하도록 상기 기준 영상을 이동시키는 단계; 및상기 기준 영상의 이동에 따른 손실 영역을 이전 구간에서 촬영된 영상을 이용하여 합성하는 단계를 포함하는 것을 특징으로 하는 시설물 결함 검측 방법
11 11
제9 항에 있어서, 상기 (c) 단계는, 상기 기준 영상의 가로 및 세로 비율이 1:1이 되도록 복수의 영상으로 분할하는 단계;상기 분할된 영상에서 딥러닝 기반 시설물 검출 모델에 적용하여 시설물을 검출하는 단계;상기 분할된 영상에서 검출된 시설물들을 상기 기준 영상에 매칭되도록 시설물을 합성하는 단계;상기 시설물 영상 및 상기 기준 영상에서 시설물을 각각 검출하고, 상기 합성된 시설물과의 위상 상관을 통해 상기 시설물 영상 및 상기 기준 영상의 시설물 위치를 매칭 및 정렬하는 단계를 포함하는 것을 특징으로 하는 시설물 결함 검측 방법
12 12
삭제
13 13
제9 항에 있어서, 상기 결함 후보군을 검출하는 단계는, 상기 밝기 매칭된 두 시설물의 절대값 차분을 이용하여 상기 기준 영상과 상기 시설물 영상의 두 시설물에서 밝기 및 모양이 다른 부분을 검출하며, Weber 법칙과 상기 두 시설물의 에지 합의 역을 차분한 결과를 곱하여 최종 차분 결과를 도출하되,상기 최종 차분 결과를 이용하여 결함 후보군을 검출하는 것을 특징으로 하는 시설물 결함 검측 방법
14 14
제9 항 내지 제11항 또는 제13항 중 어느 하나의 항에 따른 방법을 수행하기 위한 프로그램 코드를 기록한 컴퓨터로 판독 가능한 기록매체 제품
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 국토교통부 투아이시스(주) 철도기술연구사업(R&D) 도시철도 선로(터널) 시설물 자율점검 분석시스템