맞춤기술찾기

이전대상기술

이미지 학습 기반의 착륙 제어 장치 및 방법

  • 기술번호 : KST2022012824
  • 담당센터 : 경기기술혁신센터
  • 전화번호 : 031-8006-1570
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 드론의 착륙 제어 방법 및 이를 수행하기 위한 장치가 개시된다. 일 실시예에 따른 퓨 샷 학습 방법은 비행 중인 드론에 구비된 카메라를 통해 지면을 촬영한 이미지를 획득하는 단계를 포함하고, 사전 학습된 제1 모델을 이용하여 이미지에서 드론의 착륙 후보 지점을 식별하는 단계를 포함하고, 이미지에 기초하여 착륙 후보 지점의 위치 및 크기를 결정하는 단계를 포함하고, 착륙 후보 지점의 크기에 기초하여 착륙 후보 지점에 드론이 착륙 가능한지 여부를 결정하고, 착륙 가능한 경우, 착륙 후보 지점을 착륙 지점으로 결정하는 단계를 포함하고, 드론이 착륙 후보 지점의 상공으로 이동하도록 드론을 제어하는 단계를 포함하고, 카메라가 착륙 지점을 지속적으로 촬영하도록 드론의 이동 거리 및 착륙 후보 지점의 위치에 기초하여 카메라의 틸트 각도를 조정하는 단계 및 드론이 착륙 지점의 상공에 도달한 경우, 착륙 지점의 상공에서 카메라에 의해 획득된 이미지에 기초하여 착륙 지점에서 착륙 가능한 영역을 식별하는 단계를 포함한다.
Int. CL G05D 1/06 (2006.01.01) G06T 7/70 (2017.01.01) G06T 7/60 (2017.01.01) H04N 5/232 (2006.01.01) G06N 3/08 (2006.01.01) G06K 9/00 (2022.01.01) B64C 39/02 (2006.01.01) B64D 45/08 (2006.01.01) B64D 47/08 (2006.01.01)
CPC G05D 1/0676(2013.01) G06T 7/70(2013.01) G06T 7/60(2013.01) H04N 5/23261(2013.01) G06N 3/08(2013.01) G06V 20/00(2013.01) B64C 39/024(2013.01) B64D 45/08(2013.01) B64D 47/08(2013.01) G06T 2210/12(2013.01) G06T 2207/30261(2013.01) B64C 2201/18(2013.01) B64C 2201/141(2013.01)
출원번호/일자 1020210002698 (2021.01.08)
출원인 아주대학교산학협력단
등록번호/일자
공개번호/일자 10-2022-0100768 (2022.07.18) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 공개
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2021.01.08)
심사청구항수 19

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 아주대학교산학협력단 대한민국 경기도 수원시 영통구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 권용진 경기도 수원시 영통구
2 이세담 경기도 안산시 상록구
3 허진영 강원도 철원군
4 고은성 경기도 수원시 영통구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 두호특허법인 대한민국 서울특별시 강남구 언주로***, *층(논현동,시그너스빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2021.01.08 수리 (Accepted) 1-1-2021-0026695-16
2 선행기술조사의뢰서
Request for Prior Art Search
2021.07.19 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2021.10.15 발송처리완료 (Completion of Transmission) 9-6-2021-0188767-85
4 의견제출통지서
Notification of reason for refusal
2022.02.19 발송처리완료 (Completion of Transmission) 9-5-2022-0137333-66
5 [출원서 등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2022.04.14 불수리 (Non-acceptance) 1-1-2022-0401972-45
6 서류반려이유통지서
Notice of Reason for Return of Document
2022.04.15 발송처리완료 (Completion of Transmission) 1-5-2022-0057864-80
7 [출원서 등 보완]보정서
2022.04.18 수리 (Accepted) 1-1-2022-0414237-10
8 [반려요청]서류 반려요청서·반환신청서
2022.04.18 수리 (Accepted) 1-1-2022-0411607-85
9 [공지예외적용 보완 증명서류]서류제출서
2022.04.18 수리 (Accepted) 1-1-2022-0414257-12
10 [거절이유 등 통지에 따른 의견]의견서·답변서·소명서
2022.04.19 수리 (Accepted) 1-1-2022-0419559-67
11 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2022.04.19 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2022-0419561-59
12 서류반려통지서
Notice for Return of Document
2022.04.20 발송처리완료 (Completion of Transmission) 1-5-2022-0060599-56
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
비행 중인 드론에 구비된 카메라를 통해 지면을 촬영한 이미지를 획득하는 단계; 사전 학습된 제1 모델을 이용하여 상기 이미지에서 상기 드론의 착륙 후보 지점을 식별하는 단계; 상기 이미지에 기초하여 상기 착륙 후보 지점의 위치 및 크기를 결정하는 단계; 상기 착륙 후보 지점의 크기에 기초하여 상기 착륙 후보 지점에 상기 드론이 착륙 가능한지 여부를 결정하고, 착륙 가능한 경우, 상기 착륙 후보 지점을 착륙 지점으로 결정하는 단계; 상기 드론이 상기 착륙 후보 지점의 상공으로 이동하도록 상기 드론을 제어하는 단계; 상기 카메라가 상기 착륙 지점을 지속적으로 촬영하도록 상기 드론의 이동 거리 및 상기 착륙 후보 지점의 위치에 기초하여 상기 카메라의 틸트 각도를 조정하는 단계; 및 상기 드론이 상기 착륙 지점의 상공에 도달한 경우, 상기 착륙 지점의 상공에서 카메라에 의해 획득된 이미지에 기초하여 상기 착륙 지점에서 착륙 가능한 영역을 식별하는 단계를 포함하는, 드론의 착륙 제어 방법
2 2
청구항 1에 있어서, 상기 제1 모델은, 상기 제1 모델로 입력된 이미지에서 착륙 후보 지점을 식별하고, 착륙 후보 지점이 식별된 경우, 상기 입력된 이미지에서 식별된 착륙 후보 지점에 대응하는 바운딩 박스를 생성하도록 사전 학습되며, 상기 드론의 착륙 후보 지점을 식별하는 단계는, 상기 제1 모델을 이용하여 상기 획득된 이미지에서 식별된 착륙 후보 지점에 대응하는 바운딩 박스를 생성하는, 드론의 착륙 제어방법
3 3
청구항 2에 있어서, 상기 착륙 후보 지점의 위치 및 크기를 결정하는 단계는, 상기 바운딩 박스의 좌표 데이터 셋을 획득하고, 상기 착륙 후보 지점의 위치를 결정하기 위해 바운딩 박스에 포함된 상기 좌표 데이터 셋을 상기 지면으로 정사영하는 단계를 포함하는, 드론의 착륙 제어 방법
4 4
청구항 2에 있어서, 상기 좌표 데이터 셋은, 상기 바운딩 박스의 좌표 및 상기 바운딩 박스의 좌표에 대응하는 상기 지면 상의 좌표를 포함하는, 드론의 착륙 제어방법
5 5
청구항 1에 있어서, 상기 조정하는 단계는, 기 설정된 주기 마다 상기 드론의 이동 거리에 기초하여 상기 카메라의 틸트 각도를 조정하는, 드론의 착륙 제어 방법
6 6
청구항 1에 있어서, 상기 착륙 가능한 영역을 식별하는 단계는, 상기 카메라의 틸트 각도가 기 설정된 임계각과 동일한 경우, 상기 드론이 상기 착륙 후보 지점의 상공에 도달한 것으로 판단하는, 드론의 착륙 제어방법
7 7
청구항 1에 있어서, 상기 착륙 가능한 영역을 식별하는 단계는, 사전 학습된 제2 모델을 이용하여 상기 착륙 지점에서 장애물을 식별하는 단계; 하나 이상의 장애물이 식별된 경우, 상기 하나 이상의 장애물 각각의 위치 및 크기를 결정하는 단계; 상기 결정된 하나 이상의 장애물 각각의 위치 및 크기에 기초하여 착륙 가능한 하나 이상의 착륙 후보 영역을 결정하는 단계; 상기 하나 이상의 착륙 후보 영역 중 하나를 상기 착륙 가능한 영역으로 결정하는 단계를 더 포함하는, 드론의 착륙 제어방법
8 8
청구항 7에 있어서, 상기 제2 모델은, 상기 제2 모델로 입력된 이미지에서 착륙 지점의 하나 이상의 장애물을 식별하고, 상기 입력된 이미지에서 식별된 하나 이상의 장애물 각각에 대응하는 바운딩 박스를 생성하도록 사전 학습되며, 상기 착륙 가능한 영역을 식별하는 단계는, 상기 제2 모델을 이용하여 상기 획득된 이미지에서 하나 이상의 식별된 장애물 각각에 대응하는 바운딩 박스를 생성하고, 상기 하나 이상의 장애물 각각의 위치 및 크기를 결정하는 단계는, 상기 하나 이상의 식별된 장애물 각각에 대응하는 상기 바운딩 박스의 좌표 데이터 셋을 획득하고, 상기 하나 이상의 식별된 장애물 각각에 대응하는 바운딩 박스에 포함된 상기 좌표 데이터 셋 각각을 상기 지면으로 정사영하여 상기 장애물의 위치를 결정하는 단계를 포함하는, 드론의 착륙 제어방법
9 9
청구항 8에 있어서, 상기 착륙 가능한 영역으로 결정하는 단계는, 상기 지면에 정사영 된 상기 좌표 데이터 셋 각각에 기초하여 상기 하나 이상의 장애물의 크기를 계산하는 단계; 계산된 하나 이상의 장애물에 기초하여 상기 하나 이상의 착륙 후보 영역을 결정하는 단계; 및상기 하나 이상의 착륙 후보 영역 각각의 크기를 상기 드론의 크기와 비교하여 착륙 영역을 결정하는 단계를 포함하는, 드론의 착륙 제어방법
10 10
비행 중인 드론에 구비된 카메라를 통해 지면을 촬영한 이미지를 획득하는 이미지 획득부; 사전 학습된 제1 모델을 이용하여 상기 이미지에서 상기 드론의 착륙 후보 지점을 식별하고, 상기 이미지에 기초하여 상기 착륙 후보 지점의 위치 및 크기를 결정하는 착륙 후보 지점 식별부; 상기 착륙 후보 지점의 크기에 기초하여 상기 착륙 후보 지점에 상기 드론이 착륙 가능한지 여부를 결정하고, 착륙 가능한 경우, 상기 착륙 후보 지점을 착륙 지점으로 결정하는 착륙 지점 결정부; 상기 드론이 상기 착륙 후보 지점의 상공으로 이동하도록 상기 드론을 제어하는 비행 제어부; 상기 카메라가 상기 착륙 지점을 지속적으로 촬영하도록 상기 드론의 이동 거리 및 상기 착륙 후보 지점의 위치에 기초하여 상기 카메라의 틸트 각도를 조정하는 카메라 틸트 각도 조정부; 및 상기 드론이 상기 착륙 지점의 상공에 도달한 경우, 상기 착륙 지점의 상공에서 카메라에 의해 획득된 이미지에 기초하여 상기 착륙 지점에서 착륙 가능한 영역을 식별하는 착륙 영역 식별부를 포함하는, 드론의 착륙 제어 장치
11 11
청구항 10에 있어서, 상기 제1 모델은, 상기 착륙 지점 식별 모델로 입력된 이미지에서 착륙 후보 지점을 식별하고, 착륙 후보 지점이 식별된 경우, 상기 입력된 이미지에서 식별된 착륙 후보 지점에 대응하는 바운딩 박스를 생성하도록 사전 학습되며, 상기 착륙 후보 지점 식별부는, 상기 제1 모델을 이용하여 상기 획득된 이미지에서 식별된 착륙 후보 지점에 대응하는 바운딩 박스를 생성하는, 드론의 착륙 제어장치
12 12
청구항 11에 있어서, 상기 착륙 후보 지점 식별부는, 상기 바운딩 박스의 좌표 데이터 셋을 획득하고, 상기 착륙 후보 지점의 위치를 결정하기 위해 바운딩 박스에 포함된 상기 좌표 데이터 셋을 상기 지면으로 정사영하는, 드론의 착륙 제어 장치
13 13
청구항 11에 있어서, 상기 좌표 데이터 셋은, 상기 바운딩 박스의 좌표 및 상기 바운딩 박스의 좌표에 대응하는 상기 지면 상의 좌표를 포함하고, 드론의 착륙 제어 장치
14 14
청구항 10에 있어서, 상기 틸트 각도 조정부는, 기 설정된 주기 마다 상기 드론의 이동 거리에 기초하여 상기 카메라의 틸트 각도를 조정하는, 드론의 착륙 제어 장치
15 15
청구항 10에 있어서, 상기 착륙 영역 식별부는, 상기 카메라의 틸트 각도가 기 설정된 임계각과 동일한 경우, 상기 드론이 상기 착륙 후보 지점의 상공에 도달한 것으로 판단하는, 드론의 착륙 제어 장치
16 16
청구항 9에 있어서, 상기 착륙 영역 식별부는, 사전 학습된 제2 모델을 이용하여 상기 착륙 지점에서 장애물을 식별하고, 하나 이상의 장애물이 식별된 경우, 상기 하나 이상의 장애물 각각의 위치 및 크기를 결정하고, 상기 결정된 하나 이상의 장애물 각각의 위치 및 크기에 기초하여 착륙 가능한 하나 이상의 착륙 후보 영역을 결정하고, 상기 하나 이상의 착륙 후보 영역 중 하나를 상기 착륙 가능한 영역으로 결정하는, 드론의 착륙 제어 장치
17 17
청구항 16에 있어서, 상기 제2 모델은, 상기 제2 모델로 입력된 이미지에서 착륙 지점의 하나 이상의 장애물을 식별하고, 상기 입력된 이미지에서 식별된 하나 이상의 장애물 각각에 대응하는 바운딩 박스를 생성하도록 사전 학습되며, 상기 착륙 영역 식별부는, 상기 제2 모델을 이용하여 상기 획득된 이미지에서 하나 이상의 식별된 장애물 각각에 대응하는 바운딩 박스를 생성하고, 상기 하나 이상의 식별된 장애물 각각에 대응하는 바운딩 박스의 좌표 데이터 셋을 획득하고, 상기 하나 이상의 식별된 장애물 각각에 대응하는 바운딩 박스에 포함된 상기 좌표 데이터 셋 각각을 상기 지면으로 정사영하여 장애물의 위치를 결정하는, 드론의 착륙 제어 장치
18 18
청구항 17에 있어서, 상기 착륙 영역 식별부는, 상기 지면에 정사영 된 상기 좌표 데이터 셋 각각에 기초하여 상기 하나 이상의 장애물의 크기를 계산하고, 계산된 하나 이상의 장애물에 기초하여 상기 하나 이상의 착륙 후보 영역을 결정하고, 상기 하나 이상의 착륙 후보 영역 각각의 크기를 상기 드론의 크기와 비교하여 착륙 영역을 결정하는, 드론의 착륙 제어 장치
19 19
비일시적 컴퓨터 판독 가능한 저장매체(non-transitory computer readable storage medium)에 저장된 컴퓨터 프로그램으로서,상기 컴퓨터 프로그램은 하나 이상의 명령어들을 포함하고, 상기 명령어들은 하나 이상의 프로세서들을 갖는 컴퓨팅 장치에 의해 실행될 때, 상기 컴퓨팅 장치로 하여금,비행 중인 드론에 구비된 카메라를 통해 지면을 촬영한 이미지를 획득하는 이미지 획득하고, 사전 학습된 제1 모델을 이용하여 상기 이미지에서 상기 드론의 착륙 후보 지점을 식별하고, 상기 이미지에 기초하여 상기 착륙 후보 지점의 위치 및 크기를 결정하고, 상기 착륙 후보 지점의 크기에 기초하여 상기 착륙 후보 지점에 상기 드론이 착륙 가능한지 여부를 결정하고, 착륙 가능한 경우, 상기 착륙 후보 지점을 착륙 지점으로 결정하고, 상기 드론이 상기 착륙 후보 지점의 상공으로 이동하도록 상기 드론을 제어하고, 상기 카메라가 상기 착륙 지점을 지속적으로 촬영하도록 상기 드론의 이동 거리 및 상기 착륙 후보 지점의 위치에 기초하여 상기 카메라의 틸트 각도를 조정하고, 상기 드론이 상기 착륙 지점의 상공에 도달한 경우, 상기 착륙 지점의 상공에서 카메라에 의해 획득된 이미지에 기초하여 상기 착륙 지점에서 착륙 가능한 영역을 식별하는, 컴퓨터 프로그램
지정국 정보가 없습니다
패밀리정보가 없습니다
국가 R&D 정보가 없습니다.