맞춤기술찾기

이전대상기술

영상 데이터의 라벨링 가이드 방법 및 자동 라벨링 장치

  • 기술번호 : KST2023002471
  • 담당센터 : 경기기술혁신센터
  • 전화번호 : 031-8006-1570
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 영상 데이터의 라벨링 가이드 방법 및 장치가 제공된다. 본 발명의 실시예에 따른 영상 데이터의 라벨링 가이드 방법은, 라벨링 대상이 포함된 영상 데이터가 자동 라벨링 장치에 입력되면, 자동 라벨링 장치가, 합성곱 신경망을 통해 영상 내 대상 객체 영역을 검출하고 신뢰도를 산출하는 단계; 자동 라벨링 장치가, 산출된 신뢰도에 따라 각 대상 객체를 라벨링 가이드 표시 유무 및 작업자의 작업 내용을 분류하기 위한 그룹에 할당하는 단계; 자동 라벨링 장치가, 기저장된 데이터베이스의 영상 내 객체 클러스터링 및 집합군과 대상 객체의 유사도를 산출하는 단계; 자동 라벨링 장치가, 객체 소속 그룹에 따른 대상 객체와 유사도가 높은 집합의 샘플 GT(Ground Truth) 데이터를 제공하는 단계; 및 자동 라벨링 장치가, 라벨링 작업 및 재학습을 통한 합성곱 신경망의 가중치를 갱신하는 단계;를 포함한다. 이에 의해, 작업자의 숙련도 향상 및 작업 오류 감소를 통한 재작업 부가비용을 절감시킬 수 있다.
Int. CL G06V 20/70 (2022.01.01) G06V 10/22 (2022.01.01) G06V 10/74 (2022.01.01) G06V 10/762 (2022.01.01) G06V 10/774 (2022.01.01) G06V 10/82 (2022.01.01) G06T 7/11 (2017.01.01) G06N 3/04 (2023.01.01) G06N 3/08 (2023.01.01)
CPC G06V 20/70(2013.01) G06V 10/22(2013.01) G06V 10/761(2013.01) G06V 10/762(2013.01) G06V 10/774(2013.01) G06V 10/82(2013.01) G06T 7/11(2013.01) G06N 3/045(2013.01) G06N 3/08(2013.01)
출원번호/일자 1020210192996 (2021.12.30)
출원인 한국전자기술연구원
등록번호/일자
공개번호/일자 10-2023-0102670 (2023.07.07) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 공개
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 N
심사청구항수 8

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국전자기술연구원 대한민국 경기도 성남시 분당구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 이상설 경기도 광주시
2 곽종훈 경기도 군포시 산본로 ***, *
3 성민용 경기도 성남시 분당구
4 장성준 경기도 성남시 분당구
5 박종희 경기도 성남시 분당구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 남충우 대한민국 서울 강남구 언주로 ***, *층(역삼동, 광진빌딩)(알렉스국제특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2021.12.30 수리 (Accepted) 1-1-2021-1529981-13
2 [출원서 등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2022.01.10 수리 (Accepted) 1-1-2022-0028361-64
3 특허고객번호 정보변경(경정)신고서·정정신고서
2023.03.14 수리 (Accepted) 4-1-2023-5062703-94
4 특허고객번호 정보변경(경정)신고서·정정신고서
2023.03.20 수리 (Accepted) 4-1-2023-5067768-12
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
라벨링 대상이 포함된 영상 데이터가 자동 라벨링 장치에 입력되면, 자동 라벨링 장치가, 합성곱 신경망을 통해 영상 내 대상 객체 영역을 검출하고 신뢰도를 산출하는 단계;자동 라벨링 장치가, 산출된 신뢰도에 따라 각 대상 객체를 라벨링 가이드 표시 유무 및 작업자의 작업 내용을 분류하기 위한 그룹에 할당하는 단계;자동 라벨링 장치가, 기저장된 데이터베이스의 영상 내 객체 클러스터링 및 집합군과 대상 객체의 유사도를 산출하는 단계;자동 라벨링 장치가, 객체 소속 그룹에 따른 대상 객체와 유사도가 높은 집합의 샘플 GT(Ground Truth) 데이터를 제공하는 단계; 및자동 라벨링 장치가, 라벨링 작업 및 재학습을 통한 합성곱 신경망의 가중치를 갱신하는 단계;를 포함하는 영상 데이터의 라벨링 가이드 방법
2 2
청구항 1에 있어서,객체의 그룹을 할당하는 단계는,기설정된 제1 임계값 이하의 신뢰도를 가진 객체를 별도의 가이드를 표시하지 않는 네거티브(negative) 그룹에 할당하고, 신뢰도가 기설정된 제1 임계값을 초과하되, 제1 임계값 보다 높게 설정된 제2 임계값 미만인 객체를 배경은 아니지만 합성곱 신경망에서 판단하기 어려운 객체에 해당하는 하드 포지티브(hard positive) 그룹에 할당하고, 제2 임계값 이상의 신뢰도를 가진 객체를 합성곱 신경망에서 판단 가능한 객체에 해당하는 이지 포지티브(easy positive) 그룹에 할당하는 것을 특징으로 하는 영상 데이터의 라벨링 가이드 방법
3 3
청구항 2에 있어서,자동 라벨링 장치는, 하드 포지티브 그룹에 할당된 객체가 이지 포지티브 그룹보다 기저장된 데이터베이스와 다른 형태의 대상 객체일 확률이 높기 때문에, 라벨링 작업 할당 시, 하드 포지티브 그룹에 할당된 객체가 포함된 영상 데이터를 다른 작업자보다 상대적으로 숙련도가 높은 작업자에게 할당하는 것을 특징으로 하는 영상 데이터의 라벨링 가이드 방법
4 4
청구항 2에 있어서,유사도를 산출하는 단계는,기저장된 데이터베이스에 존재하는 영상 내 객체를 클러스터링(K-NN)을 통해 그룹화하여 각 그룹의 대표 특징을 추출하고, 유사도가 높은 집합의 샘플 GT 데이터를 제공하는 단계는, 라벨링 대상 객체 영역에 대하여 동일하게 특징을 추출하고 각 그룹의 대표 특징과의 유사도 비교를 통해 가장 유사도가 높은 그룹의 객체 샘플과 박스 GT 데이터를 작업자 단말에 제공하며, 작업자 단말은,대상 객체에 대한 라벨링 수행 시, 화면에 샘플과 GT 데이터를 표시하여 데이터베이스 GT 데이터와 동일한 라벨링 결과가 도출되도록 하는 것을 특징으로 하는 영상 데이터의 라벨링 가이드 방법
5 5
청구항 4에 있어서,합성곱 신경망의 가중치를 갱신하는 단계는, 라벨링이 수행된 데이터가 기저장된 데이터베이스에 추가되어 저장되도록 하며, 데이터베이스에 기설정된 비율 이상의 데이터가 추가될 때마다, 재학습을 통해 합성곱 신경망의 가중치를 갱신하는 것을 특징으로 하는 영상 데이터의 라벨링 가이드 방법
6 6
청구항 1에 있어서,자동 라벨링 장치가, 영상 환경 속성 및 대상 객체 속성을 추론하는 단계;를 더 포함하고, 추론하는 단계는, 환경 속성 추론 시, 콘벌루션과 완전 연결 계층(fully-connected)으로 이루어진 합성곱 신경망이 영상별 라벨링된 환경 속성 정보를 영상의 GT로 설정하여 학습된 모델을 통해 장면 인식 결과가 도출되도록 하는 것을 특징으로 하는 영상 데이터의 라벨링 가이드 방법
7 7
청구항 6에 있어서,추론하는 단계는, 객체 속성 추론 시, 자동 라벨링을 수행하는 객체 검출 신경망을 통해 영상 내 대상 객체 영역이 추출되면, 추출된 영역에서 의미론적 분할 신경망을 통해 대상 객체의 세부 파트 영역이 추출되도록 하고, 대상 객체의 각 세부 파트 영역 내 위치하는 픽셀들의 신뢰도 및 영역 정보는, 신경망을 학습하기 위한 특징이 되는 것을 특징으로 하는 영상 데이터의 라벨링 가이드 방법
8 8
라벨링 대상이 포함된 영상 데이터가 입력되는 입력부;라벨링 대상이 포함된 영상 데이터가 입력되면, 합성곱 신경망을 통해 영상 내 대상 객체 영역을 검출하고 신뢰도를 산출하고, 산출된 신뢰도에 따라 각 대상 객체를 라벨링 가이드 표시 유무 및 작업자의 작업 내용을 분류하기 위한 그룹에 할당하며, 기저장된 데이터베이스의 영상 내 객체 클러스터링 및 집합군과 대상 객체의 유사도를 산출하고, 객체 소속 그룹에 따른 대상 객체와 유사도가 높은 집합의 샘플 GT(Ground Truth) 데이터를 제공하며, 라벨링 작업 및 재학습을 통한 합성곱 신경망의 가중치를 갱신하는 프로세서;를 포함하는 자동 라벨링 장치
지정국 정보가 없습니다
순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - 패밀리정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 WO2023128026 WO 세계지적재산권기구(WIPO) FAMILY

DOCDB 패밀리 정보

순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - DOCDB 패밀리 정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
DOCDB 패밀리 정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 산업통상자원부 한국전자기술연구원 자동차산업기술개발(R&D) 주행환경 탐지 및 도로객체 인식의 동시, 실시간 처리가 가능한 카메라 기반 인공지능 시스템 개발