맞춤기술찾기

이전대상기술

지식 증류 기반의 멀티모달 매핑 정보를 활용한 이미지 생성 기법

  • 기술번호 : KST2022006616
  • 담당센터 : 서울서부기술혁신센터
  • 전화번호 : 02-6124-6930
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 지식 증류 기반의 멀티모달 매핑 정보를 활용한 이미지 생성 기법이 개시된다. 일 실시예에 따른 이미지 생성 방법은, 기 학습된 텍스트 요약 모델을 이용하여 텍스트 데이터로부터 텍스트 요약 정보를 생성하는 단계; 및 기 학습된 이미지 모델에 상기 생성된 텍스트 요약 정보를 입력함에 따라 기 학습된 이미지 모델을 이용하여 상기 생성된 텍스트 요약 정보에 대한 새로운 이미지를 생성하는 단계를 포함할 수 있다.
Int. CL G06T 11/60 (2006.01.01) G06K 9/00 (2022.01.01) G06N 3/08 (2006.01.01)
CPC G06T 11/60(2013.01) G06V 30/40(2013.01) G06N 3/08(2013.01) G06T 2207/20081(2013.01)
출원번호/일자 1020200144691 (2020.11.02)
출원인 한양대학교 산학협력단
등록번호/일자
공개번호/일자 10-2022-0059288 (2022.05.10) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 공개
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2020.11.02)
심사청구항수 8

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한양대학교 산학협력단 대한민국 서울특별시 성동구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 조인휘 서울특별시 성동구
2 김현주 경기도 용인시 처인구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 양성보 대한민국 서울특별시 강남구 선릉로***길 ** (논현동) 삼성빌딩 *층(피앤티특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2020.11.02 수리 (Accepted) 1-1-2020-1168084-15
2 선행기술조사의뢰서
Request for Prior Art Search
2021.03.19 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2021.06.07 발송처리완료 (Completion of Transmission) 9-6-2022-0031887-53
4 의견제출통지서
Notification of reason for refusal
2022.02.17 발송처리완료 (Completion of Transmission) 9-5-2022-0132740-74
5 [거절이유 등 통지에 따른 의견]의견서·답변서·소명서
2022.04.06 수리 (Accepted) 1-1-2022-0366969-41
6 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2022.04.06 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2022-0366970-98
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
이미지 생성 방법에 있어서,기 학습된 텍스트 요약 모델을 이용하여 텍스트 데이터로부터 텍스트 요약 정보를 생성하는 단계; 및 기 학습된 이미지 모델에 상기 생성된 텍스트 요약 정보를 입력함에 따라 기 학습된 이미지 모델을 이용하여 상기 생성된 텍스트 요약 정보에 대한 새로운 이미지를 생성하는 단계를 포함하는 이미지 생성 방법
2 2
제1항에 있어서,상기 텍스트 요약 정보를 생성하는 단계는,상기 텍스트 데이터를 기 학습된 텍스트 요약 모델에 입력하고, 기 학습된 텍스트 요약 모델을 이용하여 지식 증류(Knowledge Distillation) 기법을 통해 상기 텍스트 데이터로부터 텍스트 요약 정보를 생성하고, 텍스트 요약의 결과로서 텍스트 임베딩을 출력하는 단계 를 포함하는 이미지 생성 방법
3 3
제1항에 있어서,상기 이미지를 생성하는 단계는, 기 학습된 이미지 모델을 이용하여 지식 증류(Knowledge Distillation) 기법을 통해 지식 추출을 수행함으로써 상기 생성된 텍스트 요약 정보로부터 이미지의 픽셀 특징 공간에서의 데이터 분포를 탐색하는 단계를 포함하는 이미지 생성 방법
4 4
제3항에 있어서,상기 이미지를 생성하는 단계는, 상기 생성된 텍스트 요약 정보를 텍스트 투 이미지(Text to Image)의 과정을 통해 이미지 정보로 변환하고, 상기 변환된 이미지 정보로부터 객체 정보를 검색하여 가장 유사한 객체를 검색하는 단계 를 포함하는 이미지 생성 방법
5 5
제4항에 있어서,상기 이미지를 생성하는 단계는, 상기 검색된 가장 유사한 객체를 포함하는 이미지를 기 학습된 이미지 모델에 입력하고, 상기 기 학습된 이미지 모델을 이용하여 상기 검색된 가장 유사한 객체와 관련된 제1차 유사 이미지를 획득하는 단계 를 포함하는 이미지 생성 방법
6 6
제5항에 있어서,상기 이미지를 생성하는 단계는, 상기 획득된 제1 차 유사 이미지를 GAN 기반의 이미지 생성자에 입력하고, 상기 GAN 기반의 이미지 생성자를 통해 상기 획득된 제1 차 유사 이미지에 대한 픽셀 정보에 기초하여 제2차 유사 이미지를 생성하는 단계를 포함하는 이미지 생성 방법
7 7
제6항에 있어서,상기 이미지를 생성하는 단계는, 상기 생성된 제2 차 유사 이미지를 이미지 투 텍스트(Image to Text)의 과정을 통해 상기 임베딩 벡터와의 정확도를 평가하고, 상기 평가된 정확도에 따라 상기 생성된 제2차 유사 이미지를 이미지 생성의 결과로서 제공하는 단계를 포함하는 이미지 생성 방법
8 8
이미지 생성 시스템에 있어서,기 학습된 텍스트 요약 모델을 이용하여 텍스트 데이터로부터 텍스트 요약 정보를 생성하는 텍스트 요약부; 및 기 학습된 이미지 모델에 상기 생성된 텍스트 요약 정보를 입력함에 따라 기 학습된 이미지 모델을 이용하여 상기 생성된 텍스트 요약 정보에 대한 새로운 이미지를 생성하는 이미지 생성부를 포함하는 이미지 생성 시스템
9 9
제8항에 있어서,상기 텍스트 요약부는,상기 텍스트 데이터를 기 학습된 텍스트 요약 모델에 입력하고, 기 학습된 텍스트 요약 모델을 이용하여 지식 증류(Knowledge Distillation) 기법을 통해 상기 텍스트 데이터로부터 상기 텍스트 요약 정보를 생성하고, 텍스트 요약의 결과로서 텍스트 임베딩을 출력하는 것을 특징으로 하는 이미지 생성 시스템
10 10
제8항에 있어서,상기 이미지 생성부는, 기 학습된 이미지 모델을 이용하여 지식 증류(Knowledge Distillation) 기법을 통해 지식 추출을 수행함으로써 상기 생성된 텍스트 요약 정보로부터 이미지의 픽셀 특징 공간에서의 데이터 분포를 탐색하는 것을 특징으로 하는 이미지 생성 시스템
11 11
제10항에 있어서,상기 이미지 생성부는, 상기 생성된 텍스트 요약 정보를 텍스트 투 이미지(Text to Image)의 과정을 통해 이미지 정보로 변환하고, 상기 변환된 이미지 정보로부터 객체 정보를 검색하여 가장 유사한 객체를 검색하는 것을 특징으로 하는 이미지 생성 시스템
12 12
제11항에 있어서,상기 이미지 생성부는, 상기 검색된 가장 유사한 객체를 포함하는 이미지를 기 학습된 이미지 모델에 입력하고, 상기 기 학습된 이미지 모델을 이용하여 상기 검색된 가장 유사한 객체와 관련된 제1차 유사 이미지를 획득하는 것을 특징으로 하는 이미지 생성 시스템
13 13
제12항에 있어서,상기 이미지 생성부는, 상기 획득된 제1 차 유사 이미지를 GAN 기반의 이미지 생성자에 입력하고, 상기 GAN 기반의 이미지 생성자를 통해 상기 획득된 제1 차 유사 이미지에 대한 픽셀 정보에 기초하여 제2차 유사 이미지를 생성하는 것을 특징으로 하는 이미지 생성 시스템
14 14
제13항에 있어서,상기 이미지 생성부는, 상기 생성된 제2 차 유사 이미지를 이미지 투 텍스트(Image to Text)의 과정을 통해 상기 임베딩 벡터와의 정확도를 평가하고, 상기 평가된 정확도에 따라 상기 생성된 제2차 유사 이미지를 이미지 생성의 결과로서 제공하는 것을 특징으로 하는 이미지 생성 시스템
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 과학기술정보통신부 (주)시큐레이어 한국연구재단 부설 정보통신기획평가원 / 정보통신방송 연구개발사업 / SW컴퓨팅산업원천기술개발사업(통합이지바로) 데이터 특징과 문제를 정의하는 빅데이터 분석모델 추천 자동화 기술 개발