맞춤기술찾기

홈으로 가기
맞춤기술찾기
이전대상기술
프린트하기

이전대상기술

생성적 적대 신경망 기반 수어 영상 생성 시스템

  • 기술번호 : KST2021005581
  • 담당센터 : 서울동부기술혁신센터
  • 전화번호 : 02-2155-3662
상담신청 PDF 받기
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 생성적 적대 신경망 기반 수어 영상 생성 시스템이 제공된다. 본 발명의 일 실시예에 따른 수어 영상 생성 시스템은 음성 데이터를 획득하는 음성 입력부; 객체를 포함하는 이미지를 획득하는 이미지 입력부; 및 상기 음성 입력부에서 입력된 음성을 대응하는 수어를 이미지 입력부에서 입력된 이미지에 포함된 객체가 구사하는 수어 영상을 생성하는 수어 영상 생성 모델을 구축하는 수어 영상 생성 모델 학습부를 포함하는 수어 영상 생성 모델 학습 장치; 및 상기 수어 영상 생성 모델 학습 장치에서 생성된 수어 영상 생성 모델을 포함하는 수어 영상 생성부; 음성 데이터를 획득하는 음성 입력부; 및 객체를 포함하는 이미지를 획득하는 이미지 입력부를 포함하는 수어 영상 생성 장치를 포함한다.
Int. CL G06N 3/08 (2006.01.01) G06N 3/04 (2006.01.01) G10L 15/02 (2006.01.01) G06T 13/40 (2011.01.01)
CPC G06N 3/08(2013.01) G06N 3/04(2013.01) G10L 15/02(2013.01) G06T 13/40(2013.01)
출원번호/일자 1020190141461 (2019.11.07)
출원인 서울대학교산학협력단
등록번호/일자
공개번호/일자 10-2021-0055235 (2021.05.17) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2019.11.07)
심사청구항수 7

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 서울대학교산학협력단 대한민국 서울특별시 관악구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 윤성로 서울특별시 강남구
2 이장호 서울특별시 강남구
3 신채훈 부산광역시 북구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 김 순 영 대한민국 서울특별시 종로구 종로*길 **, **층 케이씨엘특허법률사무소 (수송동, 석탄회관빌딩)
2 김영철 대한민국 서울특별시 종로구 종로*길 **, **층 케이씨엘특허법률사무소 (수송동, 석탄회관빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application		 2019.11.07 수리 (Accepted) 1-1-2019-1142088-86
2 출원인정보변경(경정)신고서
Notification of change of applicant's information		 2020.11.25 수리 (Accepted) 4-1-2020-5265458-48
3 의견제출통지서
Notification of reason for refusal		 2021.03.25 발송처리완료 (Completion of Transmission) 9-5-2021-0242208-63
4 [거절이유 등 통지에 따른 의견]의견서·답변서·소명서
 2021.04.22 수리 (Accepted) 1-1-2021-0470000-64
5 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment		 2021.04.22 1-1-2021-0469999-14
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
음성 데이터를 획득하는 음성 입력부;객체를 포함하는 이미지를 획득하는 이미지 입력부; 및상기 음성 입력부에서 입력된 음성을 대응하는 수어를 이미지 입력부에서 입력된 이미지에 포함된 객체가 구사하는 수어 영상을 생성하는 수어 영상 생성 모델을 구축하는 수어 영상 생성 모델 학습부를 포함하는 수어 영상 생성 모델 학습 장치
2 2
제1 항에 있어서상기 수어 영상 생성 모델 학습부는, 상기 음성 데이터의 음성 특징 벡터를 추출하는 음성 특징 추출부; 상기 이미지의 이미지 특징 벡터를 추출하는 이미지 특징 추출부; 상기 추출된 음성 특징 벡터와 상기 추출된 이미지 특징 벡터를 결합(concatenation)하여 결합 특징 벡터를 생성하는 특징 결합부; 상기 결합 특징 벡터에 기초하여 수어 영상을 생성하는 수어 영상 생성부; 및 상기 생성된 수어 영상과 실제 수어 영상을 비교하여 실제 수어 영상을 식별하는 수어 영상 식별부를 포함하고, 상기 수어 영상 생성부와 상기 수어 영상 식별부는 생성적 적대 신경망을 구성하는 수어 영상 생성 모델 학습 장치
3 3
제2 항에 있어서,상기 생성적 적대 신경망은 하기 수학식 1과 같은 손실 함수를 통해 학습을 수행하는 것을 특징으로 하는 수어 영상 생성 모델 학습 장치
4 4
제2 항에 있어서,상기 수어 영상 식별부는 상기 실제 수어 영상을 유사한 수어 영상을 생성하기 위해 하기 수학식 2와 같은 손실 함수를 통해 학습을 수행하는 것을 특징으로 하는 수어 영상 생성 모델 학습 장치
5 5
제2 항에 있어서,상기 음성 특징 추출부과 상기 이미지 특징 추출부의 특징 벡터 추출 방식은 서로 상이한 것을 특징으로 하는 수어 영상 생성 모델 학습 장치
6 6
제5 항에 있어서, 상기 음성 특징 추출부는 1D Convolution Neural Network를 임베딩 네트워크(Embedding network)로 활용하여 음성 데이터를 음성 특징 벡터로 추출하고, 상기 이미지 특징 추출부는 2D Convolution Neural Network(CNN)을 임베딩 네트워크(Embedding network)로 활용하여 이미지 데이터를 이미지 특징 벡터로 추출하는 것을 특징으로 하는 수어 영상 생성 모델 학습 장치
7 7
제1 항 내지 제6 항 중 적어도 한 항에 따른 수어 영상 생성 모델 학습 장치에서 생성된 수어 영상 생성 모델을 포함하는 수어 영상 생성부; 음성 데이터를 획득하는 음성 입력부; 및객체를 포함하는 이미지를 획득하는 이미지 입력부를 포함하되, 상기 수어 영상 생성부는 상기 수어 영상 생성 모델을 통해 상기 음성 입력부에서 입력된 음성을 대응하는 수어를 이미지 입력부에서 입력된 이미지에 포함된 객체가 구사하는 수어 영상을 생성하는 것을 특징으로 하는 수어 영상 생성 장치
8 8
제7 항에 있어서,상기 수어 영상 생성부는 입력된 음성 및 이미지에서 음성 특징 벡터 및 이미지 특징 벡터를 각각 추출하고, 추출된 음성 특징 벡터 및 이미지 특징 벡터를 결합(concatenation)하여 결합 특징 벡터를 생성하며, 생성된 결합 특징 벡터를 상기 수어 영상 생성 모델에 입력하여 상기 수어 영상을 생성하는 수어 영상 생성 장치
9 9
음성 데이터를 획득하는 음성 입력부; 객체를 포함하는 이미지를 획득하는 이미지 입력부; 및 상기 음성 입력부에서 입력된 음성을 대응하는 수어를 이미지 입력부에서 입력된 이미지에 포함된 객체가 구사하는 수어 영상을 생성하는 수어 영상 생성 모델을 구축하는 수어 영상 생성 모델 학습부를 포함하는 수어 영상 생성 모델 학습 장치; 및상기 수어 영상 생성 모델 학습 장치에서 생성된 수어 영상 생성 모델을 포함하는 수어 영상 생성부; 음성 데이터를 획득하는 음성 입력부; 및 객체를 포함하는 이미지를 획득하는 이미지 입력부를 포함하는 수어 영상 생성 장치를 포함하는 수어 영상 생성 시스템
지정국 정보가 없습니다
패밀리정보가 없습니다
국가 R&D 정보가 없습니다.