맞춤기술찾기

홈으로 가기
맞춤기술찾기
이전대상기술
프린트하기

이전대상기술

입술움직임 영상 판별 방법 및 그 장치

  • 기술번호 : KST2015099192
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
상담신청 PDF 받기
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 음성인식을 위해 수신되는 비디오를 분석하여 입술움직임이 있는지의 여부를 확인할 때, 다양한 움직임 영상을 대상으로 입술움직임 영상과 그 이외의 영상을 분류하는 입술움직임 영상 판별 방법 및 그 장치에 관한 것으로, 본 발명은 온라인 입술움직임 영상 판별 방법에 있어서, 촬영수단으로부터 수신되는 움직임영상프레임을 분석하여 입술움직임 영상에 대한 최종후보를 추출하는 제 1 단계; 및 영상추출수단으로부터 수신되는 상기 최종후보를 입술움직임 변별력 특징을 기준으로 입술움직임 영역과 여타요소 움직임 영역으로 온라인 상에서 레이블링하고, 최종후보 중에서 입술움직임 영역 및 여타요소 움직임 영역으로 분류되지 않은 최종후보에 대한 입술움직임 영상 여부를 SVM 영역분류구분선을 근거로 판별하는 제 2 단계;를 포함하는 것을 특징으로 한다.
Int. CL G06K 9/46 (2006.01) G06T 7/00 (2006.01) G06T 7/20 (2006.01)
CPC G06K 9/00335(2013.01) G06K 9/00335(2013.01)
출원번호/일자 1020070133391 (2007.12.18)
출원인 한국전자통신연구원
등록번호/일자 10-0924795-0000 (2009.10.27)
공개번호/일자 10-2009-0065866 (2009.06.23) 문서열기
공고번호/일자 (20091103) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 소멸
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2007.12.18)
심사청구항수 13

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국전자통신연구원 대한민국 대전광역시 유성구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 이수종 대한민국 대전 유성구
2 박준 대한민국 대전 유성구
3 김상훈 대한민국 대전 유성구
4 이윤근 대한민국 대전 서구
5 김응규 대한민국 대전 서구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 한양특허법인 대한민국 서울특별시 강남구 논현로**길 **, 한양빌딩 (도곡동)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 백기동 경상북도 포항시 남구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application		 2007.12.18 수리 (Accepted) 1-1-2007-0910726-17
2 선행기술조사의뢰서
Request for Prior Art Search		 2008.09.08 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search		 2008.10.15 수리 (Accepted) 9-1-2008-0068148-52
4 의견제출통지서
Notification of reason for refusal		 2009.04.30 발송처리완료 (Completion of Transmission) 9-5-2009-0185042-16
5 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment		 2009.06.30 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2009-0397966-92
6 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)		 2009.06.30 수리 (Accepted) 1-1-2009-0397967-37
7 출원인정보변경(경정)신고서
Notification of change of applicant's information		 2009.08.04 수리 (Accepted) 4-1-2009-5150899-36
8 등록결정서
Decision to grant		 2009.10.23 발송처리완료 (Completion of Transmission) 9-5-2009-0436393-36
9 출원인정보변경(경정)신고서
Notification of change of applicant's information		 2015.02.02 수리 (Accepted) 4-1-2015-0006137-44
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
입술움직임 영상 판별 방법으로서, 촬영수단으로부터 수신되는 사람 얼굴에 대한 움직임 영상 프레임들을 분석하여 입술움직임에 대한 영상으로 추정되는 최종후보들을 추출하는 제 1 단계; 및 상기 추출된 최종후보들 각각을 입술움직임과 여타움직임으로 구분하기 위한 입술움직임에 대한 변별력 있는 특징을 기준으로 SVM분류기법에 따른 좌표평면 상에 영역별로 분류해서 상기 좌표평면 상에 위치하는 영역에 따라 입술움직임 영상인지의 여부를 판단하되, 상기 분류된 최종후보들 중에서 상기 입술움직임에 대한 변별력 있는 특징으로는 구분하기 어려운 영역에 위치하는 최종후보들을 이원분류하기 위한 영역분류구분선을 근거로 입술움직임 영상 인지의 여부를 판별하는 제 2 단계;를 포함하는 것을 특징으로 하는 입술움직임 영상 판별 방법
2 2
입술움직임 영상 판별 방법으로서, 촬영수단으로부터 수신되는 사람 얼굴에 대한 움직임 영상 프레임들을 입술움직임에 대한 영상특징들과의 비교 및 입술움직임에 대한 템플릿들과의 비교를 통하여 분석해서 입술움직임에 대한 영상으로 추정되는 최종후보들을 추출하는 제 1 단계; 상기 입술움직임에 대한 영상특징 중에서 최고의 변별력을 갖는 두개 이상의 입술움직임에 대한 변별력 특징을 선정하여 그 선정된 영상특징들을 입술움직임과 여타움직임으로 구분하기 위한 입술움직임에 대한 변별력 있는 특징들로 선정하는 제 2 단계; 상기 추출된 최종후보들 각각을 상기 입술움직임에 대한 변별력 있는 특징을 기준으로 SVM분류기법에 따른 좌표평면 상에 영역별로 분류해서 상기 좌표평면 상에 위치하는 영역에 따라 입술움직임 영상인지의 여부를 판단하되, 상기 분류된 최종후보들 중에서 상기 입술움직임에 대한 변별력 있는 특징으로는 구분하기 어려운 영역에 위치하는 최종후보들을 이원분류하기 위한 영역분류구분선을 근거로 입술움직임 영상 인지의 여부를 판별하는 제 3 단계;를 포함하는 것을 특징으로 하는 입술움직임 영상 판별 방법
3 3
제 2 항에 있어서, 상기 제 2 단계는, 상기 제 1 단계에서의 입술움직임에 대한 최종후보로 추정된 영상특징들 각각과 기 설정된 입술움직임에 대한 표준 영상특징과의 일치하는 정도에 따라 대비율을 산출하고, 그 산출된 대비율을 근거로 최고의 변별력을 갖는 두개 이상의 입술움직임에 대한 변별력 특징을 선정하는 것을 특징으로 하는 입술움직임 영상 판별 방법
4 4
제 2 항에 있어서, 상기 제 3 단계는, 상기 제 1 단계의 추출된 최종후보들 각각을 상기 입술움직임에 대한 변별력 있는 특징을 기준으로 분류기준으로 하여 좌표평면 상에 표시하는 제 3-1 단계; 상기 입술움직임에 대한 변별력 특징으로부터 상기 좌표평면의 영역을 구분하기 위한 영역구분선을 도출하고, 상기 좌표평면을 상기 영역구분선을 기준으로 영역별로 분류하는 제 3-2 단계; 상기 영역구분선을 기준으로 분류된 좌표평면상에서 상기 영역구분선에 최근접하는 두 개 이상의 최종후보들을 두 개의 영역에서 각각 추출하고 그 추출된 최종후보간의 거리의 제곱의 합의 최소값을 갖는 이원분류하기 위한 영역분류구분선을 산출하는 제 3-3 단계; 및 상기 분류된 최종후보들 중에서 상기 좌표평면상에서 상기 입술움직임에 대한 변별력 있는 특징으로는 구분하기 어려운 영역에 위치하는 최종후보들을 상기 영역분류구분선을 근거로 입술움직임 영상인지의 여부를 판별하는 제 3-4 단계; 를 포함하는 것을 특징으로 하는 입술움직임 영상 판별 방법
5 5
제 4 항에 있어서, 상기 제 3-1 단계는, 상기 추출된 입술움직임에 대한 최종후보들 각각과 입술움직임 표준영상간의 변별력 있는 특징을 대비시켜 일치하는 정도에 따라 산출된 대비율을 근거로, 좌표평면 상에 입술움직임을 표시하는 입술움직임 영역 및 여타 움직임을 표시하는 여타 움직임 영역으로 나누어 레이블링하는 것을 특징으로 하는 입술움직임 영상 판별 방법
6 6
제 4 항에 있어서, 상기 제 3-2 단계는, 상기 영역구분선을 상기 추출된 최종후보들 각각과 입술움직임에 대한 변별력 있는 특징을 대비하여 산출된 대비율을 근거로 산출하는 것을 특징으로 하는 입술움직임 영상 판별 방법
7 7
제 4 항에 있어서, 상기 제 3-4 단계는, 상기 제 3-1 단계에서 추출된 최종후보들 각각과 입술움직임에 대한 변별력 있는 특징을 대비하여 일치하는 정도에 따라 산출된 대비율에 따라 레이블링된 좌표평면을 상기 영역분류구분선을 근거로 입술움직임을 표시하는 입술움직임 영역 및 여타 움직임을 표시하는 여타 움직임 영역으로 분류하여 입술움직임 영상인지의 여부를 판별하는 것을 특징으로 하는 입술움직임 영상 판별 방법
8 8
제 1 항 또는 제 2 항에 있어서, 상기 제 1 단계는, 촬영수단으로부터 수신되는 사람 얼굴에 대한 영상 프레임들 각각으로부터 인접 프레임간의 변이를 근거로 움직임 영상 프레임을 추출하는 제 1-1 단계; 상기 제 1-1 단계에서 추출된 움직임 영상들을 각각 분리하여 라벨링하고, 상기 분리된 움직임의 특징벡터(Feature Vector)와 기설정된 입술움직임 표준영상의 특징벡터를 서로 비교하여 유사도가 높은 순으로 입술움직임에 대한 영상후보들을 선정하는 제 1-2 단계; 및 상기 제 1-2 단계에서 선정된 입술움직임에 대한 영상후보들 중에서 입술움직임과 근접하고 입술움직임 과정에서 상대적으로 변화가 없는 영상으로부터 추출된 템플릿을 포함하는 템플릿 모델을 근거로 입술움직임 영상에 대한 최종후보들을 추출하는 제 1-3 단계; 를 포함하는 것을 특징으로 하는 입술움직임 영상 판별 방법
9 9
제 8 항에 있어서, 상기 제 1-3 단계에서 추출된 상기 입술움직 영상에 대한 최종후보 중에서 입술 움직임에 가장 근접한 입술움직임에 대한 표준영상을 추출하는 제 1-4 단계; 및 상기 표준영상을 근거로 특징벡터 모델 및 템플릿 모델을 학습시켜 업데이트 하는 제 1-5 단계; 를 더 포함하는 것을 특징으로 하는 입술움직임 영상 판별 방법
10 10
입술움직임 영상 판별 장치로서, 촬영수단으로부터 수신되는 사람 얼굴에 대한 움직임 영상 프레임들을 입술움직임에 대한 영상특징들과의 비교 및 입술움직임에 대한 템플릿들과의 비교를 통하여 분석해서 입술움직임에 대한 영상으로 추정되는 최종후보들을 추출하는 영상추출수단; 상기 입술움직임에 대한 영상특징 중에서 최고의 변별력을 갖는 두개 이상의 입술움직임에 대한 변별력 특징을 선정하여 그 선정된 영상특징들을 입술움직임과 여타움직임으로 구분하기 위한 입술움직임에 대한 변별력 있는 특징들로 선정하는 입술움직임 변별력 특징선정수단; 상기 추출된 최종후보들 각각을 입술움직임에 대한 변별력 있는 특징을 기준으로 SVM분류기법에 따른 좌표평면 상에 영역별로 분류해서 상기 좌표평면 상에 위치하는 영역에 따라 입술움직임 영상인지의 여부를 판단하되, 상기 분류된 최종후보들 중에서 상기 입술움직임에 대한 변별력 있는 특징으로는 구분하기 어려운 영역에 위치하는 최종후보들을 이원분류하기 위한 영역분류구분선을 근거로 입술움직임 영상 인지의 여부를 판별하는 SVM분류수단;을 포함하는 것을 특징으로 하는 입술움직임 영상 판별 장치
11 11
제 10 항에 있어서, 상기 SVM분류수단은, 상기 추출된 최종후보들 각각을 상기 입술움직임에 대한 변별력 있는 특징을 기준으로 분류기준으로 하여 좌표평면 상에 표시하고, 상기 입술움직임에 대한 변별력 있는 특징으로부터 상기 좌표평면의 영역을 구분하기 위한 영역구분선을 도출하고, 상기 좌표평면을 상기 영역구분선을 기준으로 영역별로 분류하는 영역분류부; 상기 영역구분선을 기준으로 분류된 좌표평면상에서 상기 영역구분선에 최근접하는 두 개 이상의 최종후보들을 두 개의 영역에서 각각 추출하고 그 추출된 최종후보간의 거리의 제곱의 합의 최소값을 갖는 이원분류하기 위한 영역분류구분선을 산출하는 영역구분선도출부; 및 상기 분류된 최종후보들 중에서 상기 좌표평면상에서 상기 입술움직임에 대한 변별력 있는 특징으로는 구분하기 어려운 영역에 위치하는 최종후보들을 상기 영역분류구분선을 근거로 입술움직임 영상인지의 여부를 판별하는 입술 움직임 영상분류부; 를 포함하는 것을 특징으로 하는 입술움직임 영상 판별 장치
12 12
제 11 항에 있어서, 상기 영역분류부는, 상기 추출된 입술움직임에 대한 최종후보들 각각과 입술움직임 표준영상간의 변별력 있는 특징을 대비시켜 일치하는 정도에 따라 산출된 대비율을 근거로, 좌표평면 상에 입술움직임을 표시하는 입술움직임 영역 및 여타 움직임을 표시하는 여타 움직임 영역으로 나누어 레이블링하는 것을 특징으로 하는 입술움직임 영상 판별 장치
13 13
제 11 항에 있어서, 상기 영역구분선도출부는, 상기 영역구분선을 상기 추출된 최종후보들 각각과 입술움직임에 대한 변별력 있는 특징을 대비하여 산출된 대비율을 근거로 산출하고, 상기 입술움직임 영상분류부는, 상기 영역분류부에서 추출된 최종후보들 각각과 입술움직임에 대한 변별력 있는 특징을 대비하여 일치하는 정도에 따라 산출된 대비율에 따라 레이블링된 초평면을 상기 영역분류구분선을 근거로 입술움직임을 표시하는 입술움직임 영역 및 여타 움직임을 표시하는 여타 움직임 영역으로 분류하여 입술움직임 영상인지의 여부를 판별하는 것을 특징으로 하는 입술움직임 영상 판별 장치
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 정보통신부 및 정보통신연구진흥원 한국전자통신연구원 IT성장동력기술개발 신성장동력산업용 대용량 대화형 분산 처리 음성인터페이스기술개발