맞춤기술찾기

이전대상기술

음성 인식을 위한 입술영역 검출 및 이를 이용한입술모양정보 획득방법

  • 기술번호 : KST2015112117
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 음성인식을 위해 입술영역을 검출하고 특징을 추출하여 입술모양정보를 획득하여 이를 음성인식에 이용할 수 있도록 하는 방법에 관한 것이다. 본 발명에 따른 입술모양정보 획득방법은, 색상과 색상별 입술색상확률값을 저장한 입술색유사도테이블과, 입술모양의 패턴을 학습한 패턴분류기가 구축된 상태에서, 얼굴영상이 입력되면 상기 입력 얼굴영상을 상기 입술색유사도테이블에 적용하여 입술색 유사도 영상을 얻는 입술색유사도영상획득단계와; 상기 입술색 유사도 영상에서 무게중심을 계산하여 입술 초기 위치를 추정하는 입술초기위치추정단계와; 상기 입술 초기 위치를 중심으로 일정 범위에 대해 상기 패턴분류기에서의 정합도를 계산하고, 정합도가 가장 높은 위치를 입술위치로 설정하는 입술위치설정단계와; 상기 입술위치설정단계에서 설정된 입술위치의 영상에 대해서 PCA((Principal Component Analysis) 계수를 추출하여 입술특징을 추출하는 입술특징추출단계를 포함한다. 입술위치, 학습, 얼굴영역, 입술특징, 입술모양
Int. CL G10L 15/25 (2013.01)
CPC G10L 15/25(2013.01)
출원번호/일자 1020030057475 (2003.08.20)
출원인 한국과학기술원
등록번호/일자 10-0532129-0000 (2005.11.23)
공개번호/일자 10-2005-0019599 (2005.03.03) 문서열기
공고번호/일자 (20051201) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 소멸
심사진행상태 수리
심판사항
구분
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2003.08.20)
심사청구항수 23

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국과학기술원 대한민국 대전광역시 유성구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 양현승 대한민국 대전광역시유성구
2 정지년 대한민국 경기도고양시일산구
3 박현진 대한민국 서울특별시도봉구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 전영일 대한민국 광주 북구 첨단과기로***번길**, ***호(오룡동)(특허법인세아 (광주분사무소))

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 한국과학기술원 대전광역시 유성구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 특허출원서
Patent Application
2003.08.20 수리 (Accepted) 1-1-2003-0306262-39
2 출원인정보변경(경정)신고서
Notification of change of applicant's information
2004.01.14 수리 (Accepted) 4-1-2004-0001933-29
3 출원인정보변경(경정)신고서
Notification of change of applicant's information
2004.03.19 수리 (Accepted) 4-1-2004-0012166-74
4 선행기술조사의뢰서
Request for Prior Art Search
2005.05.13 수리 (Accepted) 9-1-9999-9999999-89
5 선행기술조사보고서
Report of Prior Art Search
2005.06.16 수리 (Accepted) 9-1-2005-0036419-22
6 등록결정서
Decision to grant
2005.08.23 발송처리완료 (Completion of Transmission) 9-5-2005-0382716-42
7 출원인정보변경(경정)신고서
Notification of change of applicant's information
2013.02.01 수리 (Accepted) 4-1-2013-5019983-17
8 출원인정보변경(경정)신고서
Notification of change of applicant's information
2014.12.24 수리 (Accepted) 4-1-2014-5157993-01
9 출원인정보변경(경정)신고서
Notification of change of applicant's information
2014.12.24 수리 (Accepted) 4-1-2014-5158129-58
10 출원인정보변경(경정)신고서
Notification of change of applicant's information
2014.12.24 수리 (Accepted) 4-1-2014-5157968-69
11 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.04.24 수리 (Accepted) 4-1-2019-5081392-49
12 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.05.15 수리 (Accepted) 4-1-2020-5108396-12
13 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.06.12 수리 (Accepted) 4-1-2020-5131486-63
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
예제 얼굴영상이 입력되고 상기 예제 얼굴영상의 입술영역이 지정되면, 상기 예제 얼굴영상의 하반부영역의 색상분포 히스토그램을 계산하고 상기 지정된 입술영역의 색상분포 히스토그램을 계산하는 히스토그램계산단계와; 상기 얼굴 하반부영역의 색상분포 히스토그램과 상기 입술영역의 색상분포 히스토그램을 이용하여, 각 색상별 입술색상확률을 구하는 입술색상확률계산단계와; 상기 색상과 색상별 입술색상확률을 입술색유사도테이블로 구축하는 입술색유사도테이블생성단계와; 상기 다양한 입술모양의 예제와 반례를 이용하여 입술모양에 대한 패턴분류기를 학습시키는 패턴분류기학습단계를 포함한 것을 특징으로 하는 입술위치 학습방법
2 2
제 1 항에 있어서, 상기 예제 얼굴영상을 RGB 색상공간에서 HSV 색상공간으로 변환한 후 상기 히스토그램계산단계를 수행하는 것을 특징으로 하는 입술위치 학습방법
3 3
제 1 항에 있어서, 상기 입술색상확률계산단계에서 구해진 각 색상별 입술색상확률을 가우시안 콘볼루션하여 입술색분포모델을 일반화한 후 상기 입술색유사도테이블을 구축하는 것을 특징으로 하는 입술위치 학습방법
4 4
컴퓨터에, 예제 얼굴영상이 입력되고 상기 예제 얼굴영상의 입술영역이 지정되면, 상기 예제 얼굴영상의 하반부영역의 색상분포 히스토그램을 계산하고 상기 지정된 입술영역의 색상분포 히스토그램을 계산하는 히스토그램계산단계와; 상기 얼굴 하반부영역의 색상분포 히스토그램과 상기 입술영역의 색상분포 히스토그램을 이용하여, 각 색상별 입술색상확률을 구하는 입술색상확률계산단계와; 상기 색상과 색상별 입술색상확률값을 입술색유사도테이블로 구축하는 입술색유사도테이블생성단계와; 상기 다양한 입술모양의 예제와 반례를 이용하여 입술모양에 대한 패턴분류기를 학습시키는 패턴분류기학습단계를 포함한 입술위치 학습방법을 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체
5 5
색상과 색상별 입술색상확률값을 저장한 입술색유사도테이블과, 입술모양의 패턴을 학습한 패턴분류기가 구축된 상태에서, 얼굴영상이 입력되면, 상기 입력 얼굴영상을 상기 입술색유사도테이블에 적용하여 입술색 유사도 영상을 얻는 입술색유사도영상획득단계와; 상기 입술색 유사도 영상에서 무게중심을 계산하여 입술 초기 위치를 추정하는 입술초기위치추정단계와; 상기 입술 초기 위치를 중심으로 일정 범위에 대해 상기 패턴분류기에서의 정합도를 계산하고, 정합도가 가장 높은 위치를 입술위치로 설정하는 입술위치설정단계와; 상기 입술위치설정단계에서 설정된 입술위치의 영상에 대해서PCA((Principal Component Analysis) 계수를 추출하여 입술특징을 추출하는 입술특징추출단계를 포함한 것을 특징으로 하는 입술모양정보 획득방법
6 6
색상과 색상별 얼굴색상확률값을 저장한 얼굴색유사도테이블과, 색상과 색상별 입술색상확률값을 저장한 입술색유사도테이블과, 입술모양의 패턴을 학습한 패턴분류기가 구축된 상태에서, 영상이 입력되면, 상기 입력 영상을 상기 얼굴색유사도테이블에 적용하여 얼굴색 유사도 영상을 얻는 얼굴색유사도영상획득단계와; 상기 얼굴색 유사도 영상을 이진화하고 타원 모양으로 필터링하여 얼굴영역을 분할하는 얼굴영역분할단계와; 상기 입력 영상의 상기 얼굴영역 영상을 상기 입술색유사도테이블에 적용하여 입술색 유사도 영상을 얻는 입술색유사도영상획득단계와; 상기 입술색 유사도 영상에서 무게중심을 계산하여 입술 초기 위치를 추정하는 입술초기위치추정단계와; 상기 입술 초기 위치를 중심으로 일정 범위에 대해 상기 패턴분류기에서의 정합도를 계산하고, 정합도가 가장 높은 위치를 입술위치로 설정하는 입술위치설정단계와; 상기 입술위치설정단계에서 설정된 입술위치의 영상에 대해서PCA((Principal Component Analysis) 계수를 추출하여 입술특징을 추출하는 입술특징추출단계를 포함한 것을 특징으로 하는 입술모양정보 획득방법
7 7
예제 영상에 대해 특정색의 얼굴색상확률값을 학습하여 색상과 색상별 얼굴색상확률값을 얼굴색유사도테이블로 구축하는 얼굴색분포모델학습단계와; 예제 얼굴영상에 대해 특정색의 입술색상확률값을 학습하여 색상과 색상별 입술색상확률값을 입술색유사도테이블로 구축하는 입술색분포모델학습단계와; 예제 입술모양 영상에 대해 입술모양의 패턴을 학습하는 패턴분류기학습단계와; 영상이 입력되면, 상기 입력 영상을 상기 얼굴색유사도테이블에 적용하여 얼굴색 유사도 영상을 얻는 얼굴색유사도영상획득단계와; 상기 얼굴색 유사도 영상을 이진화하고 타원 모양으로 필터링하여 얼굴영역을 분할하는 얼굴영역분할단계와; 상기 입력 영상의 상기 얼굴영역 영상을 상기 입술색유사도테이블에 적용하여 입술색 유사도 영상을 얻는 입술색유사도영상획득단계와; 상기 입술색 유사도 영상에서 무게중심을 계산하여 입술 초기 위치를 추정하는 입술초기위치추정단계와; 상기 입술 초기 위치를 중심으로 일정 범위에 대해 상기 패턴분류기에서의 정합도를 계산하고, 정합도가 가장 높은 위치를 입술위치로 설정하는 입술위치설정단계와; 상기 입술위치설정단계에서 설정된 입술위치의 영상에 대해서PCA((Principal Component Analysis) 계수를 추출하여 입술특징을 추출하는 입술특징추출단계를 포함한 것을 특징으로 하는 입술모양정보 획득방법
8 8
제 5 항 내지 제 7 항 중 어느 한 항에 있어서, 상기 입력되는 얼굴영상의 크기를 표준화한 후 상기 입술색유사도영상획득단계를 수행하는 것을 특징으로 하는 입술모양정보 획득방법
9 9
제 5 항에 있어서, 상기 입력되는 얼굴영상을 RGB 색상공간에서 HSV 색상공간으로 변환한 후 상기 입술색유사도영상획득단계를 수행하는 것을 특징으로 하는 입술모양정보 획득방법
10 10
제 6 항 또는 제 7 항에 있어서, 상기 입력되는 영상을 RGB 색상공간에서 HSV 색상공간으로 변환한 후 상기 얼굴색유사도영상획득단계를 수행하는 것을 특징으로 하는 입술모양정보 획득방법
11 11
제 5 항 내지 제 7 항 중 어느 한 항에 있어서, 상기 입술색유사도영상획득단계는 상기 입력 얼굴영상의 하반부 영역에 대해 상기 얼굴색유사도테이블에 적용하여 입술색 유사도 영상을 얻는 것을 특징으로 하는 입술모양정보 획득방법
12 12
제 5 항 내지 제 7 항 중 어느 한 항에 있어서, 상기 입술초기위치추정단계는 아래의 수식에 의해 상기 입술 초기 위치(Cx, Cy)를 구하는 것을 특징으로 하는 입술모양정보 획득방법
13 13
제 5 항 내지 제 7 항 중 어느 한 항에 있어서, 연속되는 다수의 입술영상에 대해 상기 입술색유사도영상획득단계 내지 입술특징추출단계를 반복 수행하여 상기 각각의 입술영상에 대해 상기 입술특징을 추출하여 특징벡터로 표시하고, 상기 다수의 입술영상에 대해 평균벡터를 구한 후 상기 각 특징벡터와 상기 평균벡터와의 차이를 입술특징으로 설정하는 것을 입술특징표준화단계를 더 포함한 것을 특징으로 하는 입술모양정보 획득방법
14 14
제 6 항 또는 제 7 항에 있어서, 상기 얼굴영역분할단계는 상기 얼굴색 유사도 영상의 이진화 영상에 대해 아래의 수식을 적용하여 얼굴의 타원 영역을 추출하는 것을 특징으로 하는 입술모양정보 획득방법
15 15
제 7 항에 있어서, 상기 얼굴색분포모델학습단계는, 상기 예제 영상의 얼굴영역이 지정되면, 상기 예제 영상의 전체 영역의 색상분포 히스토그램을 계산하고 상기 지정된 얼굴영역의 색상분포 히스토그램을 계산하는 히스토그램계산단계와; 상기 영상 전체 영역의 색상분포 히스토그램과 상기 얼굴영역의 색상분포 히스토그램을 이용하여, 상기 색상별 얼굴색상확률을 구하는 얼굴색상확률계산단계와; 상기 색상과 색상별 얼굴색상확률을 상기 얼굴색유사도테이블로 구축하는 얼굴색유사도테이블생성단계를 포함한 것을 입술모양정보 획득방법
16 16
제 15 항에 있어서, 상기 예제 영상을 RGB 색상공간에서 HSV 색상공간으로 변환한 후 상기 히스토그램계산단계를 수행하는 것을 특징으로 하는 입술모양정보 획득방법
17 17
제 15 항에 있어서, 상기 얼굴색상확률계산단계에서 구해진 각 색상별 얼굴색상확률을 가우시안 콘볼루션하여 얼굴색분포모델을 일반화한 후 상기 얼굴색유사도테이블을 구축하는 것을 특징으로 하는 입술모양정보 획득방법
18 18
제 7 항에 있어서, 상기 입술색분포모델학습단계는, 상기 예제 얼굴영상의 입술영역이 지정되면, 상기 예제 얼굴영상의 하반부영역의 색상분포 히스토그램을 계산하고 상기 지정된 입술영역의 색상분포 히스토그램을 계산하는 히스토그램계산단계와; 상기 얼굴 하반부영역의 색상분포 히스토그램과 상기 입술영역의 색상분포 히스토그램을 이용하여, 각 색상별 입술색상확률을 구하는 입술색상확률계산단계와; 상기 색상과 색상별 입술색상확률을 입술색유사도테이블로 구축하는 입술색유사도테이블생성단계를 포함한 것을 특징으로 하는 입술모양정보 획득방법
19 19
제 18 항에 있어서, 상기 예제 얼굴영상을 RGB 색상공간에서 HSV 색상공간으로 변환한 후 상기 히스토그램계산단계를 수행하는 것을 특징으로 하는 입술모양정보 획득방법
20 20
제 18 항에 있어서, 상기 입술색상확률계산단계에서 구해진 각 색상별 입술색상확률을 가우시안 콘볼루션하여 입술색분포모델을 일반화한 후 상기 입술색유사도테이블을 구축하는 것을 특징으로 하는 입술모양정보 획득방법
21 21
색상과 색상별 입술색상확률값을 저장한 입술색유사도테이블과, 입술모양의 패턴을 학습한 패턴분류기가 구축된 컴퓨터에, 얼굴영상이 입력되면, 상기 입력 얼굴영상을 상기 입술색유사도테이블에 적용하여 입술색 유사도 영상을 얻는 입술색유사도영상획득단계와; 상기 입술색 유사도 영상에서 무게중심을 계산하여 입술 초기 위치를 추정하는 입술초기위치추정단계와; 상기 입술 초기 위치를 중심으로 일정 범위에 대해 상기 패턴분류기에서의 정합도를 계산하고, 정합도가 가장 높은 위치를 입술위치로 설정하는 입술위치설정단계와; 상기 입술위치설정단계에서 설정된 입술위치의 영상에 대해서PCA((Principal Component Analysis) 계수를 추출하여 입술특징을 추출하는 입술특징추출단계를 포함한 입술모양정보 획득방법을 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체
22 22
색상과 색상별 얼굴색상확률값을 저장한 얼굴색유사도테이블과, 색상과 색상별 입술색상확률값을 저장한 입술색유사도테이블과, 입술모양의 패턴을 학습한 패턴분류기가 구축된 컴퓨터에, 영상이 입력되면, 상기 입력 영상을 상기 얼굴색유사도테이블에 적용하여 얼굴색 유사도 영상을 얻는 얼굴색유사도영상획득단계와; 상기 얼굴색 유사도 영상을 이진화하고 타원 모양으로 필터링하여 얼굴영역을 분할하는 얼굴영역분할단계와; 상기 입력 영상의 상기 얼굴영역 영상을 상기 입술색유사도테이블에 적용하여 입술색 유사도 영상을 얻는 입술색유사도영상획득단계와; 상기 입술색 유사도 영상에서 무게중심을 계산하여 입술 초기 위치를 추정하는 입술초기위치추정단계와; 상기 입술 초기 위치를 중심으로 일정 범위에 대해 상기 패턴분류기에서의 정합도를 계산하고, 정합도가 가장 높은 위치를 입술위치로 설정하는 입술위치설정단계와; 상기 입술위치설정단계에서 설정된 입술위치의 영상에 대해서PCA((Principal Component Analysis) 계수를 추출하여 입술특징을 추출하는 입술특징추출단계를 포함한 입술모양정보 획득방법을 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체
23 23
컴퓨터에, 예제 영상에 대해 특정색의 얼굴색상확률값을 학습하여 색상과 색상별 얼굴색상확률값을 얼굴색유사도테이블로 구축하는 얼굴색분포모델학습단계와; 예제 얼굴영상에 대해 특정색의 입술색상확률값을 학습하여 색상과 색상별 입술색상확률값을 입술색유사도테이블로 구축하는 입술색분포모델학습단계와; 예제 입술모양 영상에 대해 입술모양의 패턴을 학습하는 패턴분류기학습단계와; 영상이 입력되면, 상기 입력 영상을 상기 얼굴색유사도테이블에 적용하여 얼굴색 유사도 영상을 얻는 얼굴색유사도영상획득단계와; 상기 얼굴색 유사도 영상을 이진화하고 타원 모양으로 필터링하여 얼굴영역을 분할하는 얼굴영역분할단계와; 상기 입력 영상의 상기 얼굴영역 영상을 상기 입술색유사도테이블에 적용하여 입술색 유사도 영상을 얻는 입술색유사도영상획득단계와; 상기 입술색 유사도 영상에서 무게중심을 계산하여 입술 초기 위치를 추정하는 입술초기위치추정단계와; 상기 입술 초기 위치를 중심으로 일정 범위에 대해 상기 패턴분류기에서의 정합도를 계산하고, 정합도가 가장 높은 위치를 입술위치로 설정하는 입술위치설정단계와; 상기 입술위치설정단계에서 설정된 입술위치의 영상에 대해서PCA((Principal Component Analysis) 계수를 추출하여 입술특징을 추출하는 입술특징추출단계를 포함한 입술모양정보 획득방법을 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체
지정국 정보가 없습니다
패밀리정보가 없습니다
국가 R&D 정보가 없습니다.