요약 | 음성 인식 장치가 개시된다. 본 음성 인식 장치는, 사용자를 촬상한 복수의 이미지 및 음원을 입력받는 입력부, 복수의 이미지 각각에서 사용자의 입술 영역을 검출하는 검출부, 복수의 이미지 각각의 검출된 입술 영역에 대한 동적 돌출맵을 생성하는 돌출맵 생성부, 생성된 동적 돌출맵을 이용하여 입술의 움직임 정보를 취득하는 정보 취득부. 취득된 움직임 정보를 기초로 입력된 음원에 대한 음성 인식을 수행하는 음성 인식부, 및, 음성 인식의 결과를 출력하는 출력부를 포함한다. |
---|---|
Int. CL | G10L 15/24 (2006.01) |
CPC | G10L 15/25(2013.01) G10L 15/25(2013.01) G10L 15/25(2013.01) |
출원번호/일자 | 1020120030718 (2012.03.26) |
출원인 | 경북대학교 산학협력단, 서강대학교산학협력단 |
등록번호/일자 | 10-1353936-0000 (2014.01.15) |
공개번호/일자 | 10-2013-0108894 (2013.10.07) 문서열기 |
공고번호/일자 | (20140127) 문서열기 |
국제출원번호/일자 | |
국제공개번호/일자 | |
우선권정보 | |
법적상태 | 등록 |
심사진행상태 | 수리 |
심판사항 | |
구분 | 신규 |
원출원번호/일자 | |
관련 출원번호 | |
심사청구여부/일자 | Y (2012.03.26) |
심사청구항수 | 16 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 경북대학교 산학협력단 | 대한민국 | 대구광역시 북구 |
2 | 서강대학교산학협력단 | 대한민국 | 서울특별시 마포구 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 이민호 | 대한민국 | 대구광역시 수성구 |
2 | 박형민 | 대한민국 | 서울특별시 서초구 |
3 | 장영민 | 대한민국 | 경상북도 포항시 남구 |
4 | 김민욱 | 대한민국 | 경기도 고양시 일산동구 |
5 | 정성문 | 대한민국 | 대구광역시 북구 |
6 | 김범휘 | 대한민국 | 경북 칠곡군 |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | 이현수 | 대한민국 | 서울특별시 마포구 백범로 ***(신공덕동) 메트로디오빌빌딩 ****호(이현수상표특허법률사무소) |
2 | 정홍식 | 대한민국 | 서울시 서초구 강남대로 *** 신덕빌딩 *층(나우특허법률사무소) |
3 | 김태헌 | 대한민국 | 서울시 서초구 강남대로 *** 신덕빌딩 *층(나우특허법률사무소) |
번호 | 이름 | 국적 | 주소 |
---|---|---|---|
1 | (주)엠쓰리솔루션 | 대구광역시 북구 |
번호 | 서류명 | 접수/발송일자 | 처리상태 | 접수/발송번호 |
---|---|---|---|---|
1 | [특허출원]특허출원서 [Patent Application] Patent Application |
2012.03.26 | 수리 (Accepted) | 1-1-2012-0241279-68 |
2 | [출원인변경]권리관계변경신고서 [Change of Applicant] Report on Change of Proprietary Status |
2012.04.23 | 수리 (Accepted) | 1-1-2012-0323914-54 |
3 | [출원서등 보정]보정서 [Amendment to Patent Application, etc.] Amendment |
2012.12.06 | 수리 (Accepted) | 1-1-2012-1014708-19 |
4 | 의견제출통지서 Notification of reason for refusal |
2013.05.29 | 발송처리완료 (Completion of Transmission) | 9-5-2013-0371082-12 |
5 | [명세서등 보정]보정서 [Amendment to Description, etc.] Amendment |
2013.07.29 | 보정승인간주 (Regarded as an acceptance of amendment) | 1-1-2013-0686413-95 |
6 | [거절이유 등 통지에 따른 의견]의견(답변, 소명)서 [Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation) |
2013.07.29 | 수리 (Accepted) | 1-1-2013-0686412-49 |
7 | 등록결정서 Decision to grant |
2013.11.20 | 발송처리완료 (Completion of Transmission) | 9-5-2013-0800314-62 |
8 | 출원인정보변경(경정)신고서 Notification of change of applicant's information |
2017.01.11 | 수리 (Accepted) | 4-1-2017-5005781-67 |
9 | 출원인정보변경(경정)신고서 Notification of change of applicant's information |
2018.03.26 | 수리 (Accepted) | 4-1-2018-5051994-32 |
10 | 출원인정보변경(경정)신고서 Notification of change of applicant's information |
2019.01.22 | 수리 (Accepted) | 4-1-2019-5014626-89 |
11 | 출원인정보변경(경정)신고서 Notification of change of applicant's information |
2020.06.23 | 수리 (Accepted) | 4-1-2020-5136893-04 |
번호 | 청구항 |
---|---|
1 |
1 음성 인식 장치에 있어서, 사용자를 촬상한 복수의 이미지 및 음원을 입력받는 입력부;상기 복수의 이미지 각각에서 사용자의 입술 영역을 검출하는 검출부;상기 복수의 이미지 각각의 검출된 입술 영역에 대한 동적 돌출맵을 생성하는 돌출맵 생성부;상기 생성된 동적 돌출맵을 이용하여 입술의 움직임 정보를 취득하는 정보 취득부;상기 취득된 움직임 정보를 기초로 상기 입력된 음원에 대한 음성 인식을 수행하는 음성 인식부; 및상기 음성 인식의 결과를 출력하는 출력부;를 포함하는 음성 인식 장치 |
2 |
2 제1항에 있어서, 상기 검출부는, 상기 복수의 이미지 각각에서 사용자의 얼굴 영역을 검출하는 얼굴 검출부; 및상기 검출된 얼굴 영역 내에서 사용자의 입술 영역을 검출하는 입술 검출부;를 포함하는 것을 특징으로 하는 음성 인식 장치 |
3 |
3 제2항에 있어서, 상기 얼굴 검출부는, Adaboost 알고리즘을 이용하여 사용자의 얼굴 영역을 검출하고, 상기 입술 검출부는, 기저장된 탬플릿을 이용하여 입술 영역을 검출하는 것을 특징으로 하는 음성 인식 장치 |
4 |
4 제2항에 있어서, 상기 입술 검출부는, 상기 복수의 이미지 각각에서 상기 검출된 입술 영역을 추출하여 복수의 추출 이미지를 생성하는 것을 특징으로 하는 음성 인식 장치 |
5 |
5 제4항에 있어서, 상기 돌출맵 생성부는, 상기 생성된 복수의 추출 이미지 각각에 대한 복수의 모노 돌출맵을 생성하고, 상기 생성된 복수의 모노 돌출맵을 이용하여 동적 돌출맵을 생성하는 것을 특징으로 하는 음성 인식 장치 |
6 |
6 제1항에 있어서, 상기 움직임 정보는, 사용자의 말하는 시점 정보, 청킹(chunking) 시점 정보 및 사용자의 말이 끝나는 시점 정보 중 적어도 하나의 시점 정보를 포함하는 것을 특징으로 하는 음성 인식 장치 |
7 |
7 제1항에 있어서, 상기 음성 인식부는, 상기 취득된 움직임 정보를 기초로 사용자의 말하는 시점 중에 입력된 음원에 대한 음성 인식만을 수행하는 것을 특징으로 하는 음성 인식 장치 |
8 |
8 제1항에 있어서, 상기 입력부는, 상호 이격된 위치에서 청취된 복수의 음원을 입력받고, 상기 음성 인식 장치는, 상기 복수의 음원을 분석하여 상기 음원의 발생 위치를 판단하는 위치 판단부;를 더 포함하고, 상기 음성 인식부는, 상기 취득된 움직임 정보 및 상기 판단된 음원 발생 위치를 기초로 상기 입력된 음원에 대한 음성 인식을 수행하는 것을 특징으로 하는 음성 인식 장치 |
9 |
9 음성 인식 방법에 있어서, 사용자를 촬상한 복수의 이미지 및 음원을 입력받는 단계;상기 복수의 이미지 각각에서 사용자의 입술 영역을 검출하는 단계;상기 복수의 이미지 각각의 검출된 입술 영역에 대한 동적 돌출맵을 생성하는 단계;상기 생성된 동적 돌출맵을 이용하여 입술의 움직임 정보를 취득하는 단계;상기 취득된 움직임 정보를 기초로 상기 입력된 음원에 대한 음성 인식을 수행하는 단계; 및상기 음성 인식의 결과를 출력하는 단계;를 포함하는 음성 인식 방법 |
10 |
10 제9항에 있어서, 상기 검출하는 단계는, 상기 복수의 이미지 각각에서 사용자의 얼굴 영역을 검출하는 단계; 및상기 검출된 얼굴 영역 내에서 사용자의 입술 영역을 검출하는 단계;를 포함하는 것을 특징으로 하는 음성 인식 방법 |
11 |
11 제10항에 있어서, 상기 얼굴 영역을 검출하는 단계는, Adaboost 알고리즘을 이용하여 사용자의 얼굴 영역을 검출하고, 상기 입술 영역을 검출하는 단계는, 기저장된 탬플릿을 이용하여 입술 영역을 검출하는 것을 특징으로 하는 음성 인식 방법 |
12 |
12 제10항에 있어서, 상기 복수의 이미지 각각에서 상기 검출된 입술 영역을 추출하여 복수의 추출 이미지를 생성하는 단계;를 더 포함하는 것을 특징으로 하는 음성 인식 방법 |
13 |
13 제12항에 있어서, 상기 동적 돌출맵을 생성하는 단계는, 상기 생성된 복수의 추출 이미지 각각에 대한 복수의 모노 돌출맵을 생성하고, 상기 생성된 복수의 모노 돌출맵을 이용하여 동적 돌출맵을 생성하는 것을 특징으로 하는 음성 인식 방법 |
14 |
14 제9항에 있어서, 상기 움직임 정보는, 사용자의 말하는 시점 정보, 청킹(chunking) 시점 정보 및 사용자의 말이 끝나는 시점 정보 중 적어도 하나의 시점 정보를 포함하는 것을 특징으로 하는 음성 인식 방법 |
15 |
15 제9항에 있어서, 상기 음성 인식을 수행하는 단계는, 상기 취득된 움직임 정보를 기초로 사용자의 말하는 시점 중에 입력된 음원에 대한 음성 인식만을 수행하는 것을 특징으로 하는 음성 인식 방법 |
16 |
16 제9항에 있어서, 상기 입력받는 단계는, 상호 이격된 위치에서 청취된 복수의 음원을 입력받고, 상기 음성 인식 방법은, 상기 복수의 음원을 분석하여 상기 음원의 발생 위치를 판단하는 단계;를 더 포함하고, 상기 음성 인식을 수행하는 단계는, 상기 취득된 움직임 정보 및 상기 판단된 음원 발생 위치를 기초로 상기 입력된 음원에 대한 음성 인식을 수행하는 것을 특징으로 하는 음성 인식 방법 |
지정국 정보가 없습니다 |
---|
순번 | 패밀리번호 | 국가코드 | 국가명 | 종류 |
---|---|---|---|---|
1 | KR101314687 | KR | 대한민국 | FAMILY |
2 | US09355641 | US | 미국 | FAMILY |
3 | US20140334682 | US | 미국 | FAMILY |
4 | WO2013085278 | WO | 세계지적재산권기구(WIPO) | FAMILY |
순번 | 패밀리번호 | 국가코드 | 국가명 | 종류 |
---|---|---|---|---|
DOCDB 패밀리 정보가 없습니다 |
순번 | 연구부처 | 주관기관 | 연구사업 | 연구과제 |
---|---|---|---|---|
1 | 한국과학재단 | 경북대학교산학협력단 | 원천기술개발사업 - 미래기반기술개발사업 | 다중감각추론 일반 모델 및 인지 향상 기술 개발 |
2 | 지식경제부 | 전자부품연구원 | 정보통신산업원천기술개발사업 | 다중센서 및 협업을 위한 자율 학습 기반 상황인지 기술 |
3 | 지식경제부 | 경북대학교 산학협력단 | 2012년 IT융합 고급 인력과정 지원 사업 | 스마트 자동차를 위한 AUTOSAR 기반 차량 내외부 통신 플랫폼 응용 기술 |
특허 등록번호 | 10-1353936-0000 |
---|
표시번호 | 사항 |
---|---|
1 |
출원 연월일 : 20120326 출원 번호 : 1020120030718 공고 연월일 : 20140127 공고 번호 : 특허결정(심결)연월일 : 20131120 청구범위의 항수 : 16 유별 : G10L 15/24 발명의 명칭 : 음성 인식 장치 및 음성 인식 방법 존속기간(예정)만료일 : |
순위번호 | 사항 |
---|---|
1 |
(권리자) 서강대학교산학협력단 서울특별시 마포구... |
1 |
(권리자) 경북대학교 산학협력단 대구광역시 북구... |
2 |
(의무자) 경북대학교 산학협력단 대구광역시 북구... |
2 |
(권리자) (주)엠쓰리솔루션 대구광역시 북구... |
3 |
(의무자) 서강대학교산학협력단 서울특별시 마포구... |
3 |
(권리자) (주)엠쓰리솔루션 대구광역시 북구... |
제 1 - 3 년분 | 금 액 | 334,500 원 | 2014년 01월 16일 | 납입 |
제 4 년분 | 금 액 | 274,400 원 | 2016년 12월 21일 | 납입 |
제 5 년분 | 금 액 | 274,400 원 | 2018년 01월 16일 | 납입 |
제 6 년분 | 금 액 | 196,000 원 | 2018년 12월 28일 | 납입 |
제 7 년분 | 금 액 | 364,620 원 | 2020년 01월 28일 | 납입 |
번호 | 서류명 | 접수/발송일자 | 처리상태 | 접수/발송번호 |
---|---|---|---|---|
1 | [특허출원]특허출원서 | 2012.03.26 | 수리 (Accepted) | 1-1-2012-0241279-68 |
2 | [출원인변경]권리관계변경신고서 | 2012.04.23 | 수리 (Accepted) | 1-1-2012-0323914-54 |
3 | [출원서등 보정]보정서 | 2012.12.06 | 수리 (Accepted) | 1-1-2012-1014708-19 |
4 | 의견제출통지서 | 2013.05.29 | 발송처리완료 (Completion of Transmission) | 9-5-2013-0371082-12 |
5 | [명세서등 보정]보정서 | 2013.07.29 | 보정승인간주 (Regarded as an acceptance of amendment) | 1-1-2013-0686413-95 |
6 | [거절이유 등 통지에 따른 의견]의견(답변, 소명)서 | 2013.07.29 | 수리 (Accepted) | 1-1-2013-0686412-49 |
7 | 등록결정서 | 2013.11.20 | 발송처리완료 (Completion of Transmission) | 9-5-2013-0800314-62 |
8 | 출원인정보변경(경정)신고서 | 2017.01.11 | 수리 (Accepted) | 4-1-2017-5005781-67 |
9 | 출원인정보변경(경정)신고서 | 2018.03.26 | 수리 (Accepted) | 4-1-2018-5051994-32 |
10 | 출원인정보변경(경정)신고서 | 2019.01.22 | 수리 (Accepted) | 4-1-2019-5014626-89 |
11 | 출원인정보변경(경정)신고서 | 2020.06.23 | 수리 (Accepted) | 4-1-2020-5136893-04 |
기술번호 | KST2014059224 |
---|---|
자료제공기관 | NTB |
기술공급기관 | 기술보증기금(신탁) |
기술명 | 음성 인식 장치 및 음성 인식 방법 |
기술개요 |
음성 인식 장치가 개시된다. 본 음성 인식 장치는, 사용자를 촬상한 복수의 이미지 및 음원을 입력받는 입력부, 복수의 이미지 각각에서 사용자의 입술 영역을 검출하는 검출부, 복수의 이미지 각각의 검출된 입술 영역에 대한 동적 돌출맵을 생성하는 돌출맵 생성부, 생성된 동적 돌출맵을 이용하여 입술의 움직임 정보를 취득하는 정보 취득부. 취득된 움직임 정보를 기초로 입력된 음원에 대한 음성 인식을 수행하는 음성 인식부, 및, 음성 인식의 결과를 출력하는 출력부를 포함한다. |
개발상태 | 기술개발완료 |
기술의 우수성 | |
응용분야 | 음성인식 장치 |
시장규모 및 동향 | |
희망거래유형 | 기술매매,라이센스,기술협력,기술지도,M&A, |
사업화적용실적 | |
도입시고려사항 |
과제고유번호 | 1345146546 |
---|---|
세부과제번호 | 2010-50225 |
연구과제명 | 다중감각추론 일반 모델 및 인지향상기술 개발 |
성과구분 | 출원 |
부처명 | 교육과학기술부 |
연구관리전문기관명 | 한국연구재단 |
연구주관기관명 | 경북대학교 산학협력단 |
성과제출연도 | 2011 |
연구기간 | 200907~201406 |
기여율 | 0.33333334 |
연구개발단계명 | 기초연구 |
6T분류명 | IT(정보기술) |
과제고유번호 | 1415117009 |
---|---|
세부과제번호 | 10033807 |
연구과제명 | 다중센서 및 협업을 위한 자율 학습 기반 상황인지 기술 |
성과구분 | 출원 |
부처명 | 지식경제부 |
연구관리전문기관명 | 한국산업기술평가관리원 |
연구주관기관명 | 전자부품연구원 |
성과제출연도 | 2011 |
연구기간 | 200906~201405 |
기여율 | 0.33333334 |
연구개발단계명 | 응용연구 |
6T분류명 | 기타 |
과제고유번호 | 1415123282 |
---|---|
세부과제번호 | H0401-12-1006 |
연구과제명 | 스마트 자동차를 위한 AUTOSAR 기반 차량 내외부 통신 플랫폼 및 응용 기술 |
성과구분 | 출원 |
부처명 | 지식경제부 |
연구관리전문기관명 | 정보통신산업진흥원 |
연구주관기관명 | 경북대학교 산학협력단 |
성과제출연도 | 2012 |
연구기간 | 201106~201412 |
기여율 | 0.33333334 |
연구개발단계명 | 기타 |
6T분류명 | IT(정보기술) |
[1020120143140] | 차량의 메시지 포워딩 시스템 | 새창보기 |
---|---|---|
[1020120143139] | 네트워크 코딩을 이용한 차량간 비콘 메시지 송수신 방법 및 시스템 | 새창보기 |
[1020120143138] | 주차 예약 관리시스템 장치 및 그 주차 예약 관리방법 | 새창보기 |
[1020120143136] | 차량 인포테인멘트 서비스 제공을 위한 차량 통신장치의 데이터 전송 방법 및 이를 이용한 시스템 | 새창보기 |
[1020120142295] | 얼굴 인식 장치 및 얼굴 인식 방법 | 새창보기 |
[1020120140573] | 단위 테스트 케이스 재사용 기반의 함수 테스트 장치 및 그 함수 테스트 방법 | 새창보기 |
[1020120135502] | 디지털 제어기를 갖는 공진형 컨버터 | 새창보기 |
[1020120135494] | 공진형 컨버터 | 새창보기 |
[1020120133263] | 얼굴검출 장치 및 얼굴 검출 방법 | 새창보기 |
[1020120128809] | 실시간 스테레오 정합 시스템 | 새창보기 |
[1020120128430] | 차량간 통신을 통한 차로 위치 결정 장치 | 새창보기 |
[1020120128429] | 차량 간 통신을 통한 주변 차량 감지 장치 및 방법 | 새창보기 |
[1020120128428] | 차량용 비콘 메시지 전송 주기를 제어하는 장치 및 방법 | 새창보기 |
[1020120127320] | 게이트 구동회로 | 새창보기 |
[1020120126210] | 단상 부스트 qZ - 소오스 인버터 | 새창보기 |
[1020120126208] | 상태 기반의 테스트 시나리오 모델을 이용한 GUI 테스트 장치 및 방법 | 새창보기 |
[1020120121379] | 결합 인덕터를 이용한 전압 클램프 3- 레벨 컨버터 | 새창보기 |
[1020120116908] | 화상 처리 장치 및 화상 처리 방법 | 새창보기 |
[1020120112031] | 학습 모니터링 장치 및 학습 모니터링 방법 | 새창보기 |
[1020120110487] | 노면상태 감지 장치 | 새창보기 |
[1020120101038] | 거리 측정의 정밀도 제어 장치 및 방법 | 새창보기 |
[1020120069419] | 신체 부위 운동 범위 측정 장치 및 방법 | 새창보기 |
[1020120069417] | 신체 부위 운동 범위 측정 장치 및 방법 | 새창보기 |
[1020120049708] | 키워드 추출 방법 및 시스템, 그리고 대화 보조 장치 | 새창보기 |
[1020120046348] | 차량좌석 안전벨트 시스템 | 새창보기 |
[1020120042670] | 차량용 안전벨트 | 새창보기 |
[1020120037993] | 성김 특성 최소화를 통한 암묵 신호 제거를 이용한 음성 향상 방법 및 장치 | 새창보기 |
[1020120034873] | 에어백 장치 | 새창보기 |
[1020120033507] | 결합인덕터를 이용한 절연형 부스트 컨버터 | 새창보기 |
[1020120033463] | 영상처리장치 및 영상처리방법 | 새창보기 |
[1020120030718] | 음성 인식 장치 및 음성 인식 방법 | 새창보기 |
[1020120030209] | 시선 추적 장치 및 방법 | 새창보기 |
[1020120030195] | 승용차 COWL CROSS 부품·고속용접 자동화 시스템 개발 | 새창보기 |
[1020120018129] | 객체 추적 시스템 및 방법, 객체관리장치 및 그 장치의 구동방법, 촬영장치 및 그 장치의 구동방법 | 새창보기 |
[1020120015507] | 의료 기기 제어 시스템 및 그 방법 | 새창보기 |
[1020110144773] | 자료 특징 추출 시스템 및 자료 특징 추출 방법 | 새창보기 |
[1020110143359] | [HRI]상황 인식 방법 | 새창보기 |
[1020110143358] | [HRI]사고 인지 기술 | 새창보기 |
[1020110129936] | 사용자 인지 분석 장치 및 사용자 인지 분석 방법 | 새창보기 |
[1020110129935] | 시선 경로 제공장치 및 시선 경로 제공방법 | 새창보기 |
[1020110129934] | 학습 모니터링 방법 | 새창보기 |
[1020110125412] | 지역적 특징의 통계적 학습을 통한 강건한 얼굴인식방법 | 새창보기 |
[1020110107428] | 사용자 의도 판단 장치 및 그 방법 | 새창보기 |
[1020110107423] | 시선 추적 장치와 이를 이용하는 디스플레이 장치 및 그 방법 | 새창보기 |
[1020110045498] | 시선추적 시스템 및 그 방법 | 새창보기 |
[1020110045473] | 음성인식 정보검색 시스템 및 그 방법 | 새창보기 |
[1020110043466] | 개인인증시스템 | 새창보기 |
[1020110042813] | 제어 디바이스 및 그 제어 방법 | 새창보기 |
[1020110042811] | 사용자 다중의도 분석장치 | 새창보기 |
[1020110042614] | 사용자 집중도 분석장치 및 방법 | 새창보기 |
[1020110039532] | 박테리아 농축을 위한 마이크로채널 전기영동 칩 및 이를 이용한 박테리아 농축 방법 | 새창보기 |
[1020110034968] | 문장 네트워크 기반 회의록 요약 방법 | 새창보기 |
[1020100022447] | 얼굴 인식을 위한 SIFT 알고리즘을 이용한 키포인트 매칭 시스템 및 방법 | 새창보기 |
[1020100017069] | 반향 환경에서의 영교차 기반 다음원 국지화 방법 및 장치 (A zero-crossing-based multiple source localization apparatus in reverberant environments) | 새창보기 |
관련기술 정보가 없습니다 |
---|
심판사항 정보가 없습니다 |
---|