맞춤기술찾기

이전대상기술

전방위 영상 기반 화상회의 발언자 인식 장치 및 방법

  • 기술번호 : KST2019009432
  • 담당센터 : 서울서부기술혁신센터
  • 전화번호 : 02-6124-6930
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명에서는 종래의 원격회의시, 마이크가 고장 난 경우 또는 마이크를 누르지 않고 발언을 하는 경우에는 발언하는 화자를 찾기 어려운 문제점과, 참석자가 물을 마시거나 하품을 하는 경우 발언하는 화자와 발언하지 않는 화자를 구분하기가 쉽지 않기 때문에 오검출이 발생할 확률이 높다는 문제점을 개선하고자, 적외선센서부(100), 입모양모션카메라부(200), 스마트입모양모션제어부(300)로 구성됨으로서, 발언자용 마이크 일측에 설치되어, 입모양모션카메라부쪽으로 적외선을 쏴주어, 영상포커싱 위치를 설정시킬 수 있어, 발언자의 영상포커싱 위치인식속도를 기존에 비해 70% 향상시킬 수 있고, 스마트입모양모션제어부를 통해 현재 사람의 움직임에 따른 입모양모션에다가 기준입모양모션모델과 비교·분석하여 특정 입모양모션을 실시간으로 인식시킬 수 있어, 사람의 몸에 별도의 입모양모션인식장비를 부착하거나 착용하지 않아도, 발언자의 입모양움직임에 따른 입모양모션만을 인식시킬 수 있고, 이로 인해, 발언자의 입모양 움직임과 특정 마이크의 빨간 불빛을 통해 발언자를 검출하고, 확대 추출 및 표출함으로써 기존에 비해 90% 발언자 검출 정확도를 제공할 수 있으며, 무엇보다, 스마트입모양모션제어부를 통해, 입모양모션카메라부로부터 획득한 입모양모션이미지에서 배경영역을 제외한 입모양모션영역만을 추출시킨 후, 추출시킨 입모양모션영역에다가 기준입모양모션모델과 비교·분석하여 특정 입모양모션을 인식시켜 원격지의 또 다른 원격회의용 디스플레이 기기쪽으로 전송시키도록 제어시킬 수 있어, 회의영상이 끊김없이, 전체적인 회의장 영상을 서로 스트리밍 함으로써 회의장 간 실시간 원격 회의 시스템을 제공할 수 있는 전방위 영상 기반 화상회의 발언자 인식 장치 및 방법을 제공하는데 그 목적이 있다.
Int. CL G06K 9/00 (2006.01.01) G06K 9/62 (2006.01.01) G10L 15/25 (2013.01.01)
CPC G06K 9/00308(2013.01) G06K 9/00308(2013.01) G06K 9/00308(2013.01) G06K 9/00308(2013.01)
출원번호/일자 1020170166303 (2017.12.06)
출원인 서울과학기술대학교 산학협력단
등록번호/일자 10-2012719-0000 (2019.08.14)
공개번호/일자 10-2019-0066659 (2019.06.14) 문서열기
공고번호/일자 (20190821) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2017.12.06)
심사청구항수 3

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 서울과학기술대학교 산학협력단 대한민국 서울특별시 노원구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 박구만 대한민국 서울특별시 강남구
2 양지희 서울특별시 노원구
3 김영애 경기도 수원시 영통구
4 황동호 경기도 부천시 길주로번길 ,
5 남진솔 서울특별시 중구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인 충무 대한민국 서울특별시 강남구 논현로 **길 *-**, ***호(역삼동, 중앙빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 서울과학기술대학교 산학협력단 서울특별시 노원구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2017.12.06 수리 (Accepted) 1-1-2017-1214161-64
2 [출원서등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2017.12.22 수리 (Accepted) 1-1-2017-1283923-44
3 선행기술조사의뢰서
Request for Prior Art Search
2018.11.09 수리 (Accepted) 9-1-9999-9999999-89
4 선행기술조사보고서
Report of Prior Art Search
2018.12.19 수리 (Accepted) 9-1-2018-0070488-19
5 의견제출통지서
Notification of reason for refusal
2019.02.27 발송처리완료 (Completion of Transmission) 9-5-2019-0145996-55
6 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2019.04.24 수리 (Accepted) 1-1-2019-0420431-64
7 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2019.04.24 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2019-0420434-01
8 등록결정서
Decision to grant
2019.08.13 발송처리완료 (Completion of Transmission) 9-5-2019-0583696-14
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
발언자용 마이크 일측에 설치되어, 입모양모션카메라부쪽으로 적외선을 쏴주어, 영상포커싱 위치를 설정시키는 적외선센서부(100)와,회의장 일측에 위치되어, 적외선센서부를 통해 전송된 적외선에 따라 영상포커싱에 위치한 발언자 얼굴 중심으로 카메라를 포커싱시켜 얼굴 및 입모양 움직임을 영상촬영시키는 입모양모션카메라부(200)와,입모양모션카메라부로부터 획득한 입모양모션이미지에서 배경영역을 제외한 입모양모션영역만을 추출시킨 후, 추출시킨 입모양모션영역에다가 기준입모양모션모델과 비교·분석하여 특정 입모양모션을 인식시켜 원격지의 또 다른 원격회의용 디스플레이 기기쪽으로 전송시키도록 제어시키는 스마트입모양모션제어부(300)로 구성되는 전방위 영상 기반 화상회의 발언자 인식 장치에 있어서,상기 스마트입모양모션제어부(300)는입모양모션카메라부로부터 획득한 입모양모션이미지에서 미리 설정된 RGB 히스토그램을 이용하여 배경영역을 제외한 입모양모션영역만을 추출시키는 입모양모션영역추출부(310)와,입모양모션영역추출부에서 추출된 입모양모션 영역에서 색상정보를 이용하여 HSV 히스토그램을 생성시키는 HSV 히스토그램생성부(320)와,사람의 움직임에 따른 입모양모션패턴을 DB화시켜 기준입모양모션모델로 미리 설정시키는 기준입모양모션모델링설정부(330)와,추출시킨 입모양모션영역을 정적 입모양모션 영역 또는 동적 입모양모션 영역으로 세분화하여 분류시킨 후, 분류시킨 정적 입모양모션 영역 및 동적 입모양모션 영역에다가 기준입모양모션모델과 비교·분석하여 특정 입모양모션이 어디에 매칭되는지를 인식시키는 스마트입모양모션인식부(340)와,스마트입모양모션인식부에서 인식된 특정 입모양모션을 기준으로, 원격지의 또 다른 원격회의용 디스플레이 기기쪽으로, 발언자의 얼굴영상과, 특정 입모양모션에 따른 음성데이터를 출력시키는 액션이벤트제어부(350)로 구성되는 것을 특징으로 하는 전방위 영상 기반 화상회의 발언자 인식 장치
2 2
삭제
3 3
삭제
4 4
제1항에 있어서, 상기 스마트입모양모션인식부(340)는추출시킨 입모양모션영역을 정적 입모양모션 영역 또는 동적 입모양모션 영역으로 세분화하여 분류시키는 입모양모션분류부(341)와,입모양모션분류부를 통해 분류시킨 정적 입모양모션 영역 및 동적 입모양모션 영역에다가 기준입모양모션모델과 비교·분석하는 입모양모션비교분석부(342)와,입모양모션비교분석부에서 비교분석된 특정 입모양모션을 기준으로 어떠한 입모양모션 유형인지를 매칭하여 인식시키는 입모양모션인식부(343)로 구성되는 것을 특징으로 하는 전방위 영상 기반 화상회의 발언자 인식 장치
5 5
적외선센서부에서 입모양모션카메라부쪽으로 적외선을 쏴주어, 영상포커싱 위치를 설정시키는 단계(S100)와,입모양모션카메라부에서 적외선센서부를 통해 전송된 적외선에 따라 영상포커싱에 위치한 발언자 얼굴 중심으로 카메라를 포커싱시켜 얼굴 및 입모양 움직임을 영상촬영시키는 단계(S200)와,스마트입모양모션제어부의 입모양모션영역추출부에서 입모양모션카메라부로부터 획득한 입모양모션이미지에서 배경영역을 제외한 입모양모션영역만을 추출시키는 단계(S300)와,스마트입모양모션제어부의 스마트입모양모션인식부에서 추출시킨 입모양모션영역을 정적 입모양모션 영역 또는 동적 입모양모션 영역으로 세분화하여 분류시킨 후, 분류시킨 정적 입모양모션 영역 및 동적 입모양모션 영역에다가 기준입모양모션모델과 비교·분석하여 특정 입모양모션이 매칭되는지를 인식시키는 단계(S400)와,스마트입모양모션제어부의 액션이벤트제어부에서 스마트입모양모션인식부에서 인식된 특정 입모양모션을 기준으로, 원격지의 또 다른 원격회의용 디스플레이 기기쪽으로, 발언자의 얼굴영상과, 특정 입모양모션에 따른 음성데이터를 출력시키는 단계(S500)로 이루어지는 것을 특징으로 하는 전방위 영상 기반 화상회의 발언자 인식 방법
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 과학기술정보통신부 서울과학기술대학교 산학협력단 방송통신산업기술개발 제작 편리성과 실감 시청 체험 극대화를 위한 개인방송 제작 기술 개발