맞춤기술찾기

이전대상기술

시선 추적에 기반한 오디오 제어 장치 및 이를 이용한 화상통신 방법

  • 기술번호 : KST2015142220
  • 담당센터 : 서울서부기술혁신센터
  • 전화번호 : 02-6124-6930
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 시선 추적 기반 오디오 제어 장치 및 이를 이용한 화상통신 방법이 개시된다. 시선 추적 기반 오디오 제어 장치는, 통신 장비의 사용자를 촬영한 이미지로부터 동공 영역의 위치 좌표를 검출하고, 검출된 동공 영역의 위치 좌표에 기반하여 시선 추적 정보를 생성하는 시선 추적부와, 시선 추적 정보에 기반하여 디스플레이 내 복수의 대화자 중 한 명의 대화자를 식별하는 대화자 식별부와, 복수의 대화자 측에 설치된 마이크로폰으로부터 전달된 각각의 오디오 신호 중, 식별한 한 명의 대화자를 제외한 나머지 대화자 측에 설치된 마이크로폰으로부터 전달된 오디오 신호에 소정의 임계 계수를 적용하는 임계 계수 적용부와, 소정의 임계 계수 적용 여부에 기반하여 각각의 오디오 신호에 음향 필터를 적용하는 음향 필터 적용부를 포함하여 구성될 수 있다.
Int. CL G06F 3/16 (2006.01) H04N 7/14 (2006.01)
CPC G06F 3/013(2013.01) G06F 3/013(2013.01) G06F 3/013(2013.01)
출원번호/일자 1020140007373 (2014.01.21)
출원인 한양대학교 산학협력단
등록번호/일자
공개번호/일자 10-2015-0087017 (2015.07.29) 문서열기
공고번호/일자
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 공개
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 N
심사청구항수 12

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한양대학교 산학협력단 대한민국 서울특별시 성동구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 김회율 대한민국 서울특별시 강남구
2 한세희 대한민국 경기도 고양시 덕양구
3 배현주 대한민국 경기도 이천시
4 나문수 대한민국 경기도 부천시 원미구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인이상 대한민국 서울특별시 서초구 바우뫼로 ***(양재동, 우도빌딩 *층)
2 홍성욱 대한민국 서울특별시 강남구 역삼로 ***(역삼동) 동아빌딩 *층(주식회사에스와이피)
3 심경식 대한민국 서울시 강남구 역삼로 *** 동아빌딩 *층(에스와이피특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
최종권리자 정보가 없습니다
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2014.01.21 수리 (Accepted) 1-1-2014-0063090-85
2 [출원서등 보정]보정서
[Amendment to Patent Application, etc.] Amendment
2014.01.23 수리 (Accepted) 1-1-2014-0069947-37
3 출원인정보변경(경정)신고서
Notification of change of applicant's information
2014.06.05 수리 (Accepted) 4-1-2014-5068294-39
4 출원인정보변경(경정)신고서
Notification of change of applicant's information
2015.02.16 수리 (Accepted) 4-1-2015-5022074-70
5 [대리인선임]대리인(대표자)에 관한 신고서
[Appointment of Agent] Report on Agent (Representative)
2015.11.13 수리 (Accepted) 1-1-2015-1107231-16
6 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.08.05 수리 (Accepted) 4-1-2019-5155816-75
7 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.08.06 수리 (Accepted) 4-1-2019-5156285-09
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
디스플레이(display)를 구비한 통신 장비의 오디오(audio)를 제어하는 장치에 있어서,상기 통신 장비의 사용자를 촬영한 이미지(image)로부터 동공 영역의 위치 좌표를 검출하고, 상기 검출된 동공 영역의 위치 좌표에 기반하여 시선 추적 정보를 생성하는 시선 추적부; 및상기 시선 추적 정보에 기반하여 상기 디스플레이 내 복수의 대화자 중 한 명의 대화자를 식별하는 대화자 식별부;상기 복수의 대화자 측에 설치된 마이크로폰(microphone)으로부터 전달된 각각의 오디오 신호 중, 상기 식별한 한 명의 대화자를 제외한 나머지 대화자 측에 설치된 마이크로폰으로부터 전달된 오디오 신호에 소정의 임계 계수를 적용하는 임계 계수 적용부; 및상기 소정의 임계 계수 적용 여부에 기반하여 상기 각각의 오디오 신호에 음향 필터(sound filter)를 적용하는 음향 필터 적용부를 포함하는 시선 추적 기반 오디오 제어 장치
2 2
청구항 1에 있어서,상기 시선 추적부는,상기 디스플레이 상단과 하단의 카메라(camera)가 촬영한 이미지를 결합하여 시선 보정 정보를 생성하고, 상기 시선 보정 정보에 기반하여 상기 이미지를 보정한 시선 보정 이미지를 상기 복수의 대화자 측의 통신 장비로 전송하는 것을 특징으로 하는 시선 추적 기반 오디오 제어 장치
3 3
청구항 2에 있어서,상기 시선 보정 이미지는,상기 디스플레이 상단과 하단의 카메라가 촬영한 이미지로부터 검출된 눈 영역에 알파 블렌딩(alpha blending) 기법을 적용하여 상기 이미지를 보정하는 것을 특징으로 하는 시선 추적 기반 오디오 제어 장치
4 4
청구항 1에 있어서,상기 복수의 대화자의 상기 디스플레이 내 위치에 기반하여 상기 복수의 대화자에 대한 3차원 공간 상의 가상 위치를 결정하고, 상기 결정된 가상 위치를 가상 음원(sound source)이 되도록 상기 사용자 측에 설치된 스피커(speaker)를 제어하는 가상 위치 결정부를 더 포함하는 것을 특징으로 하는 시선 추적 기반 오디오 제어 장치
5 5
청구항 4에 있어서,상기 가상 위치 결정부는,사운드 이미지(sound image) 기법을 적용하여 가상 음원을 생성함으로써 스피커를 제어하는 것을 특징으로 하는 시선 추적 기반 오디오 제어 장치
6 6
시선 추적 기반 오디오 제어 장치를 구비한 화상통신 시스템에서 리얼리스틱 오디오를 구현하는 방법에 있어서,상기 통신 장비의 사용자를 촬영한 이미지로부터 안구의 위치 좌표를 검출하고, 상기 검출된 안구의 위치 좌표에 기반하여 시선 추적 정보를 생성하는 단계;상기 시선 추적 정보에 기반하여 상기 디스플레이 내 복수의 대화자 중 한 명의 대화자를 식별하는 단계;상기 복수의 대화자 측에 설치된 마이크로폰으로부터 전달된 각각의 오디오 신호 중 상기 식별한 한 명의 대화자를 제외한 나머지 대화자 측에 설치된 마이크로폰으로부터 전달된 오디오 신호에 소정의 임계 계수를 적용하는 단계; 및상기 소정의 임계 계수 적용 여부에 기반하여 상기 각각의 오디오 신호에 음향 필터를 적용하는 단계를 포함하는 리얼리스틱 오디오를 위한 화상통신 방법
7 7
청구항 6에 있어서,상기 디스플레이 상단과 하단의 카메라(camera)가 촬영한 이미지를 결합하여 시선 보정 정보를 생성하고, 상기 시선 보정 정보에 기반하여 상기 이미지를 보정한 시선 보정 이미지를 상기 복수의 대화자 측의 통신 장비로 전송하는 단계를 더 포함하는 것을 특징으로 하는 리얼리스틱 오디오를 위한 화상통신 방법
8 8
청구항 7에 있어서,상기 시선 보정 이미지는,상기 디스플레이 상단과 하단의 카메라가 촬영한 이미지로부터 검출된 눈 영역에 알파 블렌딩 기법을 적용하여 상기 이미지를 보정하는 것을 특징으로 하는 리얼리스틱 오디오를 위한 화상통신 방법
9 9
청구항 6에 있어서,상기 대화자를 식별하는 단계와 상기 임계 계수를 적용하는 단계 사이에,상기 복수의 대화자의 상기 디스플레이 내 위치에 기반하여 상기 복수의 대화자에 대한 3차원 공간 상의 가상 위치를 결정하고, 상기 결정된 가상 위치를 가상 음원이 되도록 상기 사용자 측에 설치된 스피커를 제어하는 가상 위치 결정 단계를 더 포함하는 것을 특징으로 하는 리얼리스틱 오디오를 위한 화상통신 방법
10 10
청구항 9에 있어서,상기 가상 위치 결정 단계는,사운드 이미지 기법을 적용하여 가상 음원을 생성함으로써 스피커를 제어하는 것을 특징으로 하는 리얼리스틱 오디오를 위한 화상통신 방법
11 11
청구항 6에 있어서,상기 사용자로부터 발생되는 사용자 오디오를 수신하여 상기 복수의 대화자 측에 설치된 스피커로 출력되도록, 상기 사용자 오디오 신호를 상기 시선 추적 기반 오디오 제어 장치에 전달하는 단계를 더 포함하는 것을 특징으로 하는 리얼리스틱 오디오를 위한 화상통신 방법
12 12
청구항 6에 있어서,상기 음향 필터를 적용하는 단계 이후에,상기 시선 추적 기반 오디오 제어 장치로부터 상기 임계 계수 및 음향 필터가 적용된 오디오 신호를 수신하여 출력하는 단계를 더 포함하는 것을 특징으로 하는 리얼리스틱 오디오를 위한 화상통신 방법
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 중소기업청 한양대학교산학협력단 중소기업산학연협력사업 / 산학연공동기술개발사업 / 산학연공동기술개발사업(전국) [2차년도] Stereo Matching Virtual 3D 기반 화상통화용 eye-contact 솔루션 개발