맞춤기술찾기

이전대상기술

증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 방법 및 이를 이용한 장치(METHOD OF RENDERING AUGMENTED REALITY ON MIRROR DISPLAY BASED ON MOTION OF TARGET OF AUGMENTED REALITY AND APPARATUS USING THE SAME)

  • 기술번호 : KST2017002200
  • 담당센터 : 대전기술혁신센터
  • 전화번호 : 042-610-2279
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 방법 및 이를 이용한 장치가 개시된다. 본 발명에 따른 증강현실 렌더링 장치는 적어도 하나의 이미지 센서로부터 사용자 및 증강대상체 중 적어도 하나에 상응하는 센서 영상을 획득하는 영상 획득부; 상기 센서 영상을 이용하여 상기 사용자의 눈의 좌표를 획득하는 사용자시점 인식부; 상기 센서 영상을 이용하여 증강현실을 적용할 상기 증강대상체를 인식하는 증강대상체 인식부; 상기 센서 영상에 상응하는 복수 개의 프레임을 기반으로 상기 증강대상체에 상응하는 모션 속도를 계산하는 모션분석부; 및 상기 모션 속도에 따라 상기 증강대상체에 적용될 가상 콘텐츠의 투명도를 조절하고, 상기 눈의 좌표를 기반으로 상기 가상 콘텐츠의 렌더링 위치를 결정하여 렌더링하는 렌더링부를 포함한다.
Int. CL
CPC G06T 19/006(2013.01) G06T 19/006(2013.01) G06T 19/006(2013.01)
출원번호/일자 1020150116630 (2015.08.19)
출원인 한국전자통신연구원
등록번호/일자
공개번호/일자 10-2017-0022088 (2017.03.02) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 소멸
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2016.03.03)
심사청구항수 19

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국전자통신연구원 대한민국 대전광역시 유성구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 조규성 대한민국 대전광역시 서구
2 김호원 대한민국 서울특별시 강남구
3 김태준 대한민국 대전광역시 대덕구
4 김기남 대한민국 서울특별시 강동구
5 박혜선 대한민국 대전광역시 유성구
6 손성열 대한민국 대전광역시 유성구
7 박창준 대한민국 대전광역시 유성구
8 최진성 대한민국 대전광역시 유성구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 한양특허법인 대한민국 서울특별시 강남구 논현로**길 **, 한양빌딩 (도곡동)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 한국전자통신연구원 대한민국 대전광역시 유성구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2015.08.19 수리 (Accepted) 1-1-2015-0802917-52
2 [심사청구]심사청구(우선심사신청)서
[Request for Examination] Request for Examination (Request for Preferential Examination)
2016.03.03 수리 (Accepted) 1-1-2016-0208161-10
3 선행기술조사의뢰서
Request for Prior Art Search
2016.07.11 수리 (Accepted) 9-1-9999-9999999-89
4 선행기술조사보고서
Report of Prior Art Search
2016.09.09 발송처리완료 (Completion of Transmission) 9-6-2016-0120984-42
5 의견제출통지서
Notification of reason for refusal
2016.09.22 발송처리완료 (Completion of Transmission) 9-5-2016-0677203-53
6 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2016.11.22 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2016-1142417-01
7 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2016.11.22 수리 (Accepted) 1-1-2016-1142416-55
8 등록결정서
Decision to grant
2017.03.20 발송처리완료 (Completion of Transmission) 9-5-2017-0203261-97
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
적어도 하나의 이미지 센서로부터 사용자 및 증강대상체 중 적어도 하나에 상응하는 센서 영상을 획득하는 영상 획득부;상기 센서 영상을 이용하여 상기 사용자의 눈의 좌표를 획득하는 사용자시점 인식부;상기 센서 영상을 이용하여 증강현실을 적용할 상기 증강대상체를 인식하는 증강대상체 인식부;상기 센서 영상에 상응하는 복수 개의 프레임을 기반으로 상기 증강대상체에 상응하는 모션 속도를 계산하는 모션분석부; 및상기 모션 속도에 따라 상기 증강대상체에 적용될 가상 콘텐츠의 투명도를 조절하고, 상기 눈의 좌표를 기반으로 상기 가상 콘텐츠의 렌더링 위치를 결정하여 렌더링하는 렌더링부를 포함하고상기 렌더링부는상기 사용자가 인지적으로 고정 자세를 취할 수 있도록, 상기 투명도에 상응하게 블러링, 점멸 효과, 이미지 발생 효과 및 원색 왜곡 효과 중 적어도 하나를 조절하여 상기 가상 콘텐츠를 렌더링하는 것을 특징으로 하는 증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 장치
2 2
청구항 1에 있어서,상기 렌더링부는상기 모션 속도의 절대값이 클수록 상기 투명도를 높게 조절하여 렌더링하는 것을 특징으로 하는 증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 장치
3 3
청구항 2에 있어서,상기 렌더링부는상기 모션 속도의 절대값이 기설정된 최고 속도 이상인 경우에 상기 투명도를 100퍼센트로 설정하고, 상기 모션 속도의 절대값이 기설정된 최저 속도 이하인 경우에 상기 투명도를 0퍼센트로 설정하고, 상기 모션 속도의 절대값이 상기 기설정된 최고 속도 미만이면서 상기 기설정된 최저 속도를 초과하는 경우에 상기 투명도를 상기 100퍼센트와 0퍼센트 사이의 값으로 선형적으로 설정하는 것을 특징으로 하는 증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 장치
4 4
청구항 2에 있어서,상기 증강대상체 인식부는전 배경 분리를 수행한 뒤 Random Forest 방식, Neural Network 방식, Support Vector Machine 방식 및 AdaBoost 방식 중 적어도 하나에 상응하는 인식 방식을 이용하여 2차원 영역에 상응하는 상기 증강대상체를 인식하는 것을 특징으로 하는 증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 장치
5 5
청구항 4에 있어서,상기 모션분석부는상기 복수 개의 프레임 간에 상기 2차원 영역을 대표하는 중심 값의 변화량을 이용하여 상기 모션 속도를 계산하는 것을 특징으로 하는 증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 장치
6 6
청구항 4에 있어서,상기 증강대상체 인식부는상기 적어도 하나의 이미지 센서가 깊이 센서에 상응하는 경우에 상기 2차원 영역의 3차원 위치 및 각도 중 적어도 하나에 상응하는 3차원 자세를 인식하는 것을 특징으로 하는 증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 장치
7 7
청구항 6에 있어서,상기 모션분석부는상기 복수 개의 프레임 간의 상기 3차원 위치의 변화량 및 각속도 중 적어도 하나를 조합하여 상기 모션 속도를 계산하는 것을 특징으로 하는 증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 장치
8 8
청구항 5에 있어서,상기 영상 획득부는상기 적어도 하나의 이미지 센서의 종류에 따라 RGB 영상, 깊이 영상, 적외선 영상 및 열화상 카메라 영상 중 적어도 하나에 상응하는 상기 센서 영상을 획득하는 것을 특징으로 하는 증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 장치
9 9
청구항 1에 있어서,상기 사용자시점 인식부는상기 센서 영상에 상응하는 3차원 공간 상에서 상기 사용자의 동공을 추적하여 상기 눈의 좌표를 획득하는 것을 특징으로 하는 증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 장치
10 10
청구항 9에 있어서,상기 사용자시점 인식부는상기 사용자의 동공을 추적할 수 없는 경우에 상기 눈의 좌표 대신에 상기 사용자의 머리에 상응하는 좌표를 대체하여 사용하는 것을 특징으로 하는 증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 장치
11 11
청구항 1에 있어서,상기 증강대상체는상기 센서 영상에 포함된 움직이는 물체 중 어느 하나에 상응하는 것을 특징으로 하는 증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 장치
12 12
삭제
13 13
청구항 1에 있어서,상기 증강현실 렌더링 장치는상기 복수 개의 프레임을 기반으로 상기 증강대상체의 다음 모션을 예측하여 예측 모션를 생성하는 모션 예측부를 더 포함하고,상기 렌더링부는상기 예측 모션에 상응하게 상기 렌더링 위치를 결정하여 상기 가상 콘텐츠를 렌더링하는 것을 특징으로 하는 증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 장치
14 14
적어도 하나의 이미지 센서로부터 사용자 및 증강대상체 중 적어도 하나에 상응하는 센서 영상을 획득하는 단계;상기 센서 영상을 이용하여 상기 사용자의 눈의 좌표를 획득하는 단계;상기 센서 영상을 이용하여 증강현실을 적용할 상기 증강대상체를 인식하고, 상기 센서 영상에 상응하는 복수 개의 프레임을 기반으로 상기 증강대상체에 상응하는 모션 속도를 계산하는 단계; 및상기 모션 속도에 따라 상기 증강대상체에 적용될 가상 콘텐츠의 투명도를 조절하고, 상기 눈의 좌표를 기반으로 상기 가상 콘텐츠의 렌더링 위치를 결정하여 렌더링하는 단계를 포함하고,상기 렌더링하는 단계는상기 사용자가 인지적으로 고정 자세를 취할 수 있도록, 상기 투명도에 상응하게 블러링, 점멸 효과, 이미지 발생 효과 및 원색 왜곡 효과 중 적어도 하나를 조절하여 상기 가상 콘텐츠를 렌더링하는 것을 특징으로 하는 증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 방법
15 15
청구항 14에 있어서,상기 렌더링하는 단계는상기 모션 속도의 절대값이 클수록 상기 투명도를 높게 조절하여 렌더링하는 것을 특징으로 하는 증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 방법
16 16
청구항 15에 있어서,상기 렌더링하는 단계는상기 모션 속도의 절대값이 기설정된 최고 속도 이상인 경우에 상기 투명도를 100퍼센트로 설정하고, 상기 모션 속도의 절대값이 기설정된 최저 속도 이하인 경우에 상기 투명도를 0퍼센트로 설정하고, 상기 모션 속도의 절대값이 상기 기설정된 최고 속도 미만이면서 상기 기설정된 최저 속도를 초과하는 경우에 상기 투명도를 상기 100퍼센트와 0퍼센트 사이의 값으로 선형적으로 설정하는 것을 특징으로 하는 증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 방법
17 17
청구항 15에 있어서,상기 계산하는 단계는전 배경 분리를 수행한 뒤 Random Forest 방식, Neural Network 방식, Support Vector Machine 방식 및 AdaBoost 방식 중 적어도 하나에 상응하는 인식 방식을 이용하여 2차원 영역에 상응하는 상기 증강대상체를 인식하는 것을 특징으로 하는 증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 방법
18 18
청구항 17에 있어서,상기 계산하는 단계는상기 복수 개의 프레임 간에 상기 2차원 영역을 대표하는 중심 값의 변화량을 이용하여 상기 모션 속도를 계산하는 것을 특징으로 하는 증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 방법
19 19
청구항 18에 있어서,상기 센서 영상을 획득하는 단계는상기 적어도 하나의 이미지 센서의 종류에 따라 RGB 영상, 깊이 영상, 적외선 영상 및 열화상 카메라 영상 중 적어도 하나에 상응하는 상기 센서 영상을 획득하는 것을 특징으로 하는 증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 방법
20 20
청구항 14에 있어서,상기 눈의 좌표를 획득하는 단계는상기 센서 영상에 상응하는 3차원 공간 상에서 상기 사용자의 동공을 추적하여 상기 눈의 좌표를 획득하고, 상기 사용자의 동공을 추적할 수 없는 경우에 상기 눈의 좌표 대신에 상기 사용자의 머리에 상응하는 좌표를 대체하여 사용 것을 특징으로 하는 증강대상의 모션에 기반한 미러 디스플레이 상에서의 증강현실 렌더링 방법
지정국 정보가 없습니다
순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - 패밀리정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 US20170053456 US 미국 FAMILY

DOCDB 패밀리 정보

순번, 패밀리번호, 국가코드, 국가명, 종류의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 패밀리정보 - DOCDB 패밀리 정보 표입니다.
순번 패밀리번호 국가코드 국가명 종류
1 US2017053456 US 미국 DOCDBFAMILY
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 미래창조과학부 정보통신기술진흥센터 첨단융복합콘텐츠기술개발 원격 사용자 동시 참여 및 경험이 가능한 인스턴트 3D 객체 기반 몰입형 Join&Joy 콘텐츠 기술 개발