맞춤기술찾기

이전대상기술

내부 및 외부 영상의 적응형 정합을 통한 실감 투시 방법 및 시스템

  • 기술번호 : KST2019011262
  • 담당센터 : 서울동부기술혁신센터
  • 전화번호 : 02-2155-3662
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 특정 공간의 내부 및 외부 영상의 적응형 정합을 통한 실감 투시 방법은, 제1 공간의 내부에 위치한 원격지 디바이스의 제1 카메라를 이용하여, 제1 공간의 전방향 내부 영상을 촬영하는 단계; 유선 또는 무선 네트워크를 통해, 상기 제1 공간의 전방향 내부 영상 데이터를 실시간 스트리밍 서버에 업로드 하는 단계; 상기 제1 공간의 외부에 위치한 사용자 디바이스의 제2 카메라를 이용하여, 제1 공간의 외부 장애물을 촬영하는 단계; 상기 실시간 스트리밍 서버로부터, 상기 제1 공간의 전방향 내부 영상 데이터를 다운로드 하는 단계; 상기 제1 공간의 전방향 내부 영상과 상기 제1 공간의 외부 장애물 영상을 적응적으로 정합함으로써 투시 영상을 생성하는 단계; 및 상기 투시 영상을 상기 사용자 디바이스에 디스플레이 하는 단계를 포함한다. 상기 실감 투시 방법에 의하면, 서버를 통해 실시간으로 스트리밍 되는 목적지의 내부 영상과 사용자 디바이스로 외부에서 촬영한 장애물 영상을 적응적으로 정합하여 생성한 투시 영상을 디스플레이 함으로써, 사용자에게 마치 장애물을 투시하여 내부를 직접 보는 것과 같은 몰입감을 제공할 수 있다.
Int. CL H04N 13/30 (2018.01.01) H04N 13/20 (2018.01.01)
CPC H04N 13/361(2013.01) H04N 13/361(2013.01) H04N 13/361(2013.01) H04N 13/361(2013.01) H04N 13/361(2013.01)
출원번호/일자 1020170098614 (2017.08.03)
출원인 한국과학기술연구원, 재단법인 실감교류인체감응솔루션연구단
등록번호/일자 10-1917359-0000 (2018.11.05)
공개번호/일자
공고번호/일자 (20190124) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2017.08.03)
심사청구항수 7

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국과학기술연구원 대한민국 서울특별시 성북구
2 재단법인 실감교류인체감응솔루션연구단 대한민국 서울특별시 성북구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 박지형 대한민국 서울특별시 성북구
2 이준 대한민국 서울특별시 성북구
3 유범재 대한민국 서울특별시 성북구
4 오주영 대한민국 서울특별시 성북구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 김 순 영 대한민국 서울특별시 종로구 종로*길 **, **층 케이씨엘특허법률사무소 (수송동, 석탄회관빌딩)
2 김영철 대한민국 서울특별시 종로구 종로*길 **, **층 케이씨엘특허법률사무소 (수송동, 석탄회관빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 한국과학기술연구원 서울특별시 성북구
2 재단법인 실감교류인체감응솔루션연구단 서울특별시 성북구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2017.08.03 수리 (Accepted) 1-1-2017-0751342-04
2 출원인정보변경(경정)신고서
Notification of change of applicant's information
2017.08.10 수리 (Accepted) 4-1-2017-0042500-28
3 선행기술조사의뢰서
Request for Prior Art Search
2018.02.09 수리 (Accepted) 9-1-9999-9999999-89
4 선행기술조사보고서
Report of Prior Art Search
2018.04.09 발송처리완료 (Completion of Transmission) 9-6-2018-0053057-62
5 의견제출통지서
Notification of reason for refusal
2018.04.11 발송처리완료 (Completion of Transmission) 9-5-2018-0251557-00
6 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2018.06.11 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2018-0569084-83
7 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2018.06.11 수리 (Accepted) 1-1-2018-0569083-37
8 등록결정서
Decision to grant
2018.09.19 발송처리완료 (Completion of Transmission) 9-5-2018-0644672-59
9 [명세서등 보정]보정서(심사관 직권보정)
2019.01.19 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2019-5001704-01
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
제1 공간의 내부에 위치한 원격지 디바이스의 제1 카메라를 이용하여, 제1 공간의 전방향 내부 영상을 촬영하는 단계;유선 또는 무선 네트워크를 통해, 상기 제1 공간의 전방향 내부 영상 데이터를 실시간 스트리밍 서버에 업로드 하는 단계;상기 제1 공간의 외부에 위치한 사용자 디바이스의 제2 카메라를 이용하여, 제1 공간의 외부 장애물을 촬영하는 단계;상기 실시간 스트리밍 서버로부터, 상기 제1 공간의 전방향 내부 영상 데이터를 다운로드 하는 단계;상기 제1 공간의 전방향 내부 영상과 상기 제1 공간의 외부 장애물 영상을 적응적으로 정합함으로써 투시 영상을 생성하는 단계; 및상기 투시 영상을 상기 사용자 디바이스에 디스플레이 하는 단계를 포함하되,상기 투시 영상을 생성하는 단계는,상기 제1 공간의 외부 장애물 영상 중 일방향 내부 영상으로 치환될 투시 영역을 결정하는 단계;관성측정유닛(IMU)을 이용하여 추적한 상기 사용자 디바이스의 모션에 기초하여, 상기 제2 카메라의 촬영 방향을 판단하는 단계;상기 투시할 영역 및 상기 제2 카메라의 촬영 방향에 기초하여, 상기 제1 공간의 전방향 내부 영상으로부터 일방향 내부 영상을 추출하는 단계;상기 촬영된 외부 장애물 영상을 텍스처로 변환하고 폴리곤을 생성하는 단계; 및상기 투시 영역의 경계면 폴리곤이 제거되는 동시에 상기 일방향 내부 영상이 나타나는 시각적 효과를 생성하는 단계를 포함하고,상기 시각적 효과는, 사용자에게 장애물을 투시하여 내부를 직접 보는 것과 같은 몰입감을 제공하기 위해, 상기 외부 장애물이 허물어지면서 동시에 내부 영상이 나타나는 효과를 포함하는 것을 특징으로 하는, 실감 투시 방법
2 2
삭제
3 3
삭제
4 4
제1항에 있어서,상기 제1 카메라를 이용하여, 상기 제1 공간 내 위치하는 오브젝트를 촬영하는 단계;상기 오브젝트에 대한 정보를 상기 실시간 스트리밍 서버에 업로드 하는 단계;상기 사용자 디바이스의 인터페이스를 통해, 상기 오브젝트를 선택하는 단계;상기 실시간 스트리밍 서버로부터, 상기 오브젝트에 대한 정보를 다운로드 하는 단계; 및상기 정보를 상기 사용자 디바이스에 디스플레이 하는 단계를 더 포함하는 것을 특징으로 하는, 실감 투시 방법
5 5
제1항 또는 제4항에 있어서,상기 사용자 디바이스는 헤드 마운티드 디스플레이(Head Mounted Display) 장치인 것을 특징으로 하는, 실감 투시 방법
6 6
제1항 또는 제4항에 따른 실감 투시 방법을 실현하기 위한, 컴퓨터로 판독 가능한 기록매체에 저장된 컴퓨터 프로그램
7 7
제1 공간의 내부 영상을 촬영하여 업로드 하기 위한 원격지 디바이스;영상 데이터를 실시간으로 스트리밍 하기 위한 실시간 스트리밍 서버; 및상기 제1 공간의 외부에 위치한 사용자 디바이스를 포함하는, 적응형 정합을 통한 실감 투시 시스템으로서,상기 원격지 디바이스는,상기 제1 공간의 내부를 360도 촬영 가능한 제1 카메라; 및유선 또는 무선 네트워크를 통해, 제1 공간의 전방향 내부 영상 데이터를 상기 실시간 스트리밍 서버에 업로드 하기 위한, 데이터 업로드 모듈을 포함하되,상기 사용자 디바이스는,제1 공간의 외부 장애물을 촬영하기 위한 제2 카메라;상기 실시간 스트리밍 서버로부터, 상기 제1 공간의 전방향 내부 영상 데이터를 다운로드 하기 위한, 데이터 다운로드 모듈;상기 제1 공간의 전방향 내부 영상과 상기 제1 공간의 외부 장애물 영상을 적응적으로 정합함으로써 투시 영상을 생성하기 위한, 투시 영상 생성 모듈; 및상기 투시 영상을 표시하기 위한 디스플레이를 포함하되,상기 투시 영상 생성 모듈은,상기 제1 공간의 외부 장애물 영상 중 일방향 내부 영상으로 치환될 투시 영역을 결정하는 투시 영역 지정 유닛;관성측정유닛(IMU)을 이용하여 추적한 상기 사용자 디바이스의 모션에 기초하여, 상기 제2 카메라의 촬영 방향을 판단하는 촬영 방향 판단 유닛; 및상기 투시할 영역 및 상기 제2 카메라의 촬영 방향에 기초하여, 상기 제1 공간의 전방향 내부 영상으로부터 일방향 내부 영상을 추출하는 내부 영상 추출 유닛을 포함하고,상기 촬영된 외부 장애물 영상을 텍스처로 변환하고 폴리곤을 생성하고,상기 투시 영역의 경계면 폴리곤이 제거되는 동시에 상기 일방향 내부 영상이 나타나는 시각적 효과를 생성하되,상기 시각적 효과는, 사용자에게 장애물을 투시하여 내부를 직접 보는 것과 같은 몰입감을 제공하기 위해, 상기 외부 장애물이 허물어지면서 동시에 내부 영상이 나타나는 효과를 포함하는 것을 특징으로 하는, 실감 투시 시스템
8 8
삭제
9 9
삭제
10 10
제7항에 있어서,상기 데이터 업로드 모듈은, 상기 제1 공간 내 위치하며 상기 제1 카메라에 의해 촬영된 오브젝트에 대한 정보를 상기 실시간 스트리밍 서버에 업로드 하고,상기 데이터 다운로드 모듈은, 상기 실시간 스트리밍 서버로부터 상기 오브젝트에 대한 정보를 다운로드 하는 것을 특징으로 하는, 실감 투시 시스템
11 11
제7항 또는 제10항에 있어서,상기 사용자 디바이스는 헤드 마운티드 디스플레이(Head Mounted Display) 장치인 것을 특징으로 하는, 실감 투시 시스템
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 미래창조과학부 한국과학기술연구원 글로벌프론티어지원 몰입형 VST Glasses 기반 공존현실 UI/UX 및 Human Factor 연구개발