맞춤기술찾기

이전대상기술

R-CNN 알고리즘 기반 객체인식을 이용한 휴대단말기용 3차원영상 출력시스템 및 출력방법

  • 기술번호 : KST2019037598
  • 담당센터 : 부산기술혁신센터
  • 전화번호 : 051-606-6561
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 R-CNN 알고리즘 기반 객체인식을 이용한 휴대단말기용 3차원영상 출력시스템 및 출력방법을 제공한다. 이와 같은 본 발명에 따른 R-CNN 알고리즘 기반 객체인식을 이용한 휴대단말기용 3차원영상 출력시스템 및 출력방법은 종래 시스템의 성능이 낮은 휴대단말기의 환경에서 가상현실 또는 증강현실에 필요한 3차원 영상 이미지를 구현하기 위하여 많은 부하가 발생함으로써 발생하는 휴대단말기의 다운현상이나, 객체 인식을 많은 시간이 소요되는 문제점을 해결하기 위하여 휴대단말기에서 탐색하고자 하는 물체에 대한 객체 인식을 별도의 딥러닝 알고리즘에 의해 사전 훈련 된 신경망을 사용하여 수행 한 FAST R-CNN 알고리즘을 이용하여 실시간의 객체 인식이 가능한 객체인식서버를 통해 수행한 객체 인식 결과를 기반으로 휴대단말기에서 해당 객체에 대한 집적영상을 이용하여 가상현실 또는 증강현실에 활용할 수 있는 3차원 영상을 사용자에게 출력할 수 있도록 하여 시스템 성능이 낮은 휴대단말기에서도 가상현실 또는 증강현실에 필요한 3차원 영상을 쉽고, 빠르게 실시간으로 구현할 수 있도록 한다.본 발명에 따른 R-CNN 알고리즘 기반 객체인식을 이용한 휴대단말기용 3차원영상 출력시스템은 3차원 영상으로 출력하고자 하는 탐지 대상의 물체를 촬영한 영상파일이나 동영상파일을 저장하여 객체인식서버에 전송하고, 객체인식서버로부터 인식된 결과를 추출하여 해당 결과에 부합하는 객체에 대한 집적영상을 출력하는 휴대단말기;와 상기 휴대단말기로부터 전송된 영상파일이나 동영상파일에 포함된 이미지로부터 RPN을 이용하여 객체영역을 특정하고, 특정된 객체영역에서 객체인식 알고리즘을 이용하여 이미지에 포함된 객체를 인식한 결과를 저장하는 객체인식서버; 및 상기 휴대단말기 출력화면의 상단에 위치하여 객체인식서버로부터 전송된 인식결과에 의해 출력되는 해당 객체의 집적영상을 3차원 입체영상으로 표시하는 렌티큘러 필터가 내장된 폴리오케이스;를 포함하는 구성으로 이루어지며,본 발명에 따른 R-CNN 알고리즘 기반 객체인식을 이용한 휴대단말기용 3차원영상 출력방법은 휴대단말기의 영상기기를 이용하여 물체를 촬영한 영상파일이나 동영상파일을 객체인식서버에 전송하는 영상전송단계;와 객체인식서버에서 상기 영상전송단계를 통해 수신한 영상파일이나 동영상파일에 포함된 이미지로부터 객체영역을 특정하고, 특정된 객체영역에서 객체인식 알고리즘을 이용하여 이미지에 포함된 객체를 인식한 결과를 저장하는 객체인식단계; 및 휴대단말기에서 상기 객체인식단계에서 인식된 객체에 대한 정보를 추출하여 해당 정보에 대응하는 객체의 집적영상을 이용하여 렌티큘러 필터가 내장된 폴리오케이스를 통해 3차원 입체영상으로 출력하는 영상출력단계;를 포함하는 구성으로 이루어진다.
Int. CL H04N 13/30 (2020.01.01) G06N 3/08 (2006.01.01) G06K 9/00 (2006.01.01)
CPC H04N 13/305(2013.01) H04N 13/305(2013.01) H04N 13/305(2013.01)
출원번호/일자 1020170063103 (2017.05.22)
출원인 동서대학교 산학협력단, 주식회사 홀로랩, 신동학
등록번호/일자 10-1889025-0000 (2018.08.09)
공개번호/일자
공고번호/일자 (20180816) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2017.05.22)
심사청구항수 3

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 동서대학교 산학협력단 대한민국 부산광역시 사상구
2 주식회사 홀로랩 대한민국 전라북도 익산시 선
3 신동학 대한민국 부산광역시 부산진구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 이석호 대한민국 서울특별시 서대문구
2 신동학 대한민국 부산광역시 부산진구
3 리차드 인도네시아 부산광역시 사상구
4 레니 인도네시아 부산광역시 사상구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인 신태양 대한민국 대전광역시 서구 둔산중로 ***, 주은리더스텔 ***호~***호 (둔산동)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 동서대학교산학협력단 부산광역시 사상구
2 주식회사 홀로랩 전라북도 익산시 선
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2017.05.22 수리 (Accepted) 1-1-2017-0487363-81
2 선행기술조사의뢰서
Request for Prior Art Search
2017.11.10 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2018.01.05 발송처리완료 (Completion of Transmission) 9-6-2018-0024110-15
4 의견제출통지서
Notification of reason for refusal
2018.02.12 발송처리완료 (Completion of Transmission) 9-5-2018-0107206-01
5 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2018.04.09 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2018-0351359-32
6 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2018.04.09 수리 (Accepted) 1-1-2018-0351338-84
7 등록결정서
Decision to grant
2018.07.25 발송처리완료 (Completion of Transmission) 9-5-2018-0503363-38
8 출원인정보변경(경정)신고서
Notification of change of applicant's information
2018.08.09 수리 (Accepted) 4-1-2018-5154414-11
9 출원인정보변경(경정)신고서
Notification of change of applicant's information
2018.08.21 수리 (Accepted) 4-1-2018-5163918-21
10 출원인정보변경(경정)신고서
Notification of change of applicant's information
2020.09.03 수리 (Accepted) 4-1-2020-5200272-07
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
3차원 영상으로 출력하고자 하는 탐지 대상의 물체를 촬영한 영상파일이나 동영상파일을 저장하여 객체인식서버에 전송하고, 객체인식서버를 일정한 시간 간격으로 체크하여 새롭게 저장된 인식된 결과를 추출하여 해당 결과에 부합하는 객체에 대한 집적영상을 출력하는 휴대단말기;상기 휴대단말기로부터 전송된 영상파일이나 동영상파일에 포함된 이미지로부터 RPN을 이용하여 객체영역을 특정하고, 특정된 객체영역에서 객체인식 알고리즘으로 R-CNN 알고리즘을 이용하여 이미지에 포함된 객체를 인식한 결과를 저장하는 객체인식서버; 및상기 휴대단말기 출력화면의 상단에 위치하여 객체인식서버로부터 전송된 인식결과에 의해 출력되는 해당 객체의 집적영상을 3차원 입체영상으로 표시하는 렌티큘러 필터가 내장된 폴리오케이스;를 포함하는 것을 특징으로 하는 R-CNN 알고리즘 기반 객체인식을 이용한 휴대단말기용 3차원영상 출력시스템
2 2
삭제
3 3
휴대단말기의 영상기기를 이용하여 물체를 촬영한 영상파일이나 동영상파일을 객체인식서버에 전송하는 영상전송단계;객체인식서버에서 상기 영상전송단계를 통해 수신한 영상파일이나 동영상파일에 포함된 이미지로부터 인식하고자 하는 물체에 해당하는 객체영역에 대하여 RPN을 이용하여 특정하고, 특정된 객체영역내의 물체를 학습된 R-CNN 알고리즘을 이용하여 객체데이터베이스에 저장된 객체특성을 비교하여 이미지에 포함된 객체를 특정하여 인식한 결과인 객체의 명칭을 객체데이터베이스에 저장하는 객체인식단계; 및휴대단말기에서 상기 객체인식단계에서 인식된 객체에 대한 정보를 추출하여 해당 정보에 대응하는 객체의 집적영상을 이용하여 렌티큘러 필터가 내장된 폴리오케이스를 통해 3차원 입체영상으로 출력하는 영상출력단계;를 포함하여 이루어지는 것을 특징으로 하는 R-CNN 알고리즘 기반 객체인식을 이용한 휴대단말기용 3차원영상 출력방법
4 4
삭제
5 5
제 3 항에 있어서,상기 영상출력단계는,휴대단말기에서 상기 객체데이터베이스를 일정한 시간 간격으로 체크하여 상기 결과저장단계에서 인식된 결과가 저장되었는지를 확인하여, 저장된 새롭게 인식결과를 추출하는 결과추출단계;상기 결과추출단계로부터 추출한 인식된 결과에 해당하는 객체에 대응하는 집적영상을 검색하여 휴대단말기의 출력기기에 출력하는 집적영상출력단계; 및상기 집적영상출력단계에서 출력되는 집적영상을 렌티큘러 필터를 내장한 폴리오케이스을 통해 3차원 입체영상으로 표시하는 입체영상출력단계;를 포함하여 이루어지는 것을 특징으로 하는 R-CNN 알고리즘 기반 객체인식을 이용한 휴대단말기용 3차원영상 출력방법
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 중소기업청 (주)홀로랩, 동서대학교 산학협력단 첫걸음사업 모바일 증강현실을 위한 HRS(hologram reality space) 기반의 탈착형 무안경 3D 모바일 증강현실 장치 및 컨텐츠 생성 기술 개발