맞춤기술찾기

이전대상기술

동영상 강좌의 슬라이드 화질 개선을 위한 시스템 및 방법

  • 기술번호 : KST2023000831
  • 담당센터 :
  • 전화번호 :
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 슬라이드의 판독이 어려운 동영상 강좌에 대해 영상 속에서 슬라이드 영역을 찾아서 영상처리를 통해 개선하거나 원본 슬라이드 이미지를 합성하여 슬라이드 영상 품질을 개선하기 위한 동영상 강좌의 슬라이드 화질 개선을 위한 시스템 및 방법을 제공하기 위한 것으로서, 미리 저장되어 있는 동영상의 영상 속의 슬라이드 영역을 인식하는 영역 인식부와, 상기 영역 인식부에서 인식된 슬라이드 영역의 슬라이드와 미리 저장되어 있는 원본 슬라이드의 비교를 통해 매칭되는 원본 슬라이드를 검색하는 슬라이드 매칭부와, 상기 슬라이드 매칭부에서 검색된 원본 슬라이드를 동영상 강좌의 슬라이드 영역에 추가하기 위한 이미지로 변환하는 이미지 변환부와, 상기 동영상의 연속된 영상에서 슬라이드 페이지가 넘어가는 시점을 인식하는 넘김 인식부와, 상기 넘김 인식부에서 인식된 슬라이드 페이지가 넘어가는 시점을 기반으로 이미지 변환부에서 변환된 이미지 중 영상 속의 슬라이드와 일치하는 슬라이드 이미지를 동영상의 슬라이드 영역에 합성하여 슬라이드 화질이 개선된 동영상을 출력하는 이미지 합성부를 포함하여 구성되는데 있다.
Int. CL H04N 21/2343 (2011.01.01) H04N 21/2343 (2011.01.01) G06T 7/00 (2017.01.01) G06T 7/00 (2017.01.01)
CPC H04N 21/234336(2013.01) H04N 21/234336(2013.01) H04N 21/234336(2013.01) H04N 21/234336(2013.01)
출원번호/일자 1020140195830 (2014.12.31)
출원인 국민대학교산학협력단
등록번호/일자 10-1628289-0000 (2016.06.01)
공개번호/일자
공고번호/일자 (20160621) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2014.12.31)
심사청구항수 16

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 국민대학교산학협력단 대한민국 서울특별시 성북구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 김준호 대한민국 서울특별시 성북구
2 김종윤 대한민국 서울특별시 중랑구
3 라지현 대한민국 경기도 고양시 덕양구
4 박성수 대한민국 인천광역시 서구
5 박준명 대한민국 서울특별시 송파구
6 장승현 대한민국 서울특별시 노원구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 정기택 대한민국 서울특별시 영등포구 선유로 *** ,*층 ***~***호 (양평동*가)
2 오위환 대한민국 서울특별시 영등포구 선유로 *** ,*층 ***~***호 (양평동*가)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 주식회사 윙글즈에듀텍 경기도 고양시 덕양구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2014.12.31 수리 (Accepted) 1-1-2014-1286872-14
2 선행기술조사의뢰서
Request for Prior Art Search
2015.06.10 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2015.08.06 발송처리완료 (Completion of Transmission) 9-6-2015-0089500-61
4 의견제출통지서
Notification of reason for refusal
2015.11.06 발송처리완료 (Completion of Transmission) 9-5-2015-0770100-29
5 [지정기간연장]기간연장(단축, 경과구제)신청서
[Designated Period Extension] Application of Period Extension(Reduction, Progress relief)
2016.01.06 수리 (Accepted) 1-1-2016-0013618-55
6 [지정기간연장]기간연장(단축, 경과구제)신청서
[Designated Period Extension] Application of Period Extension(Reduction, Progress relief)
2016.02.11 수리 (Accepted) 1-1-2016-0134665-40
7 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2016.03.07 수리 (Accepted) 1-1-2016-0219065-82
8 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2016.03.07 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2016-0219091-69
9 출원인정보변경(경정)신고서
Notification of change of applicant's information
2016.03.14 수리 (Accepted) 4-1-2016-5032192-73
10 등록결정서
Decision to grant
2016.05.30 발송처리완료 (Completion of Transmission) 9-5-2016-0390931-75
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
미리 저장되어 있는 동영상의 영상 속의 슬라이드 영역을 인식하는 영역 인식부와,상기 영역 인식부에서 인식된 슬라이드 영역의 슬라이드와 미리 저장되어 있는 원본 슬라이드의 비교를 통해 매칭되는 원본 슬라이드를 검색하는 슬라이드 매칭부와,상기 슬라이드 매칭부에서 검색된 원본 슬라이드를 동영상 강좌의 슬라이드 영역에 추가하기 위한 이미지로 변환하는 이미지 변환부와,상기 동영상의 연속된 영상에서 슬라이드 페이지가 넘어가는 시점을 인식하는 넘김 인식부와,상기 넘김 인식부에서 인식된 슬라이드 페이지가 넘어가는 시점을 기반으로 이미지 변환부에서 변환된 이미지 중 영상 속의 슬라이드와 일치하는 슬라이드 이미지를 동영상의 슬라이드 영역에 합성하여 슬라이드 화질이 개선된 동영상을 출력하는 이미지 합성부와,상기 슬라이드 매칭부에서 매칭되는 원본 슬라이드가 미리 저장되어 있지 않은 경우, 영역 인식부에서 인식된 슬라이드 영역에서 슬라이드에 해당되는 이미지를 추출하는 슬라이드 추출부와,상기 슬라이드 추출부에서 추출된 이미지에 이미지 처리를 통해 이미지 개선을 수행하는 영상 처리부를 더 포함하여 구성되는 것을 특징으로 하는 동영상 강좌의 슬라이드 화질 개선을 위한 시스템
2 2
삭제
3 3
제 1 항에 있어서, 상기 영상 처리부는 가우시안(Gaussian) 필터를 이용하여 추출된 슬라이드 이미지에 선명화(sharpening) 처리를 수행한 후, 그 이미지를 PDF로 변환하는 것을 특징으로 하는 동영상 강좌의 슬라이드 화질 개선을 위한 시스템
4 4
제 1 항에 있어서, 상기 영역 인식부는 사용자에 의해 선택된 슬라이드 영역의 좌표정보를 기반으로 동영상 속의 슬라이드 영역을 인식하거나, OpenCV의 트랙킹(Tracking) 알고리즘인 SURF, SIFT 중 어느 하나를 이용하여 원본 슬라이드 이미지와 동영상 프레임 간의 특징점 매칭을 이용하여 동영상 프레임 영역 중 사각형의 슬라이드 영역을 인식하는 것을 특징으로 하는 동영상 강좌의 슬라이드 화질 개선을 위한 시스템
5 5
제 1 항에 있어서,상기 넘김 인식부는 영역 인식부에서 인식된 슬라이드 영역에 대해 OpenCV 옵티컬 플로우(optical flow)를 분석하여, 프레임 별로 모션 변화가 미리 정의된 임계값을 넘어가면 동영상 속에서 슬라이드 페이지가 넘어간 시각으로 인식하는 것을 특징으로 하는 동영상 강좌의 슬라이드 화질 개선을 위한 시스템
6 6
제 1 항에 있어서,상기 슬라이드 매칭부는 넘김 인식부를 통해 확인된 슬라이드 변화가 없는 구간을 기반으로 구간 사이의 동영상 프레임 중 하나를 선택하여 슬라이드 영역에 해당하는 슬라이드와 미리 저장하고 있는 원본 슬라이드를 특징점 매칭을 통해 가장 일치하는 원본 슬라이드를 검색하는 것을 특징으로 하는 동영상 강좌의 슬라이드 화질 개선을 위한 시스템
7 7
제 1 항에 있어서,상기 이미지 합성부는 슬라이드 위에 움직이는 사람이나 물체가 없는 '안정화 프레임'을 기반으로 R, G, B 값이 일정 수치 이상 차이가 나는 픽셀에 대해 합성한 슬라이드 위에 재합성해 주는 과정을 통해 영상 속의 사람이나 물체에 의해 슬라이드가 가려지는 부분에 대해서 슬라이드 영역 처리를 수행하는 것을 특징으로 하는 동영상 강좌의 슬라이드 화질 개선을 위한 시스템
8 8
(A) 동영상 정보가 수신되면, 수신된 동영상 정보에 동영상 파일과 함께 슬라이드 파일이 포함되어 있는지를 확인하는 단계와,(B) 상기 확인결과 동영상 파일 및 슬라이드 파일이 포함되어 있는 것으로 확인되면, 첨부된 슬라이드 이미지를 추출하여 동영상 강좌의 슬라이드 영역에 추가하기 위한 이미지로 변환한 후 저장하는 단계와,(C) 영역 인식부를 통해 영상 속의 슬라이드 영역을 인식하는 단계와,(D) 넘김 인식부를 통해 연속된 영상에서 슬라이드 페이지가 넘어가는 시점을 추출하는 단계와,(E) 이미지 합성부를 통해 상기 인식된 슬라이드 페이지가 넘어가는 시점을 기반으로 인식된 슬라이드 영역의 슬라이드와 미리 저장되어 있는 원본 슬라이드의 비교를 통해 매칭되는 원본 슬라이드를 검색한 후, 일치하는 슬라이드 이미지를 동영상의 슬라이드 영역에 합성하는 단계와,(F) 상기 확인결과 동영상 파일만이 포함되어 있고, 슬라이드 파일이 포함되어 있지 않은 것으로 확인되면, 슬라이드 추출부를 통해 영역 인식부에서 인식된 슬라이드 영역에서 슬라이드에 해당되는 슬라이드 이미지를 추출하는 단계와,(G) 영상 처리부를 통해 상기 추출된 슬라이드 이미지에 이미지 처리를 수행하여 이미지를 개선하는 단계를 포함하여 이루어지는 것을 특징으로 하는 동영상 강좌의 슬라이드 화질 개선을 위한 방법
9 9
제 8 항에 있어서, 상기 (C) 단계는사용자에 의해 선택된 사각형 슬라이드 영역의 네 꼭짓점(좌표정보)을 지정하여 사각형을 기반으로 슬라이드 영역을 인식하거나, OpenCV의 트랙킹(Tracking) 알고리즘인 SURF, SIFT 중 어느 하나를 이용하여 원본 슬라이드 이미지와 동영상 프레임 간의 특징점 매칭을 이용하여 동영상 프레임 영역 중 사각형의 슬라이드 영역을 인식하는 것을 특징으로 하는 동영상 강좌의 슬라이드 화질 개선을 위한 방법
10 10
제 8 항에 있어서, 상기 (D) 단계는인식된 슬라이드 영역에 대해 동영상 프레임 단위를 기반으로 OpenCV 옵티컬 플로우(optical flow)를 분석하는 단계와,상기 분석 결과, 프레임 별로 모션 변화가 있는지 확인하고 확인된 모션 변화값을 미리 정의된 프레임 비교값(임계값)과 서로 비교하여 모션 변화값이 임계값 이상의 변화를 나타내는지를 비교하는 단계와,상기 비교결과 미리 정의된 임계값 이상으로 모션 변화값이 확인되면, 동영상 속에서 슬라이드 페이지가 넘어간 시각과 해당 프레임을 자동으로 인식하여 저장하는 단계를 포함하여 이루어지는 것을 특징으로 하는 동영상 강좌의 슬라이드 화질 개선을 위한 방법
11 11
제 8 항에 있어서, 상기 (E) 단계는넘김 인식부를 통해 슬라이드가 다음 페이지로 넘어가는 시간을 검색한 후, 슬라이드가 넘어간 시간으로 판단되면 동영상에 포함되어 있는 해당 슬라이드 이미지를 미리 저장되어 있는 원본 슬라이드 이미지로 교체하는 단계와,슬라이드가 다음 페이지로 넘어가지 않는 변화가 없는 시간으로 판단되면, 상기 교체된 원본 슬라이드 이미지를 이용하여 동영상의 슬라이드 영역에 합성하는 단계와,슬라이드 프레임과 현재 슬라이드가 합성된 프레임의 값을 서로 비교해 일정 수치 이상 차이나는 부분을 재합성하여 영상 속의 사람이나 물체에 의해 슬라이드가 가려지는 부분에 대해서 슬라이드 영역 처리를 수행하는 단계를 포함하는 것을 특징으로 하는 동영상 강좌의 슬라이드 화질 개선을 위한 방법
12 12
제 11 항에 있어서,상기 원본 슬라이드 이미지는 슬라이드 변화가 없는 구간 사이의 동영상 프레임 중 하나를 선택하여 슬라이드 영역에 해당하는 슬라이드와 미리 저장하고 있는 원본 슬라이드를 특징점 매칭을 통해 가장 일치하는 원본 슬라이드를 검색하는 것을 특징으로 하는 동영상 강좌의 슬라이드 화질 개선을 위한 방법
13 13
제 11 항에 있어서,상기 동영상의 슬라이드 영역에 합성하는 단계는 슬라이드 변화가 없는 구간별로 해당 원본 슬라이드를 동영상의 슬라이드 영역으로 평면 변환(image rectification)하여 동영상의 슬라이드 영역에 합성하는 것을 특징으로 하는 동영상 강좌의 슬라이드 화질 개선을 위한 방법
14 14
제 11 항에 있어서, 상기 재합성은 슬라이드가 다음 페이지로 넘어가는 시간을 추출할 때, 슬라이드 위에 움직이는 사람이 없는 경우에 해당되는 '안정화 프레임'을 검출하여 저장하는 단계와,상기 안정화 프레임과 슬라이드 부분의 프레임을 지속적으로 비교하며 R, G, B 값이 미리 정의된 일정 수치 이상 차이가 나는 픽셀에 대해 합성한 슬라이드 위에 재합성하는 단계를 포함하여 이루어지는 것을 특징으로 하는 동영상 강좌의 슬라이드 화질 개선을 위한 방법
15 15
삭제
16 16
제 8 항에 있어서, 상기 (F) 단계는 상기 인식된 슬라이드 영역에 대해 동영상 프레임 단위를 기반으로 OpenCV 옵티컬 플로우(optical flow)를 분석하는 단계와,상기 분석 결과, 프레임 별로 모션 변화가 있는지 확인하고, 확인된 모션 변화값을 미리 정의된 프레임 비교값(임계값)과 서로 비교하여 모션 변화값이 임계값 이상의 변화를 나타내는지를 비교하는 단계와,상기 비교결과, 미리 정의된 임계값 이상으로 모션 변화값이 확인되면, 동영상 속에서 슬라이드 페이지가 넘어간 시각과 해당 프레임에 포함된 슬라이드 영역을 인식하여 저장하는 단계를 포함하여 이루어지는 것을 특징으로 하는 동영상 강좌의 슬라이드 화질 개선을 위한 방법
17 17
제 8 항에 있어서, 상기 (G) 단계는저장부에 저장되어 있는 슬라이드가 넘어가는 시간을 기반으로 저장되어 있는 각각의 슬라이드 이미지를 프레임별로 슬라이드 이미지에 선명화(sharpening) 처리를 수행하는 단계와,상기 선명화 처리가 수행된 슬라이드 이미지들을 모아 PDF 파일로 변환하는 단계를 포함하여 이루어지는 것을 특징으로 하는 동영상 강좌의 슬라이드 화질 개선을 위한 방법
18 18
제 17 항에 있어서,상기 선명화 처리는 가우시안(Gaussian) 필터를 이용하여 노이즈를 제거하여 글씨 및 사진을 포함하는 슬라이드 이미지를 더 선명하게 해기 위한 것인 것을 특징으로 하는 동영상 강좌의 슬라이드 화질 개선을 위한 방법
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 문화체육관광부 국민대학교 산학협력단 문화체육관광부 사업 자연사유물 전시 인터랙티브 상황인지 복합현실 콘텐츠 저작 및 서비스 운용 기술 개발(2차년도)