맞춤기술찾기

이전대상기술

언노운 영역 감지를 통한 알파 매트의 트라이맵 자동 생성 방법 및 그 장치

  • 기술번호 : KST2020016006
  • 담당센터 : 인천기술혁신센터
  • 전화번호 : 032-420-3580
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 언노운 영역 감지를 통한 알파 매트의 트라이맵 자동 생성 방법 및 그 장치에 관한 것으로, 더욱 상세하게는 입력 이미지에서 전경과 배경을 정확하게 추출하는 이미지 매팅(image matting)을 수행할 때, 이미지 돌출(image saliency), 그래프 컷 세그먼테이션(lazy snapping) 및 FCM(fuzzy c-means) 클러스터링을 결합하여 트라이맵을 자동으로 생성함으로써, 아티팩트(artifact)의 수를 줄이고, 알파 매트의 계산 시간을 단축하여 상기 알파 매트의 품질을 향상시킬 수 있는 방법 및 그 장치에 관한 것이다.
Int. CL G06T 7/11 (2017.01.01) G06T 7/13 (2017.01.01) G06T 5/50 (2006.01.01) G06N 3/04 (2006.01.01)
CPC G06T 7/11(2013.01) G06T 7/11(2013.01) G06T 7/11(2013.01) G06T 7/11(2013.01) G06T 7/11(2013.01)
출원번호/일자 1020190130359 (2019.10.21)
출원인 가천대학교 산학협력단
등록번호/일자 10-2114738-0000 (2020.05.19)
공개번호/일자
공고번호/일자 (20200525) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2019.10.21)
심사청구항수 10

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 가천대학교 산학협력단 대한민국 경기도 성남시 수정구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 이상웅 서울특별시 강남구
2 크리스 헨리 경기도 성남시 수정구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 김견수 대한민국 서울특별시 강남구 테헤란로*길 ** (역삼동, 한덕빌딩) ***호(다함특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 가천대학교 산학협력단 경기도 성남시 수정구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2019.10.21 수리 (Accepted) 1-1-2019-1068906-15
2 [우선심사신청]심사청구(우선심사신청)서
[Request for Preferential Examination] Request for Examination (Request for Preferential Examination)
2019.10.23 수리 (Accepted) 1-1-2019-1081398-60
3 선행기술조사의뢰서
Request for Prior Art Search
2019.11.08 수리 (Accepted) 9-1-9999-9999999-89
4 선행기술조사보고서
Report of Prior Art Search
2019.11.29 수리 (Accepted) 9-1-2019-0053823-03
5 의견제출통지서
Notification of reason for refusal
2019.12.28 발송처리완료 (Completion of Transmission) 9-5-2019-0938237-19
6 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2020.02.26 수리 (Accepted) 1-1-2020-0202427-47
7 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2020.02.26 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2020-0202449-41
8 등록결정서
Decision to grant
2020.05.18 발송처리완료 (Completion of Transmission) 9-5-2020-0340867-62
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
트라이맵 자동 생성 장치에서, 픽셀 레벨의 돌출 맵을 이용하여 입력 이미지에서 전경 객체의 위치에 대한 전경 큐를 추정하는 전경 큐 추정 단계;상기 트라이맵 자동 생성 장치에서, 상기 추정한 전경 객체의 위치에 대한 전경 큐, 상기 입력 이미지의 코너 영역을 배경 시드로 정의하여 생성한 배경 큐 및 사전에 계산된 과분할 입력 이미지를 토대로 그래프 컷 세그먼테이션(lazy snapping)을 수행하여 상기 입력 이미지에서 전경 객체와 배경을 분할하고, 상기 분할한 전경 객체를 세그먼테이션하는 전경 세그먼테이션 단계; 및상기 트라이맵 자동 생성 장치에서, 퍼지 c-평균(FCM) 클러스터링을 이용하여, 상기 세그먼테이션한 전경 객체의 경계 영역에서 전경과 배경의 색상을 포함한 혼합 픽셀을 확인하여 트라이맵을 생성하는 언노운 영역 감지 단계;를 포함하며,상기 전경 세그먼테이션 단계는,상기 배경 큐를 상기 입력 이미지의 코너 영역을 배경 시드로 정의하여 생성할 때, 상기 전경 객체가 상기 입력 이미지의 중앙에 위치하고, 상기 입력 이미지의 코너가 배경 큐를 포함할 가능성이 높다는 가정을 기반으로 하여 생성하는 것을 특징으로 하는 트라이맵 자동 생성 방법
2 2
청구항 1에 있어서,상기 전경 큐 추정 단계는,상기 트라이맵 자동 생성 장치에서, 이미지 매팅을 수행하기 위한 입력 이미지를 제공받는 이미지 입력 단계;상기 제공받은 입력 이미지를 소정의 영역으로 분할하고, 상기 분할한 영역별 영역 대비(region contrast), 영역 배경(region background) 및 영역 속성(region property)을 토대로 돌출 맵을 생성하는 돌출 맵 생성 단계;상기 생성한 돌출 맵을 양자화하여, 양자화된 돌출 맵을 생성하는 돌출 맵 양자화 단계;상기 생성한 양자화된 돌출 맵을 이진화하여, 이진화된 돌출 맵을 생성하는 돌출 맵 이진화 단계; 및상기 생성한 이진화된 돌출 맵을 침식(erode)하여, 가장 큰 블랍(blob)만 유지하고, 상기 침식한 이진화된 돌출 맵을 상기 전경 세그먼테이션 단계에서 그래프 컷 세그먼테이션을 수행하기 위한 전경 큐로 사용하도록 출력하는 전경 큐 출력 단계;를 포함하는 것을 특징으로 하는 트라이맵 자동 생성 방법
3 3
청구항 1에 있어서,상기 전경 세그먼테이션 단계는,상기 트라이맵 자동 생성 장치에서, 상기 전경 큐 추정 단계에서 추정한 전경 객체의 위치에 대한 전경 큐를 입력받아 그래프 컷 세그먼테이션을 위한 입력으로 제공하는 전경 큐 제공 단계;상기 입력 이미지의 코너 영역을 배경 시드로 정의하여 배경 큐를 생성하고, 상기 생성한 배경 큐를 그래프 컷 세그먼테이션을 위한 입력으로 제공하는 배경 큐 제공 단계;상기 입력 이미지를 복수 개의 수퍼 픽셀로 과분할하고, 상기 복수 개의 수퍼 픽셀로 과분할한 입력 이미지를 그래프 컷 세그먼테이션을 위한 입력으로 제공하는 과분할 이미지 제공 단계;상기 전경 큐, 배경 큐 및 과분할 입력 이미지를 토대로 상기 입력 이미지에서 전경 객체와 배경을 분할하는 그래프 컷 세그먼테이션 단계; 및상기 분할한 전경 객체를 세그먼테이션하는 전경 객체 세그먼테이션 단계;를 포함하는 것을 특징으로 하는 트라이맵 자동 생성 방법
4 4
청구항 1에 있어서,상기 언노운 영역 감지 단계는,상기 트라이맵 자동 생성 장치에서, 상기 전경 세그먼테이션 단계에서 세그먼테이션한 전경 객체의 경계 영역을 팽창하는 팽창 단계;상기 팽창한 전경 객체의 경계 영역을 ROI(관심영역)로 설정하고, 상기 설정한 ROI를 n x n의 패치로 나누는 ROI 처리 단계;상기 나눈 각 패치별로 퍼지 c-평균(FCM) 클러스터링을 수행하고, 상기 수행한 결과를 토대로 각 패치별로 전경과 배경의 색상을 포함한 혼합 픽셀을 확인하여 언노운 영역을 생성하는 언노운 영역 생성 단계;상기 언노운 영역 생성 단계에서 처리한 각 패치별 이미지를 하나의 이미지로 병합하는 이미지 병합 단계; 및상기 병합한 이미지를 토대로 트라이맵을 생성하는 트라이맵 생성 단계;를 포함하는 것을 특징으로 하는 트라이맵 자동 생성 방법
5 5
삭제
6 6
청구항 4에 있어서,상기 언노운 영역 감지 단계는,상기 트라이맵 자동 생성 장치에서, 상기 전경 객체의 경계 영역에서 추출한 ROI를 n x n 크기의 패치로 나누고, 상기 나눈 각 패치별로 퍼지 c-평균(FCM) 클러스터링을 수행하는 과정에서,각각의 패치를 명도, 녹색-적색 성분 및 청색-황색 성분으로 표현하되, 명도를 버리고 녹색-적색 성분 및 청색-황색 성분만 유지하여 혼합 픽셀을 확인하도록 하는 것을 특징으로 하는 트라이맵 자동 생성 방법
7 7
픽셀 레벨의 돌출 맵을 이용하여 입력 이미지에서 전경 객체의 위치에 대한 전경 큐를 추정하는 전경 큐 추정 모듈;상기 추정한 전경 객체의 위치에 대한 전경 큐, 상기 입력 이미지의 코너 영역을 배경 시드로 정의하여 생성한 배경 큐 및 사전에 계산된 과분할 입력 이미지를 토대로 그래프 컷 세그먼테이션(lazy snapping)을 수행하여 상기 입력 이미지에서 전경 객체와 배경을 분할하고, 상기 분할한 전경 객체를 세그먼테이션하는 전경 세그먼테이션 모듈; 및퍼지 c-평균(FCM) 클러스터링을 이용하여, 상기 세그먼테이션한 전경 객체의 경계 영역에서 전경과 배경의 색상을 포함한 혼합 픽셀을 확인하여 트라이맵을 생성하는 언노운 영역 감지 모듈;을 포함하며,상기 전경 세그먼테이션 모듈은,상기 배경 큐를 상기 입력 이미지의 코너 영역을 배경 시드로 정의하여 생성할 때, 상기 전경 객체가 상기 입력 이미지의 중앙에 위치하고, 상기 입력 이미지의 코너가 배경 큐를 포함할 가능성이 높다는 가정을 기반으로 하여 생성하는 것을 특징으로 하는 트라이맵 자동 생성 장치
8 8
청구항 7에 있어서,상기 전경 큐 추정 모듈은,이미지 매팅을 수행하기 위한 입력 이미지를 제공받는 이미지 입력부;상기 제공받은 입력 이미지를 소정의 영역으로 분할하고, 상기 분할한 영역별 영역 대비(region contrast), 영역 배경(region background) 및 영역 속성(region property)을 토대로 돌출 맵을 생성하는 돌출 맵 생성부;상기 생성한 돌출 맵을 양자화하여, 양자화된 돌출 맵을 생성하는 돌출 맵 양자화부;상기 생성한 양자화된 돌출 맵을 이진화하여, 이진화된 돌출 맵을 생성하는 돌출 맵 이진화부; 및상기 생성한 이진화된 돌출 맵을 침식(erode)하여, 가장 큰 블랍(blob)만 유지하고, 상기 침식한 이진화된 돌출 맵을 상기 전경 세그먼테이션 모듈에서 그래프 컷 세그먼테이션을 수행하기 위한 전경 큐로 사용하도록 출력하는 전경 큐 출력부;를 포함하는 것을 특징으로 하는 트라이맵 자동 생성 장치
9 9
청구항 7에 있어서,상기 전경 세그먼테이션 모듈은,상기 전경 큐 추정 모듈에서 추정한 전경 객체의 위치에 대한 전경 큐를 입력받아 그래프 컷 세그먼테이션을 위한 입력으로 제공하는 전경 큐 제공부;상기 입력 이미지의 코너 영역을 배경 시드로 정의하여 배경 큐를 생성하고, 상기 생성한 배경 큐를 그래프 컷 세그먼테이션을 위한 입력으로 제공하는 배경 큐 제공부;상기 입력 이미지를 복수 개의 수퍼 픽셀로 과분할하고, 상기 복수 개의 수퍼 픽셀로 과분할한 입력 이미지를 그래프 컷 세그먼테이션을 위한 입력으로 제공하는 과분할 이미지 제공부;상기 전경 큐, 배경 큐 및 과분할 입력 이미지를 토대로 상기 입력 이미지에서 전경 객체와 배경을 분할하는 그래프 컷 세그먼테이션부; 및상기 분할한 전경 객체를 세그먼테이션하는 전경 객체 세그먼테이션부;를 포함하는 것을 특징으로 하는 트라이맵 자동 생성 장치
10 10
청구항 7에 있어서,상기 언노운 영역 감지 모듈은,상기 전경 세그먼테이션 모듈에서 세그먼테이션한 전경 객체의 경계 영역을 팽창하는 팽창부;상기 팽창한 전경 객체의 경계 영역을 ROI(관심영역)로 설정하고, 상기 설정한 ROI를 n x n의 패치로 나누는 ROI 처리부;상기 나눈 각 패치별로 퍼지 c-평균(FCM) 클러스터링을 수행하고, 상기 수행한 결과를 토대로 각 패치별로 전경과 배경의 색상을 포함한 혼합 픽셀을 확인하여 언노운 영역을 생성하는 언노운 영역 생성부;상기 언노운 영역 생성부에서 처리한 각 패치별 이미지를 하나의 이미지로 병합하는 이미지 병합부; 및상기 병합한 이미지를 토대로 트라이맵을 생성하는 트라이맵 생성부;를 포함하는 것을 특징으로 하는 트라이맵 자동 생성 장치
11 11
삭제
12 12
청구항 10에 있어서,상기 언노운 영역 감지 모듈은,상기 전경 객체의 경계 영역에서 추출한 ROI를 n x n 크기의 패치로 나누고, 상기 나눈 각 패치별로 퍼지 c-평균(FCM) 클러스터링을 수행하는 과정에서,각각의 패치를 명도, 녹색-적색 성분 및 청색-황색 성분으로 표현하되, 명도를 버리고 녹색-적색 성분 및 청색-황색 성분만 유지하여 혼합 픽셀을 확인하도록 하는 것을 특징으로 하는 트라이맵 자동 생성 장치
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 경기도 가천대학교 산학협력단 경기도 지역 협력 연구센터 인공지능 기반 시니어 헬스케어 기술개발