맞춤기술찾기

이전대상기술

회선 신경망 기반 눈 개폐 분류 장치 및 방법

  • 기술번호 : KST2018008121
  • 담당센터 : 서울동부기술혁신센터
  • 전화번호 : 02-2155-3662
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 회선 신경망 기반 눈 개폐 분류 장치 및 방법에 관한 것으로, 구체적으로는 회선 신경망 기술(CNN; Convolutional Neural Network)을 통해 눈 영상을 분석하여 뜬 눈인지 감은 눈인지에 대한 분류를 수행하는 장치 및 방법에 관한 것이다. 본 발명의 실시 예에 따르면, 눈 개폐 영상을 학습한 회선 신경망 구조의 필터(filter)와 가중치(weight) 값들을 이용하여 입력한 눈 영상이 뜬 눈인지 감은 눈인지를 정확하게 분류할 수 있다.
Int. CL G06N 3/08 (2006.01.01) G06N 99/00 (2010.01.01)
CPC G06N 3/08(2013.01) G06N 3/08(2013.01) G06N 3/08(2013.01) G06N 3/08(2013.01)
출원번호/일자 1020160167635 (2016.12.09)
출원인 동국대학교 산학협력단
등록번호/일자
공개번호/일자 10-2018-0066610 (2018.06.19) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2016.12.09)
심사청구항수 9

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 동국대학교 산학협력단 대한민국 서울특별시 중구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 박강령 대한민국 서울특별시 강남구
2 김기완 대한민국 서울특별시 종로구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인이지 대한민국 서울특별시 금천구 가산디지털*로 ***(가산동, KCC웰츠밸리) ***-***

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 동국대학교 산학협력단 서울특별시 중구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2016.12.09 수리 (Accepted) 1-1-2016-1209777-15
2 의견제출통지서
Notification of reason for refusal
2018.07.26 발송처리완료 (Completion of Transmission) 9-5-2018-0508503-06
3 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2018.09.19 수리 (Accepted) 1-1-2018-0933545-13
4 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2018.09.19 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2018-0933566-72
5 등록결정서
Decision to grant
2018.10.11 발송처리완료 (Completion of Transmission) 9-5-2018-0688987-45
6 [명세서등 보정]보정서(심사관 직권보정)
2018.12.13 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2018-5023594-34
7 출원인정보변경(경정)신고서
Notification of change of applicant's information
2019.08.16 수리 (Accepted) 4-1-2019-5163486-33
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
눈 개폐 분류 장치에 있어서, 카메라로부터 취득한 컬러 눈 영상을 입력하는 눈 영상 입력부; 및상기 눈 영상에서 학습 된 회선 신경망(Convolutional Neural Network)구조의 필터(filter)와 가중치(weight)를 이용하여 눈 개폐 특징을 추출하고, 추출된 눈 개폐 특징을 학습하여 눈의 개폐 여부를 분류하는 눈 개폐 분류부; 및회선 신경망 구조를 변경하여 눈 개폐 특징을 학습하고, 역전파 알고리즘을 이용하여 상기 회선 신경망 구조의 필터와 가중치를 갱신하는 눈 영상 학습부를 포함하고,상기 눈 개폐 분류부는 상기 눈 영상 학습부에서 학습 된 회선 신경망 구조의 필터와 가중치를 입력된 눈 영상에 적용하여 2차원 콘볼루션 수행을 통해 눈 개폐 특징을 추출하는 콘볼루션 레이어 연산부;이전 콘볼루션 레이어 연산 결과를 활성화 함수를 이용하여 모든 픽셀들의 대체값을 출력하는 교정 선형 유닛 레이어 연산부; 및결과값을 정규화하는 지역 정규화 레이어 연산부를 더 포함하되,상기 콘볼루션 레이어 연산부는3×3 크기의 128개의 필터를 수직 및 수평 방향으로 2 픽셀씩 이동하여 제1 콘볼루션 레이어 연산을 수행하고, 3×3 크기의 256개의 필터를 수직 및 수평방향으로 1 픽셀씩 이동 및 2 픽셀 간격으로 패딩(padding)하여 제2 콘볼루션 레이어 연산을 수행하며, 상기 지역 정규화 레이어 연산부는 상기 교정 선형 유닛 레이어 연산부의 연산 결과를 아래의 수학식 2를 통해 정규화 하고,[수학식 2] 수학식 2에서 는 정규화된 결과값, , 및 는 하이퍼파라메터, 는 입력된 레이어의 i번째 채널의 요소 좌표(x, y), n은 인접 채널, N은 이전 레이어의 채널 수를 의미하고, 상기 는 1, 상기 는 0
2 2
삭제
3 3
삭제
4 4
제1항에 있어서,상기 눈 개폐 분류부는 상기 눈 개폐 특징에 설정된 필터를 적용하여 관심 영역에서 최댓값을 추출하는 풀링 레이어 연산부를 더 포함하되, 상기 풀링 레이어 연산부는 3×3 크기의 필터를 수직 및 수평 방향으로 탐색 시, 2 픽셀 간격으로 이동하여 관심 영역에서 최대값을 추출하는 눈 개폐 분류 장치
5 5
제4항에 있어서,상기 눈 개폐 분류부는 풀링 레이어 연산을 통해 추출한 최댓값을 복수의 노드로 연결하여 눈 개폐 특징을 축소하는 완전 연결 레이어 연산부를 더 포함하는 눈 개폐 분류 장치
6 6
제5항에 있어서,상기 눈 개폐 분류부는 축소된 눈 개폐 특징이 눈을 감은 영상일 확률과 눈을 뜬 영상일 확률을 산출하는 소프트맥스 레이어 연산부를 더 포함하는 눈 개폐 분류 장치
7 7
제6항에 있어서,상기 눈 개폐 분류부는 소프트맥스 레이어 연산의 결과값들 중에서 확률이 가장 높은 노드를 설정한 임계값을 기준으로 최종 분류 결과를 선택하는 분류 레이어 연산부를 더 포함하되,상기 임계값은 -1에서 1 사이의 실수 값 중 하나로 설정하는 눈 개폐 분류 장치
8 8
눈 개폐 분류 장치에서 눈의 개폐를 분류하기 위한 눈 개폐 분류 방법에 있어서, 상기 눈 개폐 분류 장치가 학습 된 회선 신경망 구조를 로드하는 단계;눈 영상 입력부에 카메라로부터 취득한 컬러 눈 영상을 입력하는 단계;눈 개폐 분류뷰가 상기 학습 된 회선 신경망 구조를 이용하여 상기 눈 영상에서 눈 개폐 특징 정보를 추출하는 단계;상기 눈 개폐 분류부가 상기 눈 개폐 특징 정보를 이용하여 상기 눈 개폐 특징 정보가 눈을 뜬 영상에 속할 확률과 눈을 감은 영상에 속할 확률을 산출하는 단계;상기 눈 개폐 분류부가 상기 눈을 뜬 영상에 속할 확률과 상기 눈을 감은 영상에 속할 확률의 차이를 설정한 임계값과 비교하여 입력된 눈 영상이 눈을 뜬 영상인지, 눈을 감은 영상인지 분류하는 단계를 포함하고,상기 학습된 회선 신경망 구조를 이용하여 상기 눈 영상에서 눈 개폐 특징 정보를 추출하는 단계는, 콘볼루션 레이어 연산부가 입력된 상기 눈 영상에 미리 설정된 필터를 적용하여 제1 콘볼루션 레이어 연산을 수행하는 단계;교정 선형 유닛 레이어 연산부가 상기 콘볼루션 레이어 연산부의 연산 결과를 이용하여 모든 픽셀에 대한 대체값을 출력하는 단계; 및 지역 정규화 레이어 연산부에서 상기 교정 선형 유닛 레이어 연산부의 연산 결과를 아래의 수학식 2,[수학식 2]를 이용해 정규화 하는 단계;를 더 포함하고, 상기 수학식 2에서 는 정규화된 결과값, , 및 는 하이퍼파라메터, 는 입력된 레이어의 i번째 채널의 요소 좌표(x, y), n은 인접 채널, N은 이전 레이어의 채널 수를 의미하고, 상기 는 1, 상기 는 0
9 9
제8항에 있어서,상기 눈 개폐 분류 장치가 학습된 회선 신경망 구조를 로드하는 단계는눈 영상 학습부에서 회선 신경망 구조를 변경하여 눈 개폐 특징을 학습하고, 역전파 알고리즘을 이용하여 상기 회선 신경망 구조의 필터와 가중치를 갱신한 결과를 로드하는 눈 개폐 분류 방법
10 10
제8항에 있어서,상기 임계값은 -1에서 1 사이의 실수 값 중 하나로 설정하는 눈 개폐 분류 방법
11 11
제8항 내지 제10항 중 어느 하나의 눈 개폐 분류 방법을 실행하고 컴퓨터가 판독 가능한 기록매체에 기록된 컴퓨터 프로그램
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 교육부 동국대학교 산학협력단 이공학개인기초연구지원사업(기본) 시선 위치, 눈 반응, 감정 및 행태 분석 기반 운전자 감성 인지 자동차 기술 개발[2/3]
2 미래창조과학부 동국대학교 산학협력단 대학ICT연구센터육성지원사업 소환현실기반 콘텐츠 제작을 위한 실감형 인터랙션 NUI/NUX 플랫폼 기술 개발[4/4]