맞춤기술찾기

이전대상기술

뇌 신호로부터 변환한 이미지 기반의 감정 인식 방법 및 장치

  • 기술번호 : KST2019003025
  • 담당센터 : 서울서부기술혁신센터
  • 전화번호 : 02-6124-6930
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 실시예들은 뇌파 신호를 시간에 따른 채널별 뇌파 이미지로 변환하고 시간에 따른 채널별 뇌파 이미지를 리사이징하고 딥러닝 기반으로 학습하여 감정을 분류함으로써, 감정을 정확하게 인식할 수 있는 이미지 기반의 감정 인식 방법 및 장치를 제공한다.
Int. CL A61B 5/16 (2006.01.01) G06K 9/62 (2006.01.01) A61B 5/0476 (2006.01.01) A61B 5/04 (2006.01.01) G06N 3/02 (2019.01.01)
CPC A61B 5/165(2013.01) A61B 5/165(2013.01) A61B 5/165(2013.01) A61B 5/165(2013.01) A61B 5/165(2013.01) A61B 5/165(2013.01)
출원번호/일자 1020170124486 (2017.09.26)
출원인 연세대학교 산학협력단
등록번호/일자
공개번호/일자 10-2019-0035368 (2019.04.03) 문서열기
공고번호/일자 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2017.09.26)
심사청구항수 9

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 연세대학교 산학협력단 대한민국 서울특별시 서대문구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 변혜란 서울특별시 서대문구
2 임광용 서울특별시 서대문구
3 손귀영 서울특별시 서대문구
4 황선희 서울특별시 서대문구
5 홍용원 서울특별시 서대문구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인우인 대한민국 서울특별시 강남구 역삼로 ***, *층(역삼동, 중평빌딩)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 연세대학교 산학협력단 서울특별시 서대문구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2017.09.26 수리 (Accepted) 1-1-2017-0941834-12
2 선행기술조사의뢰서
Request for Prior Art Search
2018.12.10 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2019.02.14 발송처리완료 (Completion of Transmission) 9-6-2019-0033669-60
4 의견제출통지서
Notification of reason for refusal
2019.05.27 발송처리완료 (Completion of Transmission) 9-5-2019-0375584-31
5 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2019.07.19 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2019-0741956-17
6 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2019.07.19 수리 (Accepted) 1-1-2019-0741955-61
7 최후의견제출통지서
Notification of reason for final refusal
2019.11.21 발송처리완료 (Completion of Transmission) 9-5-2019-0843775-55
8 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2020.01.17 수리 (Accepted) 1-1-2020-0054076-31
9 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2020.01.17 보정각하 (Rejection of amendment) 1-1-2020-0054077-87
10 보정각하결정서
Decision of Rejection for Amendment
2020.05.28 발송처리완료 (Completion of Transmission) 9-5-2020-0366356-41
11 거절결정서
Decision to Refuse a Patent
2020.05.28 발송처리완료 (Completion of Transmission) 9-5-2020-0366357-97
12 [명세서등 보정]보정서(재심사)
Amendment to Description, etc(Reexamination)
2020.06.09 보정승인 (Acceptance of amendment) 1-1-2020-0590599-25
13 [거절이유 등 통지에 따른 의견]의견서·답변서·소명서
2020.06.09 수리 (Accepted) 1-1-2020-0590598-80
14 등록결정서
Decision to Grant Registration
2020.06.23 발송처리완료 (Completion of Transmission) 9-5-2020-0427697-69
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
컴퓨팅 디바이스에 의한 감정 인식 방법에 있어서,복수의 채널로부터 뇌 신호를 수신하는 단계;상기 수신한 뇌 신호의 아티팩트를 제거하여 필터링하는 전처리 단계;상기 필터링한 뇌 신호를 통계적인 방식으로 기 설정된 시간 구간별로 대표값을 추출하여 샘플링하는 단계;상기 시간 구간별로 샘플링한 뇌 신호를 2차원 배열 이미지로 변환하는 단계; 상기 2차원 배열 이미지를 그대로 사용하지 않고 상기 복수의 채널의 개수보다 적은 개수를 갖도록 상기 2차원 배열 이미지의 크기를 줄이는 단계; 및상기 크기를 줄인 2차원 배열 이미지를 기반으로 학습하여 생성한 감정 분류 모델을 이용하여 감정 상태를 분류하는 단계를 포함하며,상기 2차원 배열 이미지는 직사각형이며, 상기 2차원 배열 이미지의 일 방향으로는 시간의 변화에 따른 신호값에 대응하는 픽셀값이 연속하여 배치되고, 상기 2차원 배열 이미지의 상기 일 방향에 수직 방향으로는 상기 복수의 채널에 따른 신호값에 대응하는 픽셀값이 연속하여 배치되며,상기 2차원 배열 이미지의 크기를 줄이는 단계는 상기 2차원 배열 이미지의 특정 위치 또는 특정 영역에서 상기 복수의 채널에 따른 신호값에 대응하는 연속 배치된 픽셀값의 기울기를 변화시키며 상기 기울기를 높여서 상기 2차원 배열 이미지의 색차를 선명하게 하고 대비를 증가시키는 것을 특징으로 하는 감정 인식 방법
2 2
제1항에 있어서,상기 뇌 신호를 수신하는 단계는,멀티미디어를 시청하는 피검사체의 신체의 일부에 상기 복수의 채널을 부착시키고, 뇌전도(Electroencephalography, EEG) 신호를 측정하는 것을 특징으로 하는 감정 인식 방법
3 3
삭제
4 4
제1항에 있어서,상기 전처리 단계는,다변량의 신호를 통계적으로 독립적인 성분으로 분리하는 독립 성분 분석(Independent Component Analysis, ICA) 방식을 이용하여 상기 뇌 신호의 성분들을 선택적으로 분리하는 것을 것을 특징으로 하는 감정 인식 방법
5 5
삭제
6 6
삭제
7 7
삭제
8 8
삭제
9 9
제1항에 있어서,상기 감정 분류 모델은 기 설정된 크기를 갖는 이미지를 입력으로 하고, 감정 값을 출력으로 하는 컨볼루션 신경망(Convolutional Neural Network, CNN) 기반의 레이어로 구성되는 것을 특징으로 하는 감정 인식 방법
10 10
복수의 채널로부터 뇌 신호를 수신하는 뇌 신호 수신부;상기 수신한 뇌 신호를 기 설정된 시간 구간별로 샘플링하는 샘플링부;상기 시간 구간별로 샘플링한 뇌 신호를 2차원 이미지로 변환하는 이미지 변환부; 복수의 채널로부터 뇌 신호를 수신하는 뇌 신호 수신부;상기 수신한 뇌 신호의 아티팩트를 제거하여 필터링하는 전처리부;상기 필터링한 뇌 신호를 통계적인 방식으로 기 설정된 시간 구간별로 대표값을 추출하여 샘플링하는 샘플링부;상기 시간 구간별로 샘플링한 뇌 신호를 2차원 배열 이미지로 변환하는 이미지 변환부; 상기 2차원 배열 이미지를 그대로 사용하지 않고 상기 복수의 채널의 개수보다 적은 개수를 갖도록 상기 2차원 배열 이미지의 크기를 줄이는 리사이징부; 및상기 크기를 줄인 2차원 배열 이미지를 기반으로 학습하여 생성한 감정 분류 모델을 이용하여 감정 상태를 분류하는 감정 분류부를 포함하며,상기 2차원 배열 이미지는 직사각형이며, 상기 2차원 배열 이미지의 일 방향으로는 시간의 변화에 따른 신호값에 대응하는 픽셀값이 연속하여 배치되고, 상기 2차원 배열 이미지의 상기 일 방향에 수직 방향으로는 상기 복수의 채널에 따른 신호값에 대응하는 픽셀값이 연속하여 배치되며,상기 리사이징부는 상기 2차원 배열 이미지의 특정 위치 또는 특정 영역에서 상기 복수의 채널에 따른 신호값에 대응하는 연속 배치된 픽셀값의 기울기를 변화시키며 상기 기울기를 높여서 상기 2차원 배열 이미지의 색차를 선명하게 하고 대비를 증가시키는 것을 특징으로 하는 감정 인식 장치
11 11
제10항에 있어서,상기 뇌 신호 수신부는,멀티미디어를 시청하는 피검사체의 신체의 일부에 상기 복수의 채널을 부착시키고, 뇌전도(Electroencephalography, EEG) 신호를 측정하는 것을 특징으로 하는 감정 인식 장치
12 12
삭제
13 13
제10항에 있어서,상기 전처리부는,다변량의 신호를 통계적으로 독립적인 성분으로 분리하는 독립 성분 분석(Independent Component Analysis, ICA) 방식을 이용하여 상기 뇌 신호의 성분들을 선택적으로 분리하는 것을 것을 특징으로 하는 감정 인식 장치
14 14
삭제
15 15
삭제
16 16
삭제
17 17
삭제
18 18
제10항에 있어서,상기 감정 분류 모델은 기 설정된 크기를 갖는 이미지를 입력으로 하고, 감정 값을 출력으로 하는 컨볼루션 신경망(Convolutional Neural Network, CNN) 기반의 레이어로 구성되는 것을 특징으로 하는 감정 인식 장치
19 19
프로세서에 의해 실행 가능한 컴퓨터 프로그램 명령어들을 포함하는 비일시적(Non-Transitory) 컴퓨터 판독 가능한 매체에 기록되어 감정 인식을 위한 컴퓨터 프로그램으로서, 상기 컴퓨터 프로그램 명령어들이 컴퓨팅 디바이스의 프로세서에 의해 실행되는 경우에,복수의 채널로부터 뇌 신호를 수신하는 단계;상기 수신한 뇌 신호의 아티팩트를 제거하여 필터링하는 단계;상기 필터링한 뇌 신호를 통계적인 방식으로 기 설정된 시간 구간별로 대표값을 추출하여 샘플링하는 단계;상기 시간 구간별로 샘플링한 뇌 신호를 2차원 배열 이미지로 변환하는 단계; 상기 2차원 배열 이미지를 그대로 사용하지 않고 상기 복수의 채널의 개수보다 적은 개수를 갖도록 상기 2차원 배열 이미지의 크기를 줄이는 단계; 및상기 크기를 줄인 2차원 배열 이미지를 기반으로 학습하여 생성한 감정 분류 모델을 이용하여 감정 상태를 분류하는 단계를 포함한 동작들을 수행하며,상기 2차원 배열 이미지는 직사각형이며, 상기 2차원 배열 이미지의 일 방향으로는 시간의 변화에 따른 신호값에 대응하는 픽셀값이 연속하여 배치되고, 상기 2차원 배열 이미지의 상기 일 방향에 수직 방향으로는 상기 복수의 채널에 따른 신호값에 대응하는 픽셀값이 연속하여 배치되며,상기 2차원 배열 이미지의 크기를 줄이는 단계는 상기 2차원 배열 이미지의 특정 위치 또는 특정 영역에서 상기 복수의 채널에 따른 신호값에 대응하는 연속 배치된 픽셀값의 기울기를 변화시키며 상기 기울기를 높여서 상기 2차원 배열 이미지의 색차를 선명하게 하고 대비를 증가시키는 것을 특징으로 하는 컴퓨터 프로그램
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 과학기술정보통신부 고려대학교 산학협력단 정보통신방송연구개발사업 딥러닝을 이용하여 사람의 의도를 인지하는 BCI 기반 뇌인지 컴퓨팅 기술 개발