맞춤기술찾기

이전대상기술

보호가 필요한 사용자를 위한 대화 중 감정 및 행동 모니터링 방법

  • 기술번호 : KST2023002492
  • 담당센터 : 경기기술혁신센터
  • 전화번호 : 031-8006-1570
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 보호가 필요한 사용자를 위한 대화 중 감정 및 행동 모니터링 방법이 제공된다. 본 발명의 실시예에 따른 사용자 모니터링 방법은, 사용자 발화를 입력 받아 사용자 발화 내용을 기반으로 대화 모델을 이용하여 대화내용을 생성하고, 생성된 대화내용을 음성으로 변환하여 출력하며, 대화 중에 사용자 발화 내용을 기반으로 감정분석 모델을 이용하여 사용자의 감정을 인식하고, 모니터링 한다. 이에 의해, 보호가 필요한 사용자의 이상 징후를 전문가/보호자가 모니터링할 수 있도록 하되, 사용자의 행동/감정을 자연스러운 대화가 이루어지는 상황에서 모니터링 할 수 있게 된다.
Int. CL G10L 25/63 (2013.01.01) G10L 15/04 (2006.01.01) G10L 15/26 (2006.01.01) G06V 40/20 (2022.01.01) G10L 25/30 (2013.01.01) G16H 20/70 (2018.01.01)
CPC G10L 25/63(2013.01) G10L 15/04(2013.01) G10L 15/26(2013.01) G06V 40/20(2013.01) G10L 25/30(2013.01) G16H 20/70(2013.01)
출원번호/일자 1020220142105 (2022.10.31)
출원인 한국전자기술연구원
등록번호/일자 10-2553509-0000 (2023.07.05)
공개번호/일자
공고번호/일자 (20230710) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 국내출원/신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2022.10.31)
심사청구항수 9

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 한국전자기술연구원 대한민국 경기도 성남시 분당구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 정민영 경기도 화성
2 신사임 서울특별시 서초구
3 장진예 경기도 성남시 수정구
4 김산 경기도 성남시 분당구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 남충우 대한민국 서울 강남구 언주로 ***, *층(역삼동, 광진빌딩)(알렉스국제특허법률사무소)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 한국전자기술연구원 대한민국 경기도 성남시 분당구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2022.10.31 수리 (Accepted) 1-1-2022-1149024-76
2 [우선심사신청]심사청구서·우선심사신청서
2022.11.16 수리 (Accepted) 1-1-2022-1218069-16
3 [우선심사신청]선행기술조사의뢰서
[Request for Preferential Examination] Request for Prior Art Search
2022.11.17 수리 (Accepted) 9-1-9999-9999999-89
4 [우선심사신청]선행기술조사보고서
[Request for Preferential Examination] Report of Prior Art Search
2022.12.23 수리 (Accepted) 9-1-2022-0020434-76
5 특허고객번호 정보변경(경정)신고서·정정신고서
2023.03.14 수리 (Accepted) 4-1-2023-5062703-94
6 특허고객번호 정보변경(경정)신고서·정정신고서
2023.03.20 수리 (Accepted) 4-1-2023-5067768-12
7 의견제출통지서
Notification of reason for refusal
2023.03.20 발송처리완료 (Completion of Transmission) 9-5-2023-0261823-92
8 [거절이유 등 통지에 따른 의견]의견서·답변서·소명서
2023.05.22 수리 (Accepted) 1-1-2023-0561035-32
9 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2023.05.22 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2023-0561038-79
10 등록결정서
Decision to grant
2023.07.03 발송처리완료 (Completion of Transmission) 9-5-2023-0600049-77
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
사용자 발화를 입력 받는 제1 입력단계;입력되는 사용자 발화 내용을 기반으로 대화 모델을 이용하여 대화내용을 생성하는 단계;생성된 대화내용을 음성으로 변환하여 출력하는 단계;제1 입력단계, 생성단계 및 출력단계를 수행하는 중에, 사용자 발화 내용을 기반으로 감정분석 모델을 이용하여 사용자의 감정을 인식하는 제1 인식단계; 및인식되는 사용자의 감정을 모니터링 하는 제1 모니터링 단계;를 포함하고,대화 모델은,사용자 발화 내용이 입력되면 발화 내용에 응답하기 위한 대화내용을 생성하여 출력하는 뉴럴 네트워크이고,감정분석 모델은,사용자 발화 내용이 입력되면 발화 내용으로부터 사용자의 감정을 인식하여 출력하는 뉴럴 네트워크이며,생성 단계는,입력되는 사용자 발화 내용을 기반으로 제1 대화 모델 및 제2 대화 모델 중 하나를 결정하는 단계; 및결정된 대화 모델을 이용하여 대화내용을 생성하는 단계;를 포함하고,제1 대화 모델은,사용자 발화 내용 및 발화 내용과 관련한 지식을 입력받아 입력되는 사용자 발화 내용과 관련한 지식으로부터 대답을 생성하여 출력하는 뉴럴 네트워크이고,제2 대화 모델은,사용자 발화 내용만을 입력받아, 입력되는 사용자 발화 내용으로부터 대답을 생성하여 출력하는 뉴럴 네트워크이며,제1 인식단계는,결정 단계에서 제2 대화 모델이 결정된 경우에는 수행되지만,결정 단계에서 제1 대화 모델이 결정된 경우에는 수행되지 않는 것을 특징으로 하는 사용자 모니터링 방법
2 2
청구항 1에 있어서,제1 입력단계, 생성단계 및 출력단계를 수행하는 중에, 사용자 영상을 입력받는 단계;사용자 영상을 기반으로 행동분석 모델을 이용하여 사용자 행동의 종류를 인식하는 제2 인식단계; 및인식되는 사용자의 행동을 모니터링 하는 제2 모니터링 단계;를 포함하고,행동분석 모델은,사용자 영상이 입력되면 영상으로부터 사용자 행동의 종류를 인식하여 출력하는 뉴럴 네트워크인 것을 특징으로 하는 사용자 모니터링 방법
3 3
삭제
4 4
삭제
5 5
삭제
6 6
청구항 1에 있어서,결정단계는,입력되는 사용자 발화 내용과 관련된 지식들인 관련 지식들을 추출하는 단계;추출된 관련 지식들 중 사용자 발화 내용과 관련도가 가장 높은 하나를 추출하는 단계; 및추출된 관련 지식의 관련도를 기초로 대화 모델을 선택하는 단계;를 포함하고,관련도는,발화 내용과 지식 간의 관련 정도를 확률값으로 나타낸 것을 특징으로 하는 사용자 모니터링 방법
7 7
청구항 6에 있어서,선택 단계는,추출된 관련 지식의 관련도가 기준값 이상이면, 제1 대화 모델을 선택하고,추출된 관련 지식의 관련도가 기준값 미만이면, 제2 대화 모델을 선택하는 것을 특징으로 하는 사용자 모니터링 방법
8 8
청구항 2에 있어서,제1 모니터링 결과와 제2 모니터링 결과를 표시하는 단계;를 더 포함하는 것을 특징으로 하는 사용자 모니터링 방법
9 9
청구항 8에 있어서,제1 모니터링 결과와 제2 모니터링 결과를 원격의 단말로 전송하는 단계;를 더 포함하는 것을 특징으로 하는 사용자 모니터링 방법
10 10
사용자 발화를 입력 받는 입력부;입력부를 통해 입력되는 사용자 발화 내용을 기반으로 대화 모델을 이용하여 대화내용을 생성하고, 대화내용 생성 중에 사용자 발화 내용을 기반으로 감정분석 모델을 이용하여 사용자의 감정을 인식하며 인식되는 사용자의 감정을 모니터링 하는 프로세서; 및프로세서에서 생성된 대화내용을 음성으로 변환하여 출력하는 출력부;를 포함하고,대화 모델은,사용자 발화 내용이 입력되면 발화 내용에 응답하기 위한 대화내용을 생성하여 출력하는 뉴럴 네트워크이고,감정분석 모델은,사용자 발화 내용이 입력되면 발화 내용으로부터 사용자의 감정을 인식하여 출력하는 뉴럴 네트워크이며,프로세서는,입력되는 사용자 발화 내용을 기반으로 제1 대화 모델 및 제2 대화 모델 중 하나를 결정하고, 결정된 대화 모델을 이용하여 대화내용을 생성하며,제1 대화 모델은,사용자 발화 내용 및 발화 내용과 관련한 지식을 입력받아 입력되는 사용자 발화 내용과 관련한 지식으로부터 대답을 생성하여 출력하는 뉴럴 네트워크이고,제2 대화 모델은,사용자 발화 내용만을 입력받아, 입력되는 사용자 발화 내용으로부터 대답을 생성하여 출력하는 뉴럴 네트워크이며,프로세서는,제2 대화 모델이 결정된 경우에는 사용자의 감정 인식 및 모니터링을 수행하지만,제1 대화 모델이 결정된 경우에는 사용자의 감정 인식 및 모니터링을 수행하지 않는 것을 특징으로 하는 사용자 모니터링 장치
11 11
사용자 발화 내용을 기반으로 대화 모델을 이용하여 대화내용을 생성하는 단계;생성단계를 수행하는 중에, 사용자 발화 내용을 기반으로 감정분석 모델을 이용하여 사용자의 감정을 인식하는 제1 인식단계; 및생성단계를 수행하는 중에, 사용자 영상을 기반으로 행동분석 모델을 이용하여 사용자의 행동을 인식하는 제2 인식단계;를 포함하고,대화 모델은,사용자 발화 내용이 입력되면 발화 내용에 응답하기 위한 대화내용을 생성하여 출력하는 뉴럴 네트워크이고,감정분석 모델은,사용자 발화 내용이 입력되면 발화 내용으로부터 사용자의 감정을 인식하여 출력하는 뉴럴 네트워크이며,생성 단계는,입력되는 사용자 발화 내용을 기반으로 제1 대화 모델 및 제2 대화 모델 중 하나를 결정하는 단계; 및결정된 대화 모델을 이용하여 대화내용을 생성하는 단계;를 포함하고,제1 대화 모델은,사용자 발화 내용 및 발화 내용과 관련한 지식을 입력받아 입력되는 사용자 발화 내용과 관련한 지식으로부터 대답을 생성하여 출력하는 뉴럴 네트워크이고,제2 대화 모델은,사용자 발화 내용만을 입력받아, 입력되는 사용자 발화 내용으로부터 대답을 생성하여 출력하는 뉴럴 네트워크이며,제1 인식단계는,결정 단계에서 제2 대화 모델이 결정된 경우에는 수행되지만,결정 단계에서 제1 대화 모델이 결정된 경우에는 수행되지 않는 것을 특징으로 하는 사용자 모니터링 방법
12 12
사용자 발화 내용을 기반으로 대화 모델을 이용하여 대화내용을 생성하는 단계;생성단계를 수행하는 중에, 사용자 발화 내용을 기반으로 감정분석 모델을 이용하여 사용자의 감정을 인식하는 제1 인식단계; 및생성단계를 수행하는 중에, 사용자 영상을 기반으로 행동분석 모델을 이용하여 사용자의 행동을 인식하는 제2 인식단계;를 포함하고,대화 모델은,사용자 발화 내용이 입력되면 발화 내용에 응답하기 위한 대화내용을 생성하여 출력하는 뉴럴 네트워크이고,감정분석 모델은,사용자 발화 내용이 입력되면 발화 내용으로부터 사용자의 감정을 인식하여 출력하는 뉴럴 네트워크이며,생성 단계는,입력되는 사용자 발화 내용을 기반으로 제1 대화 모델 및 제2 대화 모델 중 하나를 결정하는 단계; 및결정된 대화 모델을 이용하여 대화내용을 생성하는 단계;를 포함하고,제1 대화 모델은,사용자 발화 내용 및 발화 내용과 관련한 지식을 입력받아 입력되는 사용자 발화 내용과 관련한 지식으로부터 대답을 생성하여 출력하는 뉴럴 네트워크이고,제2 대화 모델은,사용자 발화 내용만을 입력받아, 입력되는 사용자 발화 내용으로부터 대답을 생성하여 출력하는 뉴럴 네트워크이며,제1 인식단계는,결정 단계에서 제2 대화 모델이 결정된 경우에는 수행되지만,결정 단계에서 제1 대화 모델이 결정된 경우에는 수행되지 않는 것을 특징으로 하는 사용자 모니터링 방법을 수행할 수 있는 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록매체
지정국 정보가 없습니다
패밀리정보가 없습니다
순번, 연구부처, 주관기관, 연구사업, 연구과제의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 국가R&D 연구정보 정보 표입니다.
순번 연구부처 주관기관 연구사업 연구과제
1 과학기술정보통신부 한국전자기술연구원 인공지능중심산업융합집적단지조성(R&D) 정서적 안정을 위한 인공지능기반 공감 서비스 기술 개발