맞춤기술찾기

이전대상기술

인공 지능 기반 영상 및 음성 인식 영양 평가 방법

  • 기술번호 : KST2018014407
  • 담당센터 : 인천기술혁신센터
  • 전화번호 : 032-420-3580
요약, Int. CL, CPC, 출원번호/일자, 출원인, 등록번호/일자, 공개번호/일자, 공고번호/일자, 국제출원번호/일자, 국제공개번호/일자, 우선권정보, 법적상태, 심사진행상태, 심판사항, 구분, 원출원번호/일자, 관련 출원번호, 기술이전 희망, 심사청구여부/일자, 심사청구항수의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 서지정보 표입니다.
요약 본 발명은 인공 지능 기반 영상 및 음성 인식 영양 평가 방법을 공개한다. 이 방법은 카메라, 제어부, 저장부, 마이크 및 디스플레이부를 구비하는 휴대용 단말기를 이용한 영상 및 음성 인식 영양 평가 방법에 있어서, (a) 카메라가 식사 전 식단의 식품 또는 음식을 촬영하는 단계; (b) 제어부가 촬영된 식사 전 식단의 식품 또는 음식의 제1 영상을 인가받아 식사 전 식단의 식품 또는 음식의 종류 및 분량을 인식하고, 열량 및 영양소를 판별하는 단계; (c) 저장부가 인식된 식사 전 식단의 식품 또는 음식의 종류 및 분량과 판별된 열량 및 영양소를 임시 저장하는 단계; (d) 식사 종료시 카메라가 식사 후 식단의 식품 또는 음식을 촬영하는 단계; (e) 제어부가 촬영된 식사 후 식단의 식품 또는 음식의 제2 영상을 인가받아 임시 저장된 식사 전 식단의 식품 또는 음식의 종류 및 분량과의 차이를 산출하여 섭취된 식품 또는 음식의 종류와 분량을 추정하는 단계; 및 (f) 제어부가 추정한 섭취된 식품 또는 음식의 종류와 분량에 대한 데이터를 인가받아 열량과 영양소를 산출하여 디스플레이부에 표시하는 단계;를 포함하고, 식사 전 식단의 식품 또는 음식의 종류 및 분량의 인식은 검색 엔진을 통한 인공 지능의 머신 러닝이 동작하고, 검색되지 않는 식품 또는 음식인 경우에는 딥 러닝이 동작하는 것을 특징으로 한다.
Int. CL G16H 20/60 (2018.01.01) G10L 15/22 (2006.01.01) G06N 3/02 (2019.01.01) G06N 20/00 (2019.01.01)
CPC G16H 20/60(2013.01) G16H 20/60(2013.01) G16H 20/60(2013.01) G16H 20/60(2013.01)
출원번호/일자 1020170049119 (2017.04.17)
출원인 가천대학교 산학협력단
등록번호/일자 10-1959762-0000 (2019.03.13)
공개번호/일자 10-2018-0116779 (2018.10.26) 문서열기
공고번호/일자 (20190705) 문서열기
국제출원번호/일자
국제공개번호/일자
우선권정보
법적상태 등록
심사진행상태 수리
심판사항
구분 신규
원출원번호/일자
관련 출원번호
심사청구여부/일자 Y (2017.04.17)
심사청구항수 13

출원인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 출원인 표입니다.
번호 이름 국적 주소
1 가천대학교 산학협력단 대한민국 경기도 성남시 수정구

발명자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 발명자 표입니다.
번호 이름 국적 주소
1 이해정 대한민국 경기도 성남시 분당구
2 박선주 대한민국 서울특별시 마포구
3 조영임 대한민국 서울시 송파구

대리인

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 대리인 표입니다.
번호 이름 국적 주소
1 특허법인(유한) 대아 대한민국 서울특별시 강남구 역삼로 ***, 한양빌딩*층(역삼동)

최종권리자

번호, 이름, 국적, 주소의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 인명정보 - 최종권리자 표입니다.
번호 이름 국적 주소
1 (주)사랑과 선행 경기도 성남시 분당구
번호, 서류명, 접수/발송일자, 처리상태, 접수/발송일자의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 행정처리 표입니다.
번호 서류명 접수/발송일자 처리상태 접수/발송번호
1 [특허출원]특허출원서
[Patent Application] Patent Application
2017.04.17 수리 (Accepted) 1-1-2017-0372704-94
2 선행기술조사의뢰서
Request for Prior Art Search
2018.01.11 수리 (Accepted) 9-1-9999-9999999-89
3 선행기술조사보고서
Report of Prior Art Search
2018.02.06 수리 (Accepted) 9-1-2018-0006379-06
4 의견제출통지서
Notification of reason for refusal
2018.08.29 발송처리완료 (Completion of Transmission) 9-5-2018-0587952-67
5 [명세서등 보정]보정서
[Amendment to Description, etc.] Amendment
2018.10.26 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2018-1060636-61
6 [거절이유 등 통지에 따른 의견]의견(답변, 소명)서
[Opinion according to the Notification of Reasons for Refusal] Written Opinion(Written Reply, Written Substantiation)
2018.10.26 수리 (Accepted) 1-1-2018-1060635-15
7 등록결정서
Decision to grant
2019.03.11 발송처리완료 (Completion of Transmission) 9-5-2019-0178331-87
8 [명세서등 보정]보정서(심사관 직권보정)
2019.07.01 보정승인간주 (Regarded as an acceptance of amendment) 1-1-2019-5018004-46
번호, 청구항의 정보를 제공하는 이전대상기술 뷰 페이지 상세정보 > 청구항 표입니다.
번호 청구항
1 1
카메라, 제어부, 저장부, 마이크 및 디스플레이부를 구비하는 휴대용 단말기를 이용한 영상 및 음성 인식 영양 평가 방법에 있어서,(a) 상기 카메라가 식사 전 식단의 식품 또는 음식을 촬영하는 단계;(b) 상기 제어부가 상기 촬영된 식사 전 식단의 식품 또는 음식의 제1 영상을 인가받아 식사 전 식단의 식품 또는 음식의 종류 및 분량을 인식하고, 열량 및 영양소를 판별하는 단계;(c) 상기 저장부가 상기 인식된 식사 전 식단의 식품 또는 음식의 종류 및 분량과 상기 판별된 열량 및 영양소를 임시 저장하는 단계; (d) 식사 종료시 상기 카메라가 식사 후 식단의 식품 또는 음식을 촬영하는 단계; (e) 상기 제어부가 촬영된 상기 식사 후 식단의 식품 또는 음식의 제2 영상을 인가받아 상기 임시 저장된 식사 전 식단의 식품 또는 음식의 종류 및 분량과의 차이를 산출하여 섭취된 식품 또는 음식의 종류와 분량을 추정하는 단계; 및(f) 상기 제어부가 추정한 상기 섭취된 식품 또는 음식의 종류와 분량에 대한 데이터를 인가받아 열량과 영양소를 산출하여 상기 디스플레이부에 표시하는 단계; 를 포함하고,상기 식사 전 식단의 식품 또는 음식의 종류 및 분량의 인식은 검색 엔진을 통한 인공 지능의 머신 러닝이 동작하고, 검색되지 않는 식품 또는 음식인 경우에는 딥 러닝이 동작하며,상기 (b) 단계에서 상기 식단의 식품 또는 음식의 종류가 가공 식품의 경우, 머신 러닝이 상기 가공 식품의 포장재 색깔, 모양 및 글씨체를 인식하여 빅 데이터베이스로부터 상기 가공 식품의 영양소 정보를 로드해 오는 것을 특징으로 하는,인공 지능 기반 영상 및 음성 인식 영양 평가 방법
2 2
제 1 항에 있어서, 상기 (b) 단계는 상기 마이크의 음성 메모 기능을 이용하여 사용자의 음성 입력을 인식하여 상기 촬영된 식사 전 식단의 식품 또는 음식의 영상과 매핑되어 상기 제어부가 상기 식사 전 식단의 식품 또는 음식의 종류 및 분량을 인식하는 단계;를 더 포함하는 것을 특징으로 하는,인공 지능 기반 영상 및 음성 인식 영양 평가 방법
3 3
제 1 항에 있어서, 상기 (b) 단계는 상기 휴대용 단말기의 텍스트 메모 기능을 이용하여 사용자의 텍스트 입력을 인식하여 상기 촬영된 식사 전 식단의 식품 또는 음식의 영상과 매핑되어 상기 제어부가 상기 식사 전 식단의 식품 또는 음식의 종류 및 분량을 인식하는 단계;를 더 포함하는 것을 특징으로 하는,인공 지능 기반 영상 및 음성 인식 영양 평가 방법
4 4
삭제
5 5
제 1 항에 있어서, 상기 빅 데이터베이스에 상기 영양소 정보가 없는 경우, 상기 카메라가 상기 가공 식품의 포장재에 기재된 영양소 정보를 촬영하여 상기 제어부가 상기 식단의 식품 또는 음식의 열량 및 영양소를 판별하는데 영상을 제공하는 것을 특징으로 하는,인공 지능 기반 영상 및 음성 인식 영양 평가 방법
6 6
제 1 항에 있어서, 상기 (e) 단계는 상기 카메라의 틸트 기능을 이용하여 식품 또는 음식 용기의 크기, 깊이 및 부피를 인지하는 단계; 및레이저 판별기의 레이저 또는 초단파 판별기의 마이크로웨이브를 이용하여 상기 식품 또는 음식 용기를 제외한 상기 식품 또는 음식 용기에 담겨진 식품 또는 음식의 종류 및 부피의 3차원 데이터만을 추출하여 상기 섭취된 식품 또는 음식의 종류와 분량을 추정하는 단계; 를 더 포함하는 것을 특징으로 하는,인공 지능 기반 영상 및 음성 인식 영양 평가 방법
7 7
제 1 항에 있어서, 상기 딥 러닝 동작은 상기 인공 지능이 딥 러닝 알고리즘을 사용하여 실시간으로 입력되는 식품 또는 음식 정보로 판단 기준을 설정하고 실시간으로 빅 데이터베이스에 저장되는 데이터를 업데이트하는 단계; 및상기 업데이트되는 데이터로부터 식품 또는 음식 정보를 자동으로 인지하여 상기 제어부에 제공하는 단계;를 포함하는 것을 특징으로 하는,인공 지능 기반 영상 및 음성 인식 영양 평가 방법
8 8
제 7 항에 있어서, 상기 빅 데이터베이스에 저장되는 데이터는 계절별 음식 데이터, 음식별 칼로리 데이터, 효능 분석 데이터 및 영양소 관리 데이터를 포함하는 것을 특징으로 하는,인공 지능 기반 영상 및 음성 인식 영양 평가 방법
9 9
카메라, 제어부, 저장부, 마이크 및 디스플레이부를 구비하는 휴대용 단말기를 이용한 영상 및 음성 인식 영양 평가 방법에 있어서,(a) 상기 마이크가 식사 후 식단의 식품 또는 음식의 종류 및 분량에 대하여 사용자의 음성을 입력받아 음성 데이터로 변환하는 단계;(b) 상기 제어부가 상기 음성 데이터를 전달받아 섭취된 식품 또는 음식의 종류와 분량을 추정하는 단계; 및(c) 상기 제어부가 추정한 상기 섭취된 식품 또는 음식의 종류와 분량에 대한 데이터를 인가받아 열량과 영양소를 판별하여 상기 디스플레이부에 표시하는 단계; 를 포함하고,상기 식단의 식품 또는 음식의 종류 및 분량의 추정은 검색 엔진을 통한 인공 지능의 머신 러닝이 동작하고, 검색되지 않는 식품 또는 음식인 경우에는 딥 러닝이 동작하며,상기 (b) 단계에서 상기 식단의 식품 또는 음식의 종류가 가공 식품의 경우, 머신 러닝이 상기 가공 식품의 포장재 색깔, 모양 및 글씨체를 인식하여 빅 데이터베이스로부터 상기 가공 식품의 영양소 정보를 로드해 오는 것을 특징으로 하는,인공 지능 기반 영상 및 음성 인식 영양 평가 방법
10 10
제 9 항에 있어서, 상기 (a) 단계는 식사 종료시 상기 마이크 대신 상기 카메라가 상기 식사 후 식단의 식품 또는 음식을 촬영하여 상기 식사 후 식단의 식품 또는 음식의 영상을 상기 제어부에 제공하고, 상기 제어부가 상기 섭취된 식품 또는 음식의 종류와 분량을 추정할 수 있는 것을 특징으로 하는,인공 지능 기반 영상 및 음성 인식 영양 평가 방법
11 11
제 9 항에 있어서, 상기 인공 지능은 당해 식사에서 추정된 상기 섭취된 식품 또는 음식의 종류 및 분량과 열량 및 영양소를 기초로 하여 다음 식사에서 균형 식단을 고려하여 사용자와 대화식으로 식품 또는 음식의 종류와 분량을 추천하는 것을 특징으로 하는,인공 지능 기반 영상 및 음성 인식 영양 평가 방법
12 12
제 9 항에 있어서, 상기 인공 지능은 당해 식사에서 추정된 상기 섭취된 식품 또는 음식의 종류 및 분량과 열량 및 영양소를 기초로 하여 만성 질환자나 특정 음식 알레르기가 있는 사용자의 식이 요법에 관해 사용자와 대화식으로 식품 또는 음식의 종류와 분량을 추천하는 것을 특징으로 하는,인공 지능 기반 영상 및 음성 인식 영양 평가 방법
13 13
제 9 항에 있어서, 상기 식단의 식품 또는 음식의 종류의 추정은, 빅 데이터베이스에 저장된 자료 또는 딥러닝을 통해 인식된 음식 및 재료 분류 리스트를 활용하는 것을 특징으로 하는,인공 지능 기반 영상 및 음성 인식 영양 평가 방법
14 14
제 9 항에 있어서, 상기 판별되는 열량은 매 끼니마다 음식 별 칼로리 및 총 섭취 칼로리와 하루 총 섭취 칼로리를 포함하는 것을 특징으로 하는,인공 지능 기반 영상 및 음성 인식 영양 평가 방법
지정국 정보가 없습니다
패밀리정보가 없습니다
국가 R&D 정보가 없습니다.