1 |
1
화자의 음성신호 및 영상을 수신하여 수신된 음성 및 영상을 인식할 수 있는 로봇 시스템에 있어서,수신된 영상에서 물체를 추출하여 상기 물체의 형상정보를 얻기 위한 물체추출수단과,상기 화자와의 대화를 통하여 상기 물체의 명칭을 포함하는 물체정보를 얻기 위한 상호작용수단과,상기 화자의 얼굴과 손을 인식하고 화자의 얼굴과 손의 위치를 추적하기 위한 사용자 인식 및 추적부와,상기 사용자 인식 및 추적부로부터 전달받은 상기 화자의 얼굴 및 손의 3차원 공간상의 위치에 의해 얼굴과 손 사이의 거리를 비교하거나 사용자의 움직임 정보를 더 참조하여 상기 물체의 크기정보를 얻기 위한 제스처인식수단을 포함하고,상기 물체추출수단으로부터 추출된 상기 물체의 형상정보, 상기 상호작용수단으로부터 얻은 상기 물체정보 및 상기 제스처인식수단으로부터 얻은 상기 물체의 크기정보를 이용하여 상기 물체를 학습하는 것을 특징으로 하는 멀티모달 상호작용을 이용한 로봇 물체 학습 시스템
|
2 |
2
삭제
|
3 |
3
청구항 1에 있어서,상기 제스처인식수단은 상기 얼굴과 손 사이의 거리가 일정 거리보다 짧으면 소형 물체로 인식하는 것을 특징으로 하는 멀티모달 상호작용을 이용한 로봇 물체 학습 시스템
|
4 |
4
청구항 1에 있어서,상기 제스처인식수단은 상기 얼굴과 손 사이의 거리가 일정 거리보다 길고, 사용자가 움직이지 않으면 중형 물체로 인식하는 것을 특징으로 하는 멀티모달 상호작용을 이용한 로봇 물체 학습 시스템
|
5 |
5
청구항 1에 있어서,상기 제스처인식수단은 상기 얼굴과 손 사이의 거리가 일정 거리보다 길고, 사용자가 움직이면 대형 물체로 인식하는 것을 특징으로 하는 멀티모달 상호작용을 이용한 로봇 물체 학습 시스템
|
6 |
6
청구항 1에 있어서,상기 제스처인식수단은 상기 화자가 손을 뻗은 후의 상기 화자의 움직임 여부를 판단하고, 움직임이 없으면 상기 물체의 크기를 중형 물체로 인식하고, 움직임이 있으면 상기 물체의 크기를 대형 물체로 인식하는 것을 특징으로 하는 멀티모달 상호작용을 이용한 로봇 물체 학습 시스템
|
7 |
7
로봇이 화자의 방향과 음성을 인식하는 단계와,상기 인식된 화자의 방향과 음성에 따라서 상기 로봇의 영상촬영부의 방향을 화자 방향으로 변경시켜 영상을 촬영하는 단계와,상기 로봇이 화자와의 상호작용을 통해 물체의 명칭을 포함하는 물체정보를 수집하는 단계와,상기 로봇이 상기 영상에서 상기 물체를 추출하여 상기 물체의 형상정보를 수집하는 단계와,상기 로봇이 화자의 얼굴 및 손의 3차원 공간상의 위치에 의해 얼굴과 손 사이의 거리를 비교하고, 상기 화자의 움직임 정보를 더 참조하여 상기 물체의 크기정보를 수집하는 단계와,상기 로봇이 상기 명칭을 포함하는 물체정보, 상기 물체의 형상정보 및 상기 물체의 크기정보를 기초로 상기 물체에 관한 학습을 수행하는 단계를 포함하는 멀티모달 상호작용을 이용한 로봇의 물체 학습 방법
|
8 |
8
삭제
|
9 |
9
청구항 7에 있어서,상기 로봇이 상기 화자의 상기 얼굴과 손 사이의 거리가 일정 거리보다 짧으면 소형 물체로 인식하는 것을 특징으로 하는 멀티모달 상호작용을 이용한 로봇의 물체 학습 방법
|
10 |
10
청구항 7에 있어서,상기 로봇이 상기 얼굴과 손 사이의 거리가 일정 거리보다 길고, 사용자가 움직이지 않으면 중형 물체로 인식하는 것을 특징으로 하는 멀티모달 상호작용을 이용한 로봇의 물체 학습 방법
|
11 |
11
청구항 7에 있어서,상기 로봇이 상기 얼굴과 손 사이의 거리가 일정 거리보다 길고, 사용자가 움직이면 대형 물체로 인식하는 것을 특징으로 하는 멀티모달 상호작용을 이용한 로봇의 물체 학습 방법
|
12 |
12
청구항 7에 있어서,상기 로봇이 상기 화자의 제스처의 인식을 통하여 상기 물체의 크기정보를 수집하는 단계는,화자가 손을 뻗은 뒤 움직이는지를 판단하는 단계와,화자가 손을 뻗은 뒤 움직이지 않으면 중형 물체로 인식하고, 움직이면 대형 물체로 인식하는 단계를 포함하는 것을 특징으로 하는 멀티모달 상호작용을 이용한 로봇의 물체 학습 방법
|