| 1 |
1
인물 영상을 촬영하는 카메라 장치 및 상기 카메라 장치로부터 전송되는 인물 영상을 분석하여 인물 상태 정보를 추출한 후에 상기 카메라 장치로 카메라 제어정보를 전송하는 이미지 센싱 장치를 포함하는 인물 추적용 이미지 센싱 시스템에 있어서, 상기 이미지 센싱 장치는,상기 카메라 장치로부터 획득한 인물 영상을 수신하는 데이터 수신부;상기 데이터 수신부에서 전송되는 인물 영상으로부터 얼굴 인식 영상을 추출하여 얼굴 방향 정보를 확인하고, 상기 인물 영상으로부터 깊이 정보를 추출하여 뼈대 데이터를 분리하는 데이터 추출부;상기 뼈대 데이터를 인체의 각 특징점(Land-mark)에 매칭시켜 카메라 좌표계의 좌표값에서 월드 좌표계의 좌표값으로 변환하여 상기 카메라 장치의 위치 보정을 수행하여 위치 보정 데이터를 획득하는 위치 보정부;상기 얼굴 방향 정보, 상기 뼈대 데이터 및 위치 보정 데이터를 근거로 하여 현재 인물의 위치 정보, 뼈대의 자세 정보, 얼굴 방향 정보 또는 움직임 정보 중 하나 이상의 인물 상태 정보를 추출하여 전송하는 데이터 분석부; 상기 데이터 분석부로부터 전송받은 상기 인물 상태 정보를 근거로 상기 카메라 장치의 동작 상태를 결정하는 카메라 제어정보를 출력하는 제어부; 및상기 카메라 제어정보를 상기 카메라 장치로 송신하는 데이터 송신부를 포함하는 인물 추적용 3차원 이미지 센싱 시스템
|
| 2 |
2
제1항에 있어서, 상기 카메라 장치는, 컬러(RGB) 이미지 센서, 적외선 센서 또는 심도 센서 중 적어도 하나 이상의 센서를 포함하고, 상기 적어도 하나 이상의 센서를 통해 컬러 영상과 깊이 영상을 합성하여 3차원의 인물 영상을 촬영하여 전송하는 것을 특징으로 하는 인물 추적용 3차원 이미지 센싱 시스템
|
| 3 |
3
제1항에 있어서, 상기 데이터 추출부는,상기 인물 영상에서 얼굴색 영역을 검출하여 얼굴 인식 영상을 생성하고, 상기 얼굴 인식 영상에서 눈 영역을 선택하여 상기 눈 영역에 대한 방향을 검출함으로써 얼굴 방향 정보를 확인하는 얼굴 인식부; 및상기 인물 영상에서 인체의 각 특징점(Land-mark)의 기하학적 변화나 추가적인 센서를 이용한 깊이 영상을 추정하여 깊이 정보를 추출하고, 상기 깊이 정보에서 뼈대 데이터를 분리하는 뼈대 추출부를 포함하는 것을 특징으로 하는 인물 추적용 3차원 이미지 센싱 시스템
|
| 4 |
4
제1항에 있어서, 상기 제어부는,상기 인물 상태 정보를 기초로 인물의 위치 및 행동 정보에 따라 PTZ(Pan Tilt Zoom) 제어 정보를 생성하는 PTZ 제어 모듈을 더 포함하고, 상기 PTZ 제어 정보와 상기 카메라 장치의 꺼짐 동작, 대기 동작, 인식 동작, 추적 동작 중 어느 하나의 동작 상태를 결정하는 동작 상태 정보를 포함하여 카메라 제어정보를 생성 출력하는 것을 특징으로 하는 인물 추적용 3차원 이미지 센싱 시스템
|
| 5 |
5
인물 영상을 촬영하는 카메라 장치로부터 전송되는 인물 영상을 분석하여 인물 상태 정보를 추출한 후에 상기 카메라 장치로 카메라 제어정보를 전송하는 이미지 센싱 장치에서 수행하는 인물 추적용 이미지 센싱 방법에 있어서, 상기 카메라 장치로부터 획득한 인물 영상을 수신하는 데이터 수신 단계;상기 인물 영상으로부터 얼굴 인식 영상을 추출하여 얼굴 방향 정보를 확인하고, 상기 인물 영상으로부터 깊이 정보를 추출하여 뼈대 데이터를 분리하는 데이터 추출 단계;상기 뼈대 데이터를 인체의 각 특징점(Land-mark)에 매칭시켜 카메라 좌표계의 좌표값에서 월드 좌표계의 좌표값으로 변환하여 상기 카메라 장치의 위치 보정 데이터를 획득하는 위치 보정 단계;상기 얼굴 방향 정보, 상기 뼈대 데이터 및 위치 보정 데이터를 근거로 하여 현재 인물의 위치 정보, 뼈대의 자세 정보, 얼굴 방향 정보 또는 움직임 정보 중 하나 이상의 인물 상태 정보를 추출하여 전송하는 데이터 분석 단계; 상기 인물 상태 정보를 근거로 꺼짐 동작, 대기 동작, 인식 동작, 추적 동작 중 어느 하나의 동작 상태를 결정하는 카메라 제어정보를 출력하는 제어 단계; 및 상기 카메라 제어정보를 상기 카메라 장치로 송신하는 데이터 송신 단계를 포함하는 인물 추적용 3차원 이미지 센싱 방법
|
| 6 |
6
제5항에 있어서, 상기 위치 보정 단계는, 상기 뼈대 데이터를 인체의 각 특징점(Land-mark)에 매칭시켜 상기 카메라 장치의 위치 보정 여부를 확인하는 보정 판단 단계;상기 보정 판단 단계에서 위치 보정이 필요하다고 판단한 경우에, 상기 카메라 장치 내 각 구성요소 간의 위치를 기준 보정값을 근거로 하여 보정하고, 상기 보정을 통해 얻어진 보정계수를 상기 보정 판단 단계로 전송하는 보정 수행 단계; 및 상기 보정 판단 단계에서 위치 보정이 필요하지 않다고 판단한 경우에, 상기 카메라 좌표계의 좌표값에서 월드 좌표계의 좌표값으로 변환하여 상기 카메라 장치의 위치 보정 데이터를 획득하는 데이터 획득 단계를 더 포함하는 것을 특징으로 하는 인물 추적용 3차원 이미지 센싱 방법
|
| 7 |
7
제5항에 있어서, 상기 제어 단계는,상기 카메라 제어정보에 상기 인물 상태 정보를 기초로 인물의 위치 및 행동 정보에 따라 산출된 PTZ(Pan Tilt Zoom) 제어 정보를 더 포함하는 것을 특징으로 하는 인물 추적용 3차원 이미지 센싱 방법
|
