| 1 |
1
키넥트(20)를 통해 사용자가 바라보는 사용자 시점을 감지하고, 감지된 사용자 시점과 일치되는 3차원 영상을 스테레오 카메라(81)를 이용하여 획득하고, 획득한 3차원 영상을 3D 모니터(10)로 제공하는 사용자 시점 대응 원격지의 3차원 영상 획득 및 제공방법으로써,키넥트(20)를 이용하여 사용자의 시점을 인식하는 단계; 전송받은 좌표로 회전 스테이지(83)를 이용하여 스테레오 카메라(81)의 이동 및 회전하는 단계; 스테레오 카메라(81)를 이용하여 3차원 영상을 획득하는 단계; 통신을 이용하여 획득된 3차원 영상데이터를 전송하는 단계; 전송받은 3차원 영상데이터를 이용하여 3D 모니터(10)에 제공하는 단계; 재현된 3차원 영상을 확인하는 단계; 로 이루어지는 사용자 시점 대응 원격지의 3차원 영상 획득 및 제공방법에 있어서,상기 키넥트(20)를 통해 촬영한 후 사용자측 컴퓨터(30)로 신호를 전달하면, 상기 사용자측 컴퓨터(30)는 공간상의 얼굴의 이동 및 회전 정보를 획득하여 분석한 후, 사용자의 얼굴 및 시선을 인식하여 사용자 시선인식 위치 송신 데이터(50)를 획득하고, 획득한 사용자 시선인식 위치 송신 데이터(50)를 통신을 이용하여 원격지 컴퓨터(70)로 전송하되, 상기 회전 정보는 좌우 회전과 상하 회전을 포함하는 것이며,상기 사용자측 컴퓨터(30)에서 원격지 컴퓨터(70)로 시선인식 위치 송신 데이터(50)를 전송하기 위해, 상기 사용자측 컴퓨터(30)에는 사용자측 송,수신기(40)가 연결되며, 상기 원격지 컴퓨터(70)에는 원격지 송,수신기(60)가 연결되는 것으로, 상기 사용자측 송,수신기(40)와 원격지 송,수신기(60)를 통해 서로 통신을 하는 것이며,상기 원격지 컴퓨터(70)는 전송받은 시선인식 위치 송신 데이터(50)를 시리얼 통신을 통해 팬틸트 장치(82)의 모터와 회전 스테이지용 모터를 제어하게 되되, 상기 팬틸트 장치(82)의 모터와 회전 스테이지용 모터는 서보모터로서 정역회전이 가능한 스텝모터를 사용하는 것이며,상기 회전 스테이지(83)의 하부에 몸체가 더 구비되고, 상기 몸체에는 회전 스테이지용 모터가 내장되어 고정되고 상면에 관통홀이 형성되되, 상기 회전 스테이지용 모터의 샤프트가 관통홀을 통해 상부로 돌출되면, 상기 회전 스테이지용 모터는 상부의 회전 스테이지(83)의 하면 중심에 결합되는 것으로, 상기 회전 스테이지용 모터가 작동하여 모터의 샤프트가 회전되면 회전 스테이지(83)가 회전되는 것이며,상기 회전 스테이지(83)는 원형의 판으로 이루어지되, 상기 회전 스테이지(83)의 상면 가장자리에는 팬틸트 장치(82)가 결합되며, 상기 팬틸트 장치(82)의 상단에는 스테레오 카메라(81)가 결합되어 있어, 회전 스테이지용 모터를 통해 회전 스테이지(83)를 좌우로 회전시키면, 회전 스테이지(83)의 중심 축을 기준으로 팬틸트 장치(82)와 스테레오 카메라(81)가 이동 및 회전되되, 상기 스테레오 카메라(81)는 회전 스테이지(83)의 회전에 의해 회전 스테이지(83)의 호를 따라 이동하게 되며, 호를 따라 이동함에 따라 중심에 있는 관찰하고자 하는 물체를 모든 각도에서 촬영할 수 있는 것이며,상기 팬틸트 장치(82)는 회전 스테이지(83)와 스테레오 카메라(81)의 사이에 결합되는 것으로, 상기 팬틸트 장치(82)의 모터의 작동에 따라 스테레오 카메라(81)가 좌우 또는 상하로 회전되는 것으로,상기 스테레오 카메라(81)는 팬틸트 장치(82)의 모터와 회전 스테이지용 모터가 작동됨에 따라 얼굴과 동일하게 이동, 좌우 회전, 및 상하 회전하면서, 3차원 영상 데이터를 획득하여 사용자측 컴퓨터(30)로 전송한 후, 상기 사용자측 컴퓨터(30)는 통신을 이용하여 스테레오 카메라(81)를 통해 획득된 3차원 영상의 데이터인 스테레오 영상 수신 데이터(90)를 사용자측 컴퓨터(30)로 전송하는 것이며,상기 원격지 컴퓨터(70)는 스테레오 영상 수신 데이터(90)의 3차원 영상의 데이터를 이용하여 3D 모니터(10)로 전송하며, 상기 3D 모니터(10)는 3차원 영상을 사용자가 확인할 수 있도록 제공하는 것이며,상기 사용자측 컴퓨터(30)에는 사전에 미리 페이스 모델링이 저장된 것으로, 상기 사용자측 컴퓨터(30)는 연결된 키넥트(20)를 이용하여 영상을 획득하고, 획득된 영상으로부터 페이스 트래킹 알고리즘을 적용함으로써 페이스 영역을 추출하게 되고, 추출된 페이스 영역에 사전에 구성된 모델링 데이터를 표시함으로써 페이스와의 정합을 확인하고, 상기 페이스 트래킹 알고리즘에 의해 추출된 페이스의 중심좌표를 이용하여 회전 스테이지(83)의 회전축 좌표 이동 값을 확인하여 동작하고, 페이스의 기울어진 각도인 회전 값를 연산함으로써 틸트(Tilt)의 로테이션 값을 적용하여 동작시키는 것이며,상기 이동 값 및 회전 값을 이용하여, 팬틸트 장치(82)의 모터와 회전 스테이지용 모터를 시리얼 통신을 통해 제어함으로써 정확한 위치 및 각도 제어가 가능한 것을 특징으로 하는 사용자 시점 대응 원격지의 3차원 영상 획득 및 제공방법
|
