| 1 |
1
회의자와, 회의자 주변의 회의모습을 모니터링시키면서, 중간시점화상회의 영상생성제어부로부터 생성된 중간시점화상회의영상을 다른 회의자들이 볼 수 있도록 근거리 또는 원격지의 또 다른 화상회의용 모니터쪽으로 전송시키는 화상회의용 모니터(100)와,화상회의용 모니터의 상단, 하단, 좌측, 우측에 위치되어, 회의자의 얼굴을 기준으로 측정된 상,하,좌,우 화상회의깊이영상을 획득한 후, 획득한 상,하,좌,우 화상회의깊이영상을 중간시점생성컨트롤러부로 전달시키는 4채널 깊이카메라부(200)와,화상회의용 모니터 내부공간 일측에 위치되어, 4채널 깊이카메라부로부터 상,하,좌,우 화상회의깊이영상을 전달받아, 이웃하는 화상회의영상깊이의 변화에 대한 변위(dispairty)의 변화증분 값을 연산시키고, 연산한 깊이당 변위증분을 이용하여 상,하,좌,우 화상회의깊이영상 상이의 임의의 시점에 해당하는 중간시점화상회의영상을 생성시키도록 제어하는 중간시점생성컨트롤러부(300)로 구성되고,상기 중간시점생성컨트롤러부(300)는4채널 깊이카메라부로부터 상,하,좌,우 화상회의깊이영상을 전달받아, 동일 깊이값에 따른 여러 화소에 대해 스테레오 정합을 사용하여 변위값의 빈도수가 가장 높은 것을 결정하는 스테레오 정합알고리즘엔진부(310)와,스테레오 정합알고리즘엔진부를 통해 변위값의 빈도수가 가장 높은 변위를 기준으로, 이웃하는 화상회의깊이영상의 변화에 대한 변위(dispairty)의 변화증분 값을 연산시키는 변위 증분 연산부(320)와,변위증분연산부를 통해 변위증분 값이 전달되면, 변위증분 값을 이용하여 좌(左) 화상회의 영상 또는 우(右) 화상회의 영상으로부터 그 사이의 임의의 중간시점에 해당하는 화상회의 영상을 생성시키거나, 상(上) 화상회의 영상 또는 하(下) 화상회의 영상으로부터 그 사이의 임의의 중간시점에 해당하는 화상회의 영상을 생성시키는 초기 중간시점 화상회의 영상생성부(330)와,초기 중간시점 화상회의 영상생성부로부터 생성된, 좌(左) 화상회의 영상, 우(右) 화상회의 영상, 상(上) 화상회의 영상, 하(下) 화상회의 영상의 초기 중간시점으로 시점을 이동시, 발생되는 영상잡음을 필터링시키는 중간값 필터링부(340)와,중간값 필터링부를 통해 좌(左) 화상회의 영상, 우(右) 화상회의 영상, 상(上) 화상회의 영상, 하(下) 화상회의 영상의 초기 중간시점으로 이동시 발생되는 영상 잡음을 제거한 후, 좌(左) 화상회의 영상 초기 중간시점과 우(右) 화상회의 영상 초기 중간시점, 상(上) 화상회의 영상 초기 중간시점과 하(下) 화상회의 영상 초기 중간시점을 결합시켜, 회의자가 원하는 중간시점의 화상회의영상을 생성시키도록 제어하는 중간시점 화상회의영상생성제어부(350)로 구성되는 다수의 카메라를 이용한 중간시점 화상 회의 장치에 있어서,상기 중간시점 화상회의영상생성제어부(350)는각각의 다른 시점의 RGB 영상과 그에 상응하는 깊이 영상이 두쌍씩 존재할 경우에, 각각의 다른 시점의 RGB 영상과 그에 상응하는 깊이 영상을 각 시점의 중간시점으로 3D 워핑을 한 후, 생겨난 비폐색영역을 상호보완시키도록 각 영상의 비폐색영역을 다른 영상에서 가지고 와서 채우는, 상호 보완의 방법을 사용하여 제어하는 비폐색영역 상호보완제어부(351)와,비폐색영역 상호보완제어부를 통해 비폐색영역을 상호보완시키고 남은 나머지 비폐색영역들을 홀 주변에 위치한 등과도선을 보면서, 그 부분들을 우선권을 주면서 반복적으로 그 부분들을 복사하여 홀들을 채우도록 제어하는 홀필링제어부(352)로 구성되는 것을 특징으로 하는 다수의 카메라를 이용한 중간시점 화상 회의 장치
|
