1 |
1
영상을 획득하는 영상 획득부; 상기 영상에 포함된 사용자를 대체하기 위한 가상 자아를 기지정된 방식으로 생성하는 가상 자아 생성부;실시간으로 획득된 영상에 포함된 사용자의 얼굴에서 표정과 동작을 표현하기 위해 AU 정보와 사용자를 본인 확인을 위한 사용자 특징을 추출하는 특징 획득부; 상기 가상 자아를 기지정된 다른 사용자의 사용자 단말로 전송하고, 이후 실시간으로 획득되는 영상에서 추출된 상기 AU 정보와 상기 사용자 특징을 전송하며, 다른 사용자 단말에서 생성된 가상 자아 및 특징을 수신하는 통신부; 인증용 사용자 특징을 미리 획득하여 저장하고, 저장된 인증용 사용자 특징과 추출된 사용자 특징을 비교하여 사용자 인증을 수행하는 사용자 설정부; 수신된 AU 정보를 기반으로 수신된 가상 자아를 기지정된 방식으로 변환하여 표정 및 동작이 표현된 가상 자아를 복원하는 가상 자아 복원부; 및 복원된 가상 자아를 디스플레이하고, 사용자 인증 결과에 따라 결과를 함께 출력하는 디스플레이부를 포함하는 원격 현실 영상 송수신 장치
|
2 |
2
제1항에 있어서, 상기 가상 자아 생성부는 상기 가상 자아를 별도로 획득되는 인증용 이미지, 상기 실시간으로 획득된 영상의 지정된 이미지, 그래픽으로 생성된 이미지 또는 사용자와 무관한 타인의 이미지 중 하나를 이용하여 생성하는 원격 현실 영상 송수신 장치
|
3 |
3
제1항에 있어서, 상기 특징 획득부는 상기 실시간으로 획득된 영상을 인가받아 얼굴 영역을 추출하는 전처리 작업을 수행하는 전처리부; 전처리된 영상을 인가받아 표정을 표현하기 위한 눈 주변과 입 주변의 기지정된 개수의 AU를 추출하고, 동작을 표현하기 위한 시선 방향과 머리의 회전 방향에 따른 정보를 추출하여 상기 AU 정보를 획득하는 AU 정보 추출부; 및 전처리된 영상을 인가받아 기지정된 방식으로 얼굴 영역의 특징을 추출하여 상기 사용자 특징을 획득하는 사용자 특징 추출부를 포함하는 원격 현실 영상 송수신 장치
|
4 |
4
제1항에 있어서, 상기 사용자 설정부는 사용자를 식별하기 위한 식별자와 상기 가상 자아를 매칭하여 저장하는 사용자 정보 저장부; 상기 인증용 사용자 특징을 획득하여 상기 식별자와 매칭하여 저장하는 사용자 특징 저장부; 및 상기 인증용 사용자 특징과 상기 실시간으로 획득된 영상에서 추출된 사용자 특징을 비교하여 사용자 인증을 수행하는 사용자 확인부를 포함하는 원격 현실 영상 송수신 장치
|
5 |
5
제4항에 있어서, 상기 가상 자아 복원부는 상기 식별자와 함께 수신된 가상 자아를 저장하는 가상 자아 저장부; 및 상기 식별자와 함께 AU 정보가 수신되면, 저장된 가상 자아 중 상기 식별자에 대응하는 가상 자아를 획득하고, 획득된 가상 자아의 기지정된 특징 위치를 수신된 AU 정보에 따라 변경하여, 표정 및 동작이 표현된 가상 자아를 복원하는 가상 자아 변환부를 포함하는 원격 현실 영상 송수신 장치
|
6 |
6
사용자를 식별하기 위한 식별자와 실시간으로 획득되는 영상의 사용자를 대체하기 위한 가상 자아 및 사용자를 인증하기 위한 인증용 사용자 특징을 생성하고, 기지정된 사용자 단말로 상기 인증용 사용자 특징과 상기 가상 자아를 전송하는 단계; 상기 사용자를 실시간으로 촬영한 실시간 영상을 획득하고, 상기 실시간 영상에 포함된 사용자의 얼굴에서 표정과 동작을 표현하기 위한 AU 정보와 사용자를 확인하기 위한 사용자 특징을 획득하여, 획득된 AU 정보와 사용자 특징을 전송하는 단계; 다른 사용자 단말에서 생성된 가상 자아와 AU 정보 및 사용자 특징을 수신하고, 수신된 AU 정보를 기반으로 가상 자아를 기지정된 방식으로 변환하여 표정 및 동작이 표현된 가상 자아를 복원하는 단계; 상기 인증용 사용자 특징과 상기 실시간 영상에서 획득된 사용자 특징을 비교하여 사용자 본인 인증을 수행하는 단계; 및 복원된 가상 자아를 디스플레이하고, 사용자 본인 인증 결과에 따라 경고를 출력하는 단계를 포함하는 원격 현실 영상 송수신 방법
|
7 |
7
제6항에 있어서, 상기 가상 자아를 전송하는 단계는 상기 식별자를 포함하는 사용자 정보를 획득하는 단계; 및 상기 실시간 영상에 포함된 사람의 표정 및 동작을 대체할 수 있도록 기지정된 개수로 특징 위치가 지정된 가상 자아를 생성하는 단계; 상기 인증용 사용자 특징을 생성하는 단계; 및 상기 가상 자아와 상기 인증용 사용자 특징을 상기 식별자에 매칭하여 저장하고, 저장된 상기 가상 자아와 상기 인증용 사용자 특징을 매칭된 식별자와 함께 전송하는 단계를 포함하는 원격 현실 영상 송수신 방법
|
8 |
8
제7항에 있어서, 상기 가상 자아를 생성하는 단계는 상기 가상 자아를 별도로 획득되는 인증용 이미지, 상기 실시간으로 획득된 영상의 지정된 이미지, 그래픽으로 생성된 이미지 또는 사용자와 무관한 타인의 이미지 중 하나를 이용하여 생성하는 원격 현실 영상 송수신 방법
|
9 |
9
제7항에 있어서, 상기 AU 정보와 사용자 특징을 전송하는 단계는 상기 실시간 영상을 인가받아 얼굴 영역을 추출하는 전처리 작업을 수행하는 단계; 및 전처리된 영상을 인가받아 표정을 표현하기 위한 눈 주변과 입 주변의 기지정된 개수의 AU를 추출하고, 동작을 표현하기 위한 시선 방향과 머리의 회전 방향에 따른 정보를 추출하여 상기 AU 정보를 획득하는 단계; 전처리된 영상을 인가받아 기지정된 방식으로 얼굴 영역의 특징을 추출하여 상기 사용자 특징을 획득하는 단계; 및 상기 AU 정보와 상기 사용자 특징을 대응하는 식별자와 함께 전송하는 단계를 포함하는 원격 현실 영상 송수신 방법
|
10 |
10
제9항에 있어서, 상기 가상 자아를 복원하는 단계는 대응하는 식별자와 함께 수신된 가상 자아를 저장하는 단계; 및 대응하는 식별자와 함께 AU 정보가 수신되면, 대응하는 식별자에 대한 가상 자아를 획득하는 단계; 및 획득된 가상 자아의 기지정된 특징 위치를 수신된 AU 정보에 따라 변경하여, 표정 및 동작이 표현된 가상 자아를 복원하는 단계를 포함하는 원격 현실 영상 송수신 방법
|