1 |
1
입력영상에 대해 다운 샘플링하여 필터링 및 객체분할과 상황분석을 수행하는 전처리부; 상황인식을 위한 상황정보를 수집하는 상황수집부; 상기 상황수집부에서 수집된 상황정보 및 상기 상황정보와 상기 객체와의 호감도를 저장하는 기억저장부; 상기 전처리부로부터 필터링된 영상 및 분할된 객체와 상황분석 결과를 입력받아 명령어 및 상기 기억저장부에 저장된 상기 상황정보 및 상기 호감도에 기인하여 외인성 시각주의 모델과 내인성 시각주의 모델을 통해 상기 입력영상에서 데이터를 수집하여 외인성 주의영역 및 내인성 주의영역을 설정하는 시각주의 처리부; 및 상기 시각주의 처리부에서 설정된 상기 외인성 주의영역 및 상기 내인성 주의영역에 대해 결정규칙에 따라 주의영역을 결정하는 시각주의 결정부;를 포함하는 것을 특징으로 하는 마인드 어웨어 기반의 시각주의 장치
|
2 |
2
제 1항에 있어서, 상기 기억저장부는 수집된 상기 상황정보를 저장하는 작업저장부; 및 상기 객체와의 호감도를 저장하는 장기저장부를 포함하는 것을 특징으로 하는 마인드 어웨어 기반의 시각주의 장치
|
3 |
3
제 1항에 있어서, 상기 상황정보는 목적, 위치, 시간, 사용자 감성정보, 소셜네트워크 정보, 웹서치 정보 및 쇼핑정보를 포함하는 것을 특징으로 하는 마인드 어웨어 기반의 시각주의 장치
|
4 |
4
제 3항에 있어서, 상기 사용자 감성정보는 사용자의 정보 및 사용자의 표정, 음성, 뇌파를 포함하는 것을 특징으로 하는 마인드 어웨어 기반의 시각주의 장치
|
5 |
5
제 1항에 있어서, 상기 외인성 시각주의 모델은 상기 필터링된 영상에 대해 색상, 밝기, 방향성의 특징맵(feature map)을 생성하는 특징맵 생성부; 상기 특징맵을 기반으로 두드러진 영역의 세리언시맵(saliency map)을 생성하는 세리언시맵 생성부; 및 상기 세리언시맵을 바탕으로 외인성 주의영역을 설정하는 외인성 주의영역 설정부를 포함하는 것을 특징으로 하는 마인드 어웨어 기반의 시각주의 장치
|
6 |
6
제 1항에 있어서, 상기 내인성 시각주의 모델은 상기 전처리부에서 객체분할된 상기 객체를 인식하여 객체별로 라벨링을 수행하는 객체인식부; 상기 기억저장부에 저장된 상기 상황정보와 상기 객체인식부에서 라벨링된 상기 객체에 대해 텍스트 마이닝을 통해 상기 객체와의 호감도를 설정하여 상기 기억저장부에 저장하는 마인드 어웨어부; 명령어에 따라 상기 객체인식부에서 라벨링된 상기 객체와의 연관관계를 설정하는 명령제어부; 및 상기 마인드 어웨어부에서 설정된 호감도 및 상기 명령제어부에서 설정된 연관관계를 통해 내인성 주의영역을 설정하는 내인성 주의영역 설정부;를 포함하는 것을 특징으로 하는 마인드 어웨어 기반의 시각주의 장치
|
7 |
7
제 1항에 있어서, 상기 시각주의 결정부에서 결정규칙에 따라 상기 외인성 시각주의 모델의 영향여부가 결정되는 것을 특징으로 하는 마인드 어웨어 기반의 시각주의 장치
|
8 |
8
제 7항에 있어서, 상기 결정규칙은 위험관련 객체, 돌발적인 객체, 특이객체, 목적, 선호도에 따른 우선순위로 결정하는 것을 특징으로 하는 마인드 어웨어 기반의 시각주의 장치
|
9 |
9
상황인식을 위한 상황정보를 수집하는 단계; 입력영상에 대해 다운샘플링을 수행하는 단계; 상기 다운 샘플링한 영상을 필터링하여 객체분할 및 상황분석을 수행하는 단계; 상기 필터링된 영상 및 분할된 객체와 상황분석 결과와 명령어 및 상기 상황정보에 기인하여 외인성 시각주의 모델과 내인성 시각주의 모델을 통해 상기 입력영상에서 데이터를 수집하여 주의영역을 설정하는 단계; 및 설정된 주의영역에 대해 결정규칙에 따라 주의영역을 결정하는 단계;를 포함하는 것을 특징으로 하는 마인드 어웨어 기반의 시각주의 장치의 제어방법
|
10 |
10
제 9항에 있어서, 상기 상황정보는 목적, 위치, 시간, 사용자 감성정보, 소셜네트워크 정보, 웹서치 정보 및 쇼핑정보를 포함하는 것을 특징으로 하는 마인드 어웨어 기반의 시각주의 장치의 제어방법
|
11 |
11
제 10항에 있어서, 상기 사용자 감성정보는 사용자의 정보 및 상기 사용자의 표정, 음성, 뇌파를 포함하는 것을 특징으로 하는 마인드 어웨어 기반의 시각주의 장치의 제어방법
|
12 |
12
제 9항에 있어서, 상기 결정규칙은 위험관련 객체, 돌발적인 객체, 특이객체, 목적, 선호도에 따른 우선순위로 결정하는 것을 특징으로 하는 마인드 어웨어 기반의 시각주의 장치의 제어방법
|
13 |
13
사용자의 감성정보를 포함하는 상황정보를 입력하는 사용자 입력부; 상기 사용자 입력부를 통해 입력된 상기 사용자의 감성정보 및 상기 상황정보를 기반으로 입력영상에 대해 주의영역을 검출하는 시각주의 장치; 및 상기 입력영상에 대해 영상을 처리하여 디스플레이로 출력할 뿐만 아니라 상기 시각주의 장치에서 검출된 주의영역에 대해 관심영상으로 처리하여 상기 디스플레이로 출력하는 영상처리부;를 포함하는 것을 특징으로 하는 시각주의 장치를 이용한 영상출력 장치
|
14 |
14
제 13항에 있어서, 상기 영상처리부에서 상기 관심영상으로 처리할 때 상기 주의영역을 줌인으로 처리하는 것을 특징으로 하는 시각주의 장치를 이용한 영상출력 장치
|
15 |
15
제 13항에 있어서, 상기 영상처리부에서 상기 관심영상으로 처리할 때 상기 주의영역을 블링킹 처리하는 것을 특징으로 하는 시각주의 장치를 이용한 영상출력 장치
|
16 |
16
제 13항에 있어서, 상기 입력영상 및 상기 입력영상과 대응되는 다수의 주의영역에 대응되는 다수의 관심영상을 저장하는 저장부를 더 포함하는 것을 특징으로 하는 시각주의 장치를 이용한 영상출력 장치
|
17 |
17
제 16항에 있어서, 상기 영상처리부에서 상기 관심영역으로 처리할 때 상기 주의영역에 대응되는 관심영상을 상기 저장부에서 읽어와 처리하는 것을 특징으로 하는 시각주의 장치를 이용한 영상출력 장치
|