1 |
1
다수의 스펙트럼 센싱 장치로부터 주파수별 간섭량 정보를 수신하여 저장하는 스펙트럼 센싱 정보 저장부;네트워크 내 다수의 2차 사용자 단말들로부터 위치 정보를 수신하고, 각 2차 사용자 단말의 통신 성공 확률을 연산하는 통신 성공 확률 연산부;상기 통신 성공 확률을 상기 2차 사용자 단말별 초기 접속 확률로 설정하고, 각 반복마다 상기 2차 사용자 단말별로 접속 확률, 상태 함수 및 유틸리티 함수를 갱신하도록 학습이 이루어지는 강화 학습부; 및상기 강화 학습부에서 학습이 완료될 경우, 상기 2차 사용자 단말별 최종 접속 확률에 기초하여 인지 무선 통신을 수행할 2차 사용자 단말을 선택하는 인지무선 단말 결정부를 포함하되,상기 강화 학습부는 각 반복마다 상기 2차 사용자 단말이 상기 접속 확률에 기초하여 인지 무선 통신을 시도한 후 피드백하는 통신 수행 여부에 대한 정보 및 디코딩 성공 여부에 대한 정보를 수신하고, 각 반복에서 디코딩에 성공한 단말의 수에 기초하여 네트워크 성능에 대한 함수인 유틸리티 함수를 갱신하고, 상기 유틸리티 함수 및 통신 수행 여부에 대한 정보를 이용하여 상기 2차 사용자 단말별로 상기 상태 함수를 갱신하며, 상기 상태 함수 및 통신 수행 여부에 대한 정보를 이용하여 접속 확률을 갱신하고,상기 상태 함수는 현재 반복에서의 유틸리티 함수값 및 이전 반복에서의 유틸리티 함수값의 차에 기초하여 다음 반복에서의 값이 결정되는 것을 특징으로 하는 인지무선 단말 결정을 위한 제어 장치
|
2 |
2
삭제
|
3 |
3
제1항에 있어서,상기 상태 함수의 초기값은 상기 통신 성공 확률을 이용하여 결정되는 것을 특징으로 하는 인지무선 단말 결정을 위한 제어 장치
|
4 |
4
제1항에 있어서,상기 접속 확률을 결정하는 식은 상기 강화 학습부의 반복이 증가될수록 상기 2차 사용자 단말별 접속 확률이 1 또는 0에 근접하도록 설정되는 것을 특징으로 하는 인지무선 단말 결정을 위한 제어 장치
|
5 |
5
제1항에 있어서,상기 유틸리티 함수는 각 반복(t)별로 다음의 수학식과 같이 갱신되는 것을 특징으로 하는 인지무선 단말 결정을 위한 제어 장치
|
6 |
6
제5항에 있어서,상기 상태 함수는 각 반복(t)별로 다음의 수학식과 같이 갱신되는 것을 특징으로 하는 인지무선 단말 결정을 위한 제어 장치
|
7 |
7
제6항에 있어서,상기 접속 확률pk(t)은 각 반복(t)별로 다음의 수학식과 같이 갱신되는 것을 특징으로 하는 인지무선 단말 결정을 위한 제어 장치
|
8 |
8
제1항에 있어서,상기 인지 무선 단말 결정부는 상기 2차 사용자 단말별 최종 접속 확률이 미리 설정된 임계치 이상인 단말들을 인지무선 통신을 수행할 단말로 결정하는 것을 특징으로 하는 인지무선 단말 결정을 위한 제어 장치
|
9 |
9
다수의 스펙트럼 센싱 장치로부터 주파수별 간섭량 정보를 수신하여 저장하는 단계(a);네트워크 내 다수의 2차 사용자 단말들로부터 위치 정보를 수신하고, 각 2차 사용자 단말의 통신 성공 확률을 연산하는 단계(b);상기 통신 성공 확률을 상기 2차 사용자 단말별 초기 접속 확률로 설정하고, 각 반복마다 상기 2차 사용자 단말별로 접속 확률, 상태 함수 및 유틸리티 함수를 갱신하도록 학습이 이루어지는 단계(c); 및상기 단계(c)에서 학습이 완료될 경우, 상기 2차 사용자 단말별 최종 접속 확률에 기초하여 인지 무선 통신을 수행할 2차 사용자 단말을 선택하는 단계(d)를 포함하되,상기 단계(c)는 각 반복마다 상기 2차 사용자 단말이 상기 접속 확률에 기초하여 인지 무선 통신을 시도한 후 피드백하는 통신 수행 여부에 대한 정보 및 디코딩 성공 여부에 대한 정보를 수신하고, 각 반복에서 디코딩에 성공한 단말의 수에 기초하여 네트워크 성능에 대한 함수인 유틸리티 함수를 갱신하고, 상기 유틸리티 함수 및 상기 통신 수행 여부에 대한 정보를 이용하여 상기 2차 사용자 단말별로 상기 상태 함수를 갱신하며, 상기 상태 함수 및 통신 수행 여부에 대한 정보를 이용하여 접속 확률을 갱신하고,상기 상태 함수는 현재 반복에서의 유틸리티 함수값 및 이전 반복에서의 유틸리티 함수값의 차에 기초하여 다음 반복에서의 값이 결정되는 것을 특징으로 하는 인지무선 단말 결정 방법
|
10 |
10
삭제
|
11 |
11
제9항에 있어서,상기 상태 함수의 초기값은 상기 통신 성공 확률을 이용하여 결정되는 것을 특징으로 하는 인지무선 단말 결정 방법
|
12 |
12
제9항에 있어서,상기 접속 확률을 결정하는 식은 상기 단계 (c)의 반복이 증가될수록 상기 2차 사용자 단말별 접속 확률이 1 또는 0에 근접하도록 설정되는 것을 특징으로 하는 인지무선 단말 결정 방법
|
13 |
13
제9항에 있어서,상기 유틸리티 함수는 각 반복(t)별로 다음의 수학식과 같이 갱신되는 것을 특징으로 하는 인지무선 단말 결정 방법
|
14 |
14
제13항에 있어서,상기 상태 함수는 각 반복(t)별로 다음의 수학식과 같이 갱신되는 것을 특징으로 하는 인지무선 단말 결정 방법
|
15 |
15
제14항에 있어서,상기 접속 확률pk(t)은 각 반복(t)별로 다음의 수학식과 같이 갱신되는 것을 특징으로 하는 인지무선 단말 결정 방법
|
16 |
16
제9항에 있어서,상기 단계(d)는 상기 2차 사용자 단말별 최종 접속 확률이 미리 설정된 임계치 이상인 단말들을 인지무선 통신을 수행할 단말로 결정하는 것을 특징으로 하는 인지무선 단말 결정 방법
|