| 1 |
1
강화학습 기반 적응형 변복조 방식이 적용된 송신기에 있어서,상기 송신기로부터 상기 송신기와 통신을 수행하는 수신기까지의 거리를 고려하여, 현재의 통신 상황에 따른 특성값을 산출하는 특성값 산출부;복수의 트레이닝 데이터에 따라 미리 수행된 강화학습을 통해 결정된 통신 채널의 채널 경계값들을 이용하여, 상기 특성값에 따른 변복조 스킴을 선택하는 변복조 선택부;상기 선택된 변복조 스킴에 따라 송신하고자 하는 메시지를 인코딩하는 인코더; 및상기 인코딩된 메시지를 상기 선택된 변복조 스킴에 따라 변조하는 변조기;를 포함하며,상기 강화학습은, NEC(Neural Episodic Control) 알고리즘에 의한 학습이며, 상기 특성값은, 신호대잡음비이고, 상기 변복조 선택부는, 상기 신호대잡음비에 대해서 비트에러 확률 또는 스펙트럼 효율을 이용하여, 상기 채널 경계값들을 기준으로 구획된 영역들 중에서, 상기 산출된 특성값에 대응하는 하나의 영역을 선택하고, 상기 선택된 영역에 대응하는 변복조 방식과 상기 산출된 특성값에 대응하는 코딩 방식 및 코딩 비율을 변복조 스킴으로 선택하되, 상기 변복조 스킴을 선택하는 것은, 변복조 방식을 선택하는 것을 포함하고,상기 변복조 선택부가 상기 강화학습을 수행함에 있어서, 상기 NEC 알고리즘에 있어서 행위(Action)는 상기 채널 경계값들 중 적어도 하나의 채널 경계값을 상향 또는 하향 조정하는 것이고, 상기 NEC 알고리즘에 있어서 상태(State)는 상기 행위에 따라 조정되는 채널 경계값들로 설정되는 것이며,상기 변복조 선택부가 상기 채널 경계값들을 상향 또는 하향 조정하는 것은 가변적인 조정 단위에 따라 조정하는 것이고, 상기 가변적인 조정단위는 상기 강화학습의 시행에 따른 에피소드(Episode)의 수가 증가함에 따라 감소되도록 산출되는 것이며,상기 변복조 선택부는, 상기 코딩 방식의 코딩 비율과 상기 채널 경계값들을 기준으로 구획된 영역의 개수에 근거하여 보상(reward)을 산출하고, 상기 채널 경계값들을 조정하여 스펙트럼 효율값을 최대화하는 방향으로 상기 보상을 주어 강화학습을 수행하되, 상기 채널 경계값이 유효하지 않는 상태이면 패널티를 설정하고,상기 변복조 방식은 펄스폭 변복조방식, 진폭 변복조방식, 주파수 변복조방식 및 위상 변복조방식 중의 어느 하나의 방식을 이용하는 것을 특징으로 하는 강화학습 기반 적응형 변복조 방식이 적용된 송신기
|
| 2 |
2
삭제
|
| 3 |
3
삭제
|
| 4 |
4
삭제
|
| 5 |
5
삭제
|
| 6 |
6
삭제
|
| 7 |
7
제1항에 있어서,상기 채널 경계값들이 유효하지 않은 상태는,상기 채널 경계값들이 미리 설정된 신호대잡음비의 범위를 넘는 제1 조건을 만족하는 것을 특징으로 하는 강화학습 기반 적응형 변복조 방식이 적용된 송신기
|
| 8 |
8
제1항에 있어서,상기 채널 경계값들이 유효하지 않은 상태는,상기 채널 경계값들이 미리 설정된 간격보다 좁게 설정되는 제2 조건을 만족하는 것을 특징으로 하는 강화학습 기반 적응형 변복조 방식이 적용된 송신기
|
| 9 |
9
삭제
|
| 10 |
10
송신기에 의한 강화학습 기반 적응형 변복조 방법에 있어서,상기 송신기로부터 상기 송신기와 통신을 수행하는 수신기까지의 거리를 고려하여, 현재의 통신 상황에 따른 특성값을 산출하는 단계;복수의 트레이닝 데이터에 따라 미리 수행된 강화학습을 통해 결정된 통신 채널의 채널 경계값들을 이용하여, 상기 특성값에 따른 변복조 스킴을 선택하는 단계;상기 선택된 변복조 스킴에 따라 송신하고자 하는 메시지를 인코딩하는 단계; 및 상기 인코딩된 메시지를 상기 선택된 변복조 스킴에 따라 변조하는 단계를 포함하며,상기 강화학습은, NEC(Neural Episodic Control) 알고리즘에 의한 학습이며,상기 특성값은, 신호대잡음비이고,상기 변복조 스킴을 선택하는 단계는, 상기 신호대잡음비에 대해서 비트에러 확률 또는 스펙트럼 효율을 이용하여, 상기 채널 경계값들을 기준으로 구획된 영역들 중에서, 상기 산출된 특성값에 대응하는 하나의 영역을 선택하고, 상기 선택된 영역에 대응하는 변복조 방식과 상기 산출된 특성값에 대응하는 코딩 방식 및 코딩 비율을 변복조 스킴으로 선택하되, 상기 변복조 스킴을 선택하는 것은, 변복조 방식을 선택하는 것을 포함하고,상기 변복조 스킴을 선택하는 단계에서, 상기 강화학습을 수행함에 있어서, 상기 NEC 알고리즘에 있어서 행위(Action)는 상기 채널 경계값들 중 적어도 하나의 채널 경계값을 상향 또는 하향 조정하는 것이고, 상기 NEC 알고리즘에 있어서 상태(State)는 상기 행위에 따라 조정되는 채널 경계값들로 설정되는 것이며,상기 변복조 스킴을 선택하는 단계에서, 상기 채널 경계값들을 상향 또는 하향 조정하는 것은 가변적인 조정 단위에 따라 조정하는 것이고, 상기 가변적인 조정단위는 상기 강화학습의 시행에 따른 에피소드(Episode)의 수가 증가함에 따라 감소되도록 산출되는 것이며,상기 변복조 스킴을 선택하는 단계는, 상기 코딩 방식의 코딩 비율과 상기 채널 경계값들을 기준으로 구획된 영역의 개수에 근거하여 보상(reward)을 산출하고, 상기 채널 경계값들을 조정하여 스펙트럼 효율값을 최대화하는 방향으로 상기 보상을 주어 강화학습을 수행하되, 상기 채널 경계값이 유효하지 않는 상태이면 패널티를 설정하고,상기 변복조 방식은 펄스폭 변복조방식, 진폭 변복조방식, 주파수 변복조방식 및 위상 변복조방식 중의 어느 하나의 방식을 이용하는 것을 특징으로 하는 강화학습 기반 적응형 변복조 방법
|
| 11 |
11
삭제
|
| 12 |
12
삭제
|
| 13 |
13
삭제
|
| 14 |
14
삭제
|
| 15 |
15
강화학습 기반 적응형 변복조 방식이 적용된 통신 시스템에 있어서, 송신기로부터 상기 송신기와 통신을 수행하는 수신기까지의 거리를 고려하여, 현재의 통신 상황에 따른 특성값을 산출하고, 복수의 트레이닝 데이터에 따라 미리 수행된 강화학습을 통해 결정된 통신 채널의 채널 경계값들을 이용하여, 상기 특성값에 따른 변복조 스킴을 선택하고, 상기 선택된 변복조 스킴에 따라 송신하고자 하는 메시지를 인코딩하며, 상기 인코딩된 메시지를 상기 선택된 변복조 스킴에 따라 변조하는 송신기; 및상기 송신기로부터 상기 변복조 스킴에 대한 정보를 수신하고, 상기 변복조 스킴에 대응하는 방식으로 상기 송신기로부터 수신한 신호를 복조하고 디코딩하는 수신기를 포함하며,상기 강화학습은, NEC(Neural Episodic Control) 알고리즘에 의한 학습이며,상기 특성값은, 신호대잡음비이고,상기 송신기는, 상기 신호대잡음비에 대해서 비트에러 확률 또는 스펙트럼 효율을 이용하여, 상기 채널 경계값들을 기준으로 구획된 영역들 중에서, 상기 산출된 특성값에 대응 하는 하나의 영역을 선택하고, 상기 선택된 영역에 대응하는 변복조 방식과 상기 산출된 특성값에 대응하는 코딩 방식 및 코딩 비율을 변복조 스킴으로 선택하되, 상기 변복조 스킴을 선택하는 것은, 변복조 방식을 선택하는 것을 포함하고,상기 송신기가 상기 강화학습을 수행함에 있어서, 상기 NEC 알고리즘에 있어서 행위(Action)는 상기 채널 경계값들 중 적어도 하나의 채널 경계값을 상향 또는 하향 조정하는 것이고, 상기 NEC 알고리즘에 있어서 상태(State)는 상기 행위에 따라 조정되는 채널 경계값들로 설정되는 것이며,상기 송신기가 상기 채널 경계값들을 상향 또는 하향 조정하는 것은 가변적인 조정 단위에 따라 조정하는 것이고, 상기 가변적인 조정단위는 상기 강화학습의 시행에 따른 에피소드(Episode)의 수가 증가함에 따라 감소되도록 산출되는 것이며,상기 송신기는, 상기 코딩 방식의 코딩 비율과 상기 채널 경계값들을 기준으로 구획된 영역의 개수에 근거하여 보상(reward)을 산출하고, 상기 채널 경계값들을 조정하여 스펙트럼 효율값을 최대화하는 방향으로 상기 보상을 주어 강화학습을 수행하되, 상기 채널 경계값이 유효하지 않는 상태이면 패널티를 설정하고,상기 변복조 방식은 펄스폭 변복조방식, 진폭 변복조방식, 주파수 변복조방식 및 위상 변복조방식 중의 어느 하나의 방식을 이용하는 것을 특징으로 하는 강화학습 기반 적응형 변복조 방식이 적용된 통신 시스템
|
