| 1 |
1
엣지 클라우드에서 적응형 캐싱을 위한 강화학습 기반 저장 노드의 제어 방법에서, 파일 인기도 및 파일 적중률 정보를 획득하는 단계;상기 파일 인기도 정보는 강화학습 에이전트에 파일 적중률 정보는 중앙 집중 관리 노드에 각각 제공하는 단계;상기 파일 인기도, 상기 파일 적중률 정보 및 상기 중앙 집중 관리 노드로부터 수신한 보상값 정보를 기초로 학습을 수행하는 단계; 및학습 결과를 기초로 저장해야 할 최적의 파일을 선택하는 단계를 포함하는, 강화학습 기반 저장 노드의 제어 방법
|
| 2 |
2
제 1 항에 있어서, 상기 강화학습 에이전트와 노드 관리자는 동일한 저장 노드에 위치한 강화학습 기반 저장 노드의 제어 방법
|
| 3 |
3
제 1 항에 있어서, 상기 파일 인기도, 상기 파일 적중률 정보 및 상기 중앙 집중 관리 노드로부터 수신한 보상값 정보를 기초로 학습을 수행하는 단계는, 상기 파일 인기도가 제 1 인기 기준값보다 높아도 전송시간 요구가 제 1 시간 기준값보다 낮은 파일들을 캐쉬하지 않도록 학습을 수행하는 단계를 더 포함하는, 강화학습 기반 저장 노드의 제어 방법
|
| 4 |
4
제 1 항에 있어서, 상기 중앙 집중 관리노드는 강화 학습 기반 저장 노드들로부터 파일 적중률 정보를 수신하는 단계;전송시간 QoS 위반 총 개수를 확인하는 단계;상기 파일 적중률 정보 및 상기 전송 시간 QoS 위반 총 개수를 기초로 보상값 정보를 계산하는 단계; 및계산된 보상값 정보를 상기 강화 학습 에이전트에게 전달하는 단계를 더 포함하는, 강화학습 기반 저장 노드의 제어 방법
|
| 5 |
5
제 4 항에 있어서, 상기 전송 시간 QoS 위반은 사용자 노드가 파일을 요청하고 수신할 때까지 걸리는 시간이 해당 파일의 전송 시간 최소 요구 사항보다 더 긴 경우를 의미하는, 강화학습 기반 저장 노드의 제어 방법
|
| 6 |
6
제 1 항에 있어서, 엣지 클라우드는 복수의 강화학습 기반 저장 노드를 포함하고, 상기 엣지 클라우드는 부모 저장 노드와 적어도 하나의 리프 저장 노드를 포함하는 2계층 엣지 클라우드를 포함하는, 강화학습 기반 저장 노드의 제어 방법
|
| 7 |
7
제 6 항에 있어서,상기 복수의 강화학습 기반 저장 노드에 포함된 개별 강화학습 에이전트는 타임 슬롯마다 동일한 보상값 정보를 공유하는, 강화학습 기반 저장 노드의 제어 방법
|
| 8 |
8
제 6 항에 있어서,상기 부모 저장 노드와 상기 적어도 하나의 리프 저장 노드는 저장할 파일을 선택하는 작업을 소정 주기로 반복적으로 수행하는, 강화학습 기반 저장 노드의 제어 방법
|
| 9 |
9
제 1 항에 있어서,상기 노드 관리자는 파일 저장 선호도 정보를 상기 강화학습 에이전트로부터 수신하는 단계;상기 저장 선호도 정보를 기초로 n 개의 파일을 선택하는 단계;상기 n 개의 파일 해당하는 파일 식별자를 식별하는 단계; 및상기 파일 식별자에 대응하는 파일을 캐시에 저장하는 단계를 더 포함하는, 강화학습 기반 저장 노드의 제어 방법
|
| 10 |
10
제 9 항에 있어서,상기 n 개는 상기 캐시의 용량에 비례하는, 강화학습 기반 저장 노드의 제어 방법
|
| 11 |
11
엣지 클라우드에서 적응형 캐싱을 위한 강화학습 기반 저장 노드에서, 파일 인기도 및 파일 적중률 정보를 획득하고, 상기 파일 인기도 정보는 강화학습 에이전트에 파일 적중률 정보는 중앙 집중 관리 노드에 각각 제공하고, 학습 결과를 기초로 저장해야 할 최적의 파일을 선택하는 노드 관리자;보상값 정보를 생성하는 중앙 집중 관리 노드; 및상기 파일 인기도, 상기 파일 적중률 정보 및 상기 중앙 집중 관리 노드로부터 수신한 보상값 정보를 기초로 학습을 수행하는 강화학습 에이전트를 포함하는, 강화학습 기반 저장 노드
|
| 12 |
12
제 11 항에 있어서, 상기 강화학습 에이전트와 노드 관리자는 동일한 저장 노드에 위치한, 강화학습 기반 저장 노드
|
| 13 |
13
제 11 항에 있어서, 상기 강화학습 에이전트는 상기 파일 인기도가 제 1 인기 기준값보다 높아도 전송시간 요구가 제 1 시간 기준값보다 낮은 파일들을 캐쉬하지 않도록 학습을 수행하는,강화학습 기반 저장 노드
|
| 14 |
14
제 11 항에 있어서, 상기 중앙 집중 관리노드는 복수의 강화 학습 기반 저장 노드로부터 적중률 정보를 수신하고, 전송시간 QoS 위반 총 개수를 확인하고, 상기 적중률 정보 및 상기 전송 시간 QoS 위반 총 개수를 기초로 보상값 정보를 계산하고, 계산된 보상값 정보를 상기 강화 학습 에이전트에게 전달하는,강화학습 기반 저장 노드
|
| 15 |
15
제 14 항에 있어서, 상기 전송 시간 QoS 위반은 사용자 노드가 파일을 요청하고 수신할 때까지 걸리는 시간이 해당 파일의 전송 시간 최소 요구 사항보다 더 긴 경우를 의미하는, 강화학습 기반 저장 노드
|
| 16 |
16
제 11 항에 있어서, 엣지 클라우드는 복수의 강화학습 기반 저장 노드를 포함하고, 상기 엣지 클라우드는 부모 저장 노드와 적어도 하나의 리프 저장 노드를 포함하는 2계층 엣지 클라우드를 포함하는, 강화학습 기반 저장 노드
|
| 17 |
17
제 16 항에 있어서, 상기 복수의 강화학습 기반 저장 노드에 포함된 개별 강화학습 에이전트는 타임 슬롯마다 동일한 보상값 정보를 공유하는, 강화학습 기반 저장 노드
|
| 18 |
18
제 16 항에 있어서, 상기 부모 저장 노드와 상기 적어도 하나의 리프 저장 노드는 저장할 파일을 선택하는 작업을 소정 주기로 반복적으로 수행하는, 강화학습 기반 저장 노드
|
| 19 |
19
제 11 항에 있어서, 상기 노드 관리자는 파일 저장 선호도 정보를 상기 강화학습 에이전트로부터 수신하고, 수신된 상기 저장 선호도 정보를 기초로 n 개의 파일을 선택하고, 상기 n 개의 파일 해당하는 파일 식별자를 식별하고, 상기 파일 식별자에 대응하는 파일을 캐시에 저장하는,강화학습 기반 저장 노드
|
| 20 |
20
제 19 항에 있어서, 상기 n 개는 상기 캐시의 용량에 비례하는, 강화학습 기반 저장 노드
|
