| 1 |
1
차량의 정보 및 기지국의 정보를 제공받아 저장하는 정보 저장부;상기 제공된 정보를 이용하여 심층강화학습을 수행하는 심층강화학습부; 및상기 학습된 정보를 기초로 상기 차량에 연결될 상기 기지국에 비디오 데이터의 품질 정보 및 상기 비디오 데이터의 용량을 할당하는 제어부;를 포함하는 심층 강화학습 기반 mmWave 차량 네트워크의 비디오 품질을 고려한 선제적 캐싱정책 학습 시스템
|
| 2 |
2
제1항에 있어서,상기 정보 저장부는 차량의 연결 상태 정보, 차량에 대해 상기 기지국이 얼만큼의 용량을 확보해 놓았는지의 정보, 상기 비디오 데이터가 저장된 차량의 버퍼부 가용 상태 및 차량으로부터 제공되는 비디오 데이터의 품질 정보를 포함하는 입력정보를 포함하는 심층 강화학습 기반 mmWave 차량 네트워크의 비디오 품질을 고려한 선제적 캐싱정책 학습 시스템
|
| 3 |
3
제2항에 있어서,상기 심층강화학습부는 상기 입력정보를 이용하여 경험 데이터를 생성하고, 상기 경험 데이터를 샘플링하여 학습시키는 심층 강화학습 기반 mmWave 차량 네트워크의 비디오 품질을 고려한 선제적 캐싱정책 학습 시스템
|
| 4 |
4
제3항에 있어서,상기 경험 데이터는 상기 입력정보를 포함하는 현재 상태, 상기 현재 상태에서 전환된 후속 상태, 상기 후속 상태로 전환되기 위해 실행되는 액션 및 상기 액션에 대한 보상을 포함하는 심층 강화학습 기반 mmWave 차량 네트워크의 비디오 품질을 고려한 선제적 캐싱정책 학습 시스템
|
| 5 |
5
제4항에 있어서,상기 심층강화학습부는 상기 보상을 최대화하기 위한 상기 액션을 최적화하는 심층 강화학습 기반 mmWave 차량 네트워크의 비디오 품질을 고려한 선제적 캐싱정책 학습 시스템
|
| 6 |
6
제1항에 있어서,상기 차량과 상기 기지국은 mmWave 파장대의 무선 통신을 사용하는 심층 강화학습 기반 mmWave 차량 네트워크의 비디오 품질을 고려한 선제적 캐싱정책 학습 시스템
|
| 7 |
7
제1항에 있어서,상기 심층강화학습부는 DDPG 알고리즘을 포함하는 심층 강화학습 기반 mmWave 차량 네트워크의 비디오 품질을 고려한 선제적 캐싱정책 학습 시스템
|
| 8 |
8
제1항에 있어서,상기 제어부는 상기 차량의 버퍼부의 용량이 가득찬 신호가 수신되면 상기 비디오 데이터를 전송하지 않는 심층 강화학습 기반 mmWave 차량 네트워크의 비디오 품질을 고려한 선제적 캐싱정책 학습 시스템
|
| 9 |
9
제1항에 있어서,상기 제어부는 상기 차량의 이동이 지연되는 신호가 수신되면 상기 차량 및 상기 기지국으로부터 제공된 정보를 삭제하는 심층 강화학습 기반 mmWave 차량 네트워크의 비디오 품질을 고려한 선제적 캐싱정책 학습 시스템
|
| 10 |
10
차량의 정보를 수집하는 단계;기지국의 정보를 수집하는 단계; 및상기 차량 및 상기 기지국의 정보를 입력 받아 심층강화학습을 이용하여 상기 차량에 연결될 상기 기지국에 상기 비디오 데이터의 품질 정보 및 상기 비디오 데이터의 용량을 할당하는 단계;를 포함하는 심층 강화학습 기반 mmWave 차량 네트워크의 비디오 품질을 고려한 선제적 캐싱정책 학습 기법
|
| 11 |
11
제10항에 있어서,상기 차량의 정보는 상기 차량의 연결 상태 정보, 상기 차량에 정보 저장 가용 상태 및 상기 차량으로부터 제공되는 비디오 데이터의 품질 정보를 포함하고, 상기 기지국의 정보는 상기 차량에 대해 얼마만큼의 저장 용량을 확보해 놓았는지의 정보를 포함하는 심층 강화학습 기반 mmWave 차량 네트워크의 비디오 품질을 고려한 선제적 캐싱정책 학습 기법
|
| 12 |
12
제11항에 있어서,상기 심층강화학습은 상기 차량의 정보 및 상기 기지국의 정보를 이용하여 경험 데이터를 생성하고, 상기 경험 데이터를 샘플링하여 학습시키는 심층 강화학습 기반 mmWave 차량 네트워크의 비디오 품질을 고려한 선제적 캐싱정책 학습 기법
|
| 13 |
13
제12항에 있어서, 상기 경험 데이터는 상기 차량의 정보 및 상기 기지국의 정보를 포함하는 현재 상태, 상기 현재 상태에서 전환된 후속 상태, 상기 후속 상태로 전환되기 위해 실행되는 액션 및 상기 액션에 대한 보상을 포함하는 심층 강화학습 기반 mmWave 차량 네트워크의 비디오 품질을 고려한 선제적 캐싱정책 학습 기법
|
| 14 |
14
제13항에 있어서,상기 심층강화학습는 보상을 최대화하기 위한 상기 액션을 최적화시키는 심층 강화학습 기반 mmWave 차량 네트워크의 비디오 품질을 고려한 선제적 캐싱정책 학습 기법
|
| 15 |
15
비디오 데이터가 저장되는 버퍼부를 포함하는 차량;상기 차량에 이동 경로에 설치되어 상기 차량의 버퍼부에 비디오 데이터를 순차적으로 전송하는 복수의 기지국; 및상기 차량 및 상기 기지국의 정보를 입력 받아 심층 강화 학습을 이용하여 상기 차량에 연결될 상기 기지국에 상기 비디오 데이터의 품질 정보 및 상기 비디오 데이터의 용량을 할당하는 서버;를 포함하는 심층 강화학습 기반 mmWave 차량 네트워크의 비디오 품질을 고려한 선제적 캐싱정책 학습 시스템
|
