基于深度强化学习的车联网任务卸载与资源管理优化

张旭秀,尹利轩,谢键,丁一,闫涵,王琳

Deep reinforcement learning-based optimization for task offloading and resource management in vehicular network

Xuxiu ZHANG,Lixuan YIN,Jian XIE,Yi DING,Han YAN,Lin WANG

表 1 车联网MEC系统的仿真参数配置

Tab.1 Simulation parameter configuration of vehicular MEC system

参数 数值 参数 数值 低轨卫星数量 1 $ \rho (m) $ 0.9 u 3 $ \eta $ 0.9 RSU计算速度/( MB·s−1) [5，10] $ \sigma $ 0.1 车辆计算速度/( MB·s−1) [3，6] $ N $ 200 RSU内置缓存容量/MB 4 $ \gamma $ 0.99 $ \delta _{\text{G}}^{u} $ 0.1 价值网络学习率 0.000 3 $ \delta _{\text{U}}^{u} $ 0.067 策略网络学习率 0.000 3 $ \delta _{\text{V}}^{u} $ 1 裁剪参数 0.2 目标权重因子$ \tau $ 0.99 GAE参数 0.95