发明 低轨卫星网络中基于Q学习的切换判决方法
移动通信 通信技术 卫星通信 卫星信号 【移动通信 通信技术 卫星通信 卫星信号】 1人
H04W4/029 H04W36/00 H04W36/22 H04W36/30
摘要：本发明属于移动通信技术领域，涉及一种低轨卫星网络中基于Q学习的切换判决方法；所述判决方法包括采用高斯马尔科夫模型和卫星的星历信息预测出用户终端可能的切换路径，并确定所述用户终端所对应的候选卫星；基于候选卫星的接收信号强度、服务时间、信道利用率以及中继开销制定出用户终端关联不同候选卫星的收益函数；计算出用户终端在当前状态下选择不同决策动作所获得的收益奖赏值；根据所述收益奖赏值，用户终端采用Q学习算法计算出对应的Q值；用户终端根据Q值表对进行切换判决，使得用户终端关联到对应卫星；本发明不仅极大地降低了用户终端的切换失败率，而且有效地均衡了网络负载。
