公开(公告)号：CN112511250B

公开(公告)日：2022-06-03

申请号：CN202011406139.8

申请日：2020-12-03

Applicant: 中国人民解放军火箭军工程大学

Inventor： 赵建伟 ,  吴官翰 ,  贾维敏 ,  金伟 ,  谭力宁 ,  王连锋 ,  廖伟 ,  张峰干 ,  朱丰超 ,  张聪 ,  姜楠 ,  沈晓卫

IPC: H04B17/391 ,  H04W4/02 ,  H04W4/021 ,  H04W16/18 ,  H04W16/22 ,  H04W88/08 ,  G06N3/04 ,  G06N20/00

Abstract: 本发明涉及一种基于DRL的多无人机空中基站动态部署方法及系统。该方法包括：获取待部署的目标区域范围；根据所述目标区域范围，采用ATG信道模型确定无人机的部署高度；基于所述部署高度、所述目标区域范围内用户分布、无人机数量和更新时间段，构建多无人机基站动态部署的神经网络模型；所述神经网络模型包括Actor网络和Critic网络；基于DRL的训练方式对所述神经网络模型进行训练，得到训练后的Actor网络；基于所述更新时间段内初始时刻每个无人机的位置信息和每个用户的位置信息，采用所述训练后的Actor网络生成每个无人机在所述更新时间段内的运动决策。本发明可以在地面用户位置信息时变条件下，提升无人机基站的通信效能。

公开(公告)号：CN112511250A

公开(公告)日：2021-03-16

申请号：CN202011406139.8

申请日：2020-12-03

Applicant: 中国人民解放军火箭军工程大学

Inventor： 赵建伟 ,  吴官翰 ,  贾维敏 ,  金伟 ,  谭力宁 ,  王连锋 ,  廖伟 ,  张峰干 ,  朱丰超 ,  张聪 ,  姜楠 ,  沈晓卫

IPC: H04B17/391 ,  H04W4/02 ,  H04W4/021 ,  H04W16/18 ,  H04W16/22 ,  H04W88/08 ,  G06N3/04 ,  G06N20/00

Abstract: 本发明涉及一种基于DRL的多无人机空中基站动态部署方法及系统。该方法包括：获取待部署的目标区域范围；根据所述目标区域范围，采用ATG信道模型确定无人机的部署高度；基于所述部署高度、所述目标区域范围内用户分布、无人机数量和更新时间段，构建多无人机基站动态部署的神经网络模型；所述神经网络模型包括Actor网络和Critic网络；基于DRL的训练方式对所述神经网络模型进行训练，得到训练后的Actor网络；基于所述更新时间段内初始时刻每个无人机的位置信息和每个用户的位置信息，采用所述训练后的Actor网络生成每个无人机在所述更新时间段内的运动决策。本发明可以在地面用户位置信息时变条件下，提升无人机基站的通信效能。