摘要
本发明提供基于双阶段马尔可夫过程的空基网络部署方法,属于无人机辅助通信网络领域,包括:建立包含城市环境模型、无人机模型及信道模型的系统模型;定义最小化任务执行时间的优化问题;分别设计MTS的马尔可夫过程对应的状态空间、动作空间和收益函数、以及MMS的马尔可夫过程对应的状态空间、动作空间和收益函数;通过深度强化学习算法分别训练无人机在城市环境中的MTS模型与MMS模型,得到优化问题的目标;根据MTS模型和MMS模型,执行双阶段无人机部署,完成无人机从出发位置起飞到完成网络覆盖的数据收集任务。本发明能够支持多无人机长时间的安全部署,实现无人机在城市环境下的三维轨迹规划与高效部署,从而实现大规模区域下的网络覆盖。