基于分布式强化学习的多小区协同波束赋形方法

基本信息

申请号 CN202110768826.2 申请日 -
公开(公告)号 CN113472472A 公开(公告)日 2021-10-01
申请公布号 CN113472472A 申请公布日 2021-10-01
分类号 H04J11/00(2006.01)I;H04W16/28(2009.01)I;H04B7/06(2006.01)I;H04B7/08(2006.01)I;G06N20/00(2019.01)I 分类 电通信技术;
发明人 高贞贞;廖学文;吴丹青;张金;罗伟 申请(专利权)人 湖南国天电子科技有限公司
代理机构 长沙大珂知识产权代理事务所(普通合伙) 代理人 伍志祥
地址 410000湖南省长沙市岳麓西大道芯城科技园3栋12层
法律状态 -

摘要

摘要 本发明公开了基于分布式强化学习的多小区协同波束赋形方法,包括以下步骤:为基站j建立一个权重为θj的训练DQN和一个权重为θ′j的目标DQN以及一个空的经验池Mj;用随机权重初始化训练DQN;每隔M个时隙重复以下步骤:基站之间交互自己到所有用户的信道状态信息;每个基站生成未来多组M个时隙的全局信道样本;每个基站随机采取行动,并将相应的经验存储在其经验池Mj中;每个基站进行网络训练。本发明能在极低开销的情况下,性能优于对比的贪婪方案和随机方案,接近于需要全局信息的最优方案。