一种基于深度强化学习的内容更新方法

基本信息

申请号 CN202110454708.4 申请日 -
公开(公告)号 CN113064907A 公开(公告)日 2021-07-02
申请公布号 CN113064907A 申请公布日 2021-07-02
分类号 G06F16/23;G06F16/2455;G06N3/04;G06N3/08 分类 计算;推算;计数;
发明人 姜静;王凯;孙军涛;杜剑波 申请(专利权)人 陕西悟空云信息技术有限公司
代理机构 西安智邦专利商标代理有限公司 代理人 汪海艳
地址 710000 陕西省西安市经济技术开发区未央路170号赛高城市广场2号楼-企业总部大厦1403
法律状态 -

摘要

摘要 本发明公开了一种基于深度强化学习的内容更新方法,可以解决缓存内容的流行度未知且是动态变化的问题,使缓存策略能够适应动态变化的移动网络环境,从而最大化缓存命中率。具体过程主要包括首先建立缓存替换模型,其次利用神经网络获得当前缓存状态下的缓存替换策略,同时获得当前缓存状态到下一缓存状态奖赏函数,之后,利用神经网络找出当前缓存状态下最优缓存替换策略,最后利用最优缓存替换策略进行内容更新。