更新Q值矩阵的方法、存储介质和终端设备

基本信息

申请号 CN201710591451.0 申请日 -
公开(公告)号 CN107367929B 公开(公告)日 2021-05-04
申请公布号 CN107367929B 申请公布日 2021-05-04
分类号 G05B13/02;G06N3/08 分类 控制;调节;
发明人 孙一凫;吴若飒;张豪;王宗祥 申请(专利权)人 北京上格云技术有限公司
代理机构 北京睿派知识产权代理事务所(普通合伙) 代理人 刘锋
地址 100084 北京市海淀区农大南路1号院2号楼2层办公B-221-A046
法律状态 -

摘要

摘要 本申请提供了一种更新Q值矩阵的方法、存储介质和终端设备,该方法包括:获取传感器数据并确定在Q值矩阵中对应的第一状态;将第一状态输入神经网络,预测在第一状态下遍历Q值矩阵中所有动作之后分别得到的在Q值矩阵中对应的第二状态;根据第一状态和第二状态下所有动作对应的Q值,按照预设算法更新第一状态下的所有动作所对应的Q值。提高了Q值矩阵的更新效率,有助于对建筑机电设备或系统更快找到最优的控制策略。