一种基于数据简并的大数据转换方法与装置

基本信息

申请号 CN202111029797.4 申请日 -
公开(公告)号 CN113470831B 公开(公告)日 2021-11-16
申请公布号 CN113470831B 申请公布日 2021-11-16
分类号 G16H50/70(2018.01)I;G06K9/62(2006.01)I 分类 物理
发明人 曾承 申请(专利权)人 武汉泰乐奇信息科技有限公司
代理机构 北京集智东方知识产权代理有限公司 代理人 吴倩;龚建蓉
地址 430223湖北省武汉市东湖新技术开发区软件园中路4号光谷软件园六期3栋3层01室
法律状态 -

摘要

摘要 本申请揭示了一种基于数据简并的大数据转换方法,分别进行模数转化处理,以得到数字信号集合;进行聚类处理,以得到多个数据子集,并得到多个相似度集合;获取多个标准数据;生成多个虚拟数字数据,并对所述多个虚拟数字数据进行人工标记处理,从而得到多个样本数据;对预设的深度神经网络模型进行训练,以得到数字规律预测模型;得到多个预测结果;构成一号数据集,构成二号数据集;分别进行哈希计算,从而得到多个哈希值,并建立映射关系;进行数据简并处理,以得到多个三元素数据组合;执行大数据存储操作,实现了数据简并的目的,从而减轻了大数据的存储压力,并且还提高了大数据的信息安全性。