一种确定数据处理成本的方法及装置

基本信息

申请号 CN201811337673.0 申请日 -
公开(公告)号 CN109740033A 公开(公告)日 2019-05-10
申请公布号 CN109740033A 申请公布日 2019-05-10
分类号 G06F16/951(2019.01)I; G06F16/215(2019.01)I 分类 计算;推算;计数;
发明人 陈海源; 刘芳芳 申请(专利权)人 盐城优易数据有限公司
代理机构 南京苏高专利商标事务所(普通合伙) 代理人 盐城优易数据有限公司
地址 224001 江苏省盐城市城南新区大数据产业园八号楼三层
法律状态 -

摘要

摘要 本发明公开了一种确定数据处理成本的方法及装置,其中该方法包括:根据采集测试数据包过程中触发的反爬机制,确定数据采集成本;以及根据采集的测试数据包的结构类型,确定数据清洗成本;以及根据至少一种数据存储格式以及各种数据存储格式对应的数据量,确定数据存储成本;基于所述数据采集成本、所述数据清洗成本以及所述数据存储成本,确定数据处理成本。本发明能够较快的确定出较准确的数据处理成本,节省人力物力。