一种基于大数据的数据采集方法

基本信息

申请号 CN202010656157.5 申请日 -
公开(公告)号 CN111767446A 公开(公告)日 2020-10-13
申请公布号 CN111767446A 申请公布日 2020-10-13
分类号 G06F16/951(2019.01)I 分类 计算;推算;计数;
发明人 高强 申请(专利权)人 北京鼎泰智源科技有限公司
代理机构 北京世誉鑫诚专利代理有限公司 代理人 北京鼎泰智源科技有限公司
地址 100084北京市海淀区清河小营西小口路27号西三旗文化科技园D座A8区二层2001
法律状态 -

摘要

摘要 本发明公开的基于大数据的数据采集方法,涉及大数据技术领域,根据预设的优先级采集模式,持续采集目标数据源中的初始数据,直至目标数据源中的初始数据采集完成,根据预设的增量采集模式,采集目标数据源中的增量数据,根据预设的定时检测模式,采集目标数据源中的更新数据,提高了数据采集的准确率及完整度。