一种基于科技资源大数据的采集方法

基本信息

申请号 CN201610429122.1 申请日 -
公开(公告)号 CN106126554A 公开(公告)日 2016-11-16
申请公布号 CN106126554A 申请公布日 2016-11-16
分类号 G06F17/30(2006.01)I 分类 计算;推算;计数;
发明人 吴明强;李庆;徐冲;尹政 申请(专利权)人 西安科技大市场有限公司
代理机构 西安智邦专利商标代理有限公司 代理人 西安科技大市场有限公司
地址 710065 陕西省西安市高新区锦业路都市之门B座2层
法律状态 -

摘要

摘要 本发明提出一种基于科技资源大数据的采集方法,在合理的硬件支持下完成大数据的采集,提高系统的数据兼容性和更新能力,以便于后期的数据存储和处理。本发明数据包设定格式主要基于json数组,通过维护操作区中的状态信息(“新增”、“修改”或“删除”),能够实时更新数据区和流数据区的操作对象;充分考虑了科技资源数据源的权限安全,设置了多重校验,不仅对身份合法进行校验,还对时间合法甚至地点合法进行校验。对于具有一定数据开发能力的数据源主体(高校、科研院所以及部分企业等),只需提供相应的API接口,即可按照本发明基于HTTP协议实现API采集,信息传输实时性高,状态实时更新,且对硬件配置要求不高。