一种CSV文件存储方法、装置及计算机设备
基本信息
申请号 | CN201910425572.7 | 申请日 | - |
公开(公告)号 | CN110188069A | 公开(公告)日 | 2021-06-29 |
申请公布号 | CN110188069A | 申请公布日 | 2021-06-29 |
分类号 | G06F16/11;G06F16/172;G06F16/22 | 分类 | 计算;推算;计数; |
发明人 | 张建伟;陈剑华 | 申请(专利权)人 | 广东和新科技有限公司 |
代理机构 | 北京博思佳知识产权代理有限公司 | 代理人 | 林祥 |
地址 | 510640 广东省广州市天河区华观路1933号1004房、1005房、1006房 | ||
法律状态 | - |
摘要
摘要 | 本说明书提供一种CSV文件存储方法及装置,所述方法包括:从CSV文件中读取待存储数据,并存储在临时数据表中;基于指定的时间间隔确定若干阈值分割点,其中,所述指定的时间间隔为数据库每次存储数据的最短时间间隔,所述阈值分割点由所述指定的时间间隔以及单次存储最大字符串个数的整数行数来确定的数据分割位置;利用所述阈值分割点将临时数据表分割成多个子临时数据表;将子临时数据表中的待存储数据存储到数据库中。从而保证存储过程中系统运行时每个存储过程都处在高效而快速的存储状态,大量缩短CSV文件的数据存储到数据库中的时间,避免出现因事务超时使存储事务停止并回滚到存储前的状态从而导致无法进行文件数据存储的情况。 |
