首页/ 中国民生银行股份有限公司/ 专利详情

一种数据清洗方法、装置、电子设备和介质

基本信息

申请号 CN202110713685.4 申请日 -
公开（公告）号 CN113535696A 公开（公告）日 2021-10-22
申请公布号 CN113535696A 申请公布日 2021-10-22
分类号 G06F16/215;G06F9/50 分类 计算；推算；计数;
发明人 罗京;潘广进;何鹏;周礼;刘小林 申请（专利权）人 中国民生银行股份有限公司
代理机构 北京润泽恒知识产权代理有限公司 代理人 莎日娜
地址 100031 北京市西城区复兴门内大街2号
法律状态 -

摘要

摘要 本发明实施例提供了一种数据清洗方法、装置、电子设备和可读存储介质，所述方法包括：在数据处理平台对业务数据进行清洗之前，获取所述业务数据的数据信息，获取用户输入的针对所述业务数据的数据清洗策略，以及获取用户根据当前可用集群资源分配的用于清洗所述业务数据的第一计算资源信息；根据所述业务数据的数据信息确定清洗所述业务数据所需分配的第二计算资源信息；根据所述数据清洗策略，从所述第一计算资源信息和所述第二计算资源信息中确定最优计算资源信息；采用所述最优计算资源信息申请集群资源后，按照所述集群资源和所述数据清洗策略对所述业务数据进行清洗。根据本发明实施例，可以避免由于开发人员导致的计算资源预估失误问题。