一种实时分布式数据监听方法

基本信息

申请号 CN202010910210.X 申请日 -
公开(公告)号 CN112068933A 公开(公告)日 2021-08-10
申请公布号 CN112068933A 申请公布日 2021-08-10
分类号 G06F9/455;G06F11/30;G06F16/2458 分类 计算;推算;计数;
发明人 朱帅;刘博;张鑫;于开进 申请(专利权)人 成都鱼泡科技有限公司
代理机构 北京天奇智新知识产权代理有限公司 代理人 许驰
地址 610000 四川省成都市中国(四川)自由贸易试验区成都高新区益州大道中段1858号3F
法律状态 -

摘要

摘要 本发明提供了一种实时分布式数据监听方法,所述方法包括:在扫描阶段对所收到的部分事务数据执行分类处理。对多个事务数据进行统计产生各数据项的累计次数,判断各数据项是否为频繁项;若确定某项数据为频繁项,将数据项及累计次数写入分布式区块文件;通过分布式区块文件记录所有频繁项及累计次数;在分析挖掘阶段从分布式区块文件中选择部分频繁项来建立特定数量的节点;根据分布式区块文件判断否为频繁序列模式数据。本发明提出了一种实时分布式数据监听方法,通过高实时性的应用和服务提高了分布式海量异构数据的分析挖掘处理性能。