您的当前位置:首页正文

数据实时写入去重处理方法

2022-10-22 来源:个人技术集锦
(19)中华人民共和国国家知识产权局

(12)发明专利申请

(21)申请号 CN201710952590.1 (22)申请日 2017.10.13

(71)申请人 四川长虹电器股份有限公司

地址 621000 四川省绵阳市高新区绵兴东路35号

(10)申请公布号 CN107633096A

(43)申请公布日 2018.01.26

(72)发明人 李苏华

(74)专利代理机构 成都虹桥专利事务所(普通合伙)

代理人 李凌峰

(51)Int.CI

权利要求说明书 说明书 幅图

(54)发明名称

数据实时写入去重处理方法

(57)摘要

本发明涉及大数据技术。本发明是要解决

现有数据去重处理在有数据实时写入时容易导致写入延时甚至锁表的问题,提供了一种数据实时写入去重处理方法,其技术方案可概括为:首先预先确定数据表结构,然后识别该数据表结构中所有重复数据的关键重复字段,再根据关键重复字段设置该数据表结构对应的联合主键规则,在实时数据写入时判断其欲写入的数据表结构,根据该数据表结构的联合主键规则筛选每一个欲写

入的数据信息是否重复,若是则不进行写入,否则写入。本发明的有益效果是,数据写入无延时,适用于从数据仓库读取数据信息并写入MySQL数据库时。

法律状态

法律状态公告日

2018-01-26 2018-01-26 2018-02-23

法律状态信息

公开 公开

实质审查的生效

法律状态

公开 公开

实质审查的生效

权利要求说明书

数据实时写入去重处理方法的权利要求说明书内容是....请下载后查看

说明书

数据实时写入去重处理方法的说明书内容是....请下载后查看

因篇幅问题不能全部显示,请点此查看更多更全内容

Top