数据存储方法、电子设备及机器可读存储介质
摘要:
本申请实施例提出一种数据存储方法、电子设备及机器可读存储介质。电子设备获取需要写入数据表的第一数据,获取第一数据的数据源对应的指纹计算模板,根据指纹计算模板和第一数据计算第一数据的第一指纹,根据数据源从查重表中查找来自该数据源的第二数据的第二指纹,判断查找到的第二指纹与第一指纹是否相同,如果相同,则删除第一数据。如此,可以基于查重表实现数据的快速查重、去重和存储,查重过程不必查询数据表,不必在数据表上为不同数据源分别建立索引来加快查询数据表的速度,避免了对数据表上的多个索引进行动态维护所导致的数据表写入性能差的问题,且节约了数据表上索引占据的物理空间和维护开销。
公开/授权文献
0/0