公开(公告)号：CN117194355A

公开(公告)日：2023-12-08

申请号：CN202311479500.3

申请日：2023-11-08

Applicant: 本原数据(北京)信息技术有限公司 ,  哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院)

Inventor： 胡浩 ,  郑启洋 ,  邹翔宇 ,  夏文 ,  李诗逸 ,  张程伟 ,  张皖川 ,  蒋兆恒

IPC: G06F16/174 ,  G06F16/14 ,  G06F3/06

Abstract: 本申请实施例提供了一种基于数据库的数据处理方法、装置和电子设备，属于数据处理技术领域。该方法包括：根据新增数据表的数据类型筛选出选中数据表，从选中数据表中提取预设批量大小。根据预设批量大小和预设值构建预设批量范围，预设批量范围包括多个第一批量大小，根据第一批量大小对新增数据表进行压缩，得到多个候选数据表。获取每一候选数据表的第一扫描时间，将最小的第一扫描时间对应的第一批量大小作为目标批量大小；按目标批量大小对新增数据表进行压缩，得到目标数据表。按目标批量大小对新增数据表进行压缩时，得到的目标数据表扫描时间最小，因此实现了解压速度和压缩率之间的平衡。