公开(公告)号：CN115840539B

公开(公告)日：2023-05-16

申请号：CN202310107307.0

申请日：2023-02-14

Applicant: 天津南大通用数据技术股份有限公司

Inventor： 李宇豪 ,  刘梦真 ,  李晨光

IPC: G06F3/06

Abstract: 本申请实施例公开了一种数据处理方法、装置、电子设备及存储介质。该方法包括：在获取到数据处理请求的情况下，确定数据处理请求对应的目标处理类型；若目标处理类型为读处理，根据数据处理请求确定出待读取数据在持久化数据文件中的物理行号及物理列号；基于预先将持久化数据文件切分的子表格的表格描述，确定包含物理行号对应的数据的目标子表格；利用物理行号以及数据单元的描述信息，从预先对目标子表格的物理列号对应的目标列划分的数据单元中，确定出包含物理行号对应的数据的目标数据单元；利用物理行号，确定出待读取数据在目标数据单元的逻辑行号；读取目标数据单元中逻辑行号记录的数据，以完成对待读取数据的读取处理。

公开(公告)号：CN115840539A

公开(公告)日：2023-03-24

申请号：CN202310107307.0

申请日：2023-02-14

Applicant: 天津南大通用数据技术股份有限公司

Inventor： 李宇豪 ,  刘梦真 ,  李晨光

IPC: G06F3/06

Abstract: 本申请实施例公开了一种数据处理方法、装置、电子设备及存储介质。该方法包括：在获取到数据处理请求的情况下，确定数据处理请求对应的目标处理类型；若目标处理类型为读处理，根据数据处理请求确定出待读取数据在持久化数据文件中的物理行号及物理列号；基于预先将持久化数据文件切分的子表格的表格描述，确定包含物理行号对应的数据的目标子表格；利用物理行号以及数据单元的描述信息，从预先对目标子表格的物理列号对应的目标列划分的数据单元中，确定出包含物理行号对应的数据的目标数据单元；利用物理行号，确定出待读取数据在目标数据单元的逻辑行号；读取目标数据单元中逻辑行号记录的数据，以完成对待读取数据的读取处理。

公开(公告)号：CN116226237A

公开(公告)日：2023-06-06

申请号：CN202310474282.8

申请日：2023-04-27

Applicant: 天津南大通用数据技术股份有限公司

Inventor： 李晨光 ,  李宇豪 ,  刘梦真

IPC: G06F16/2458 ,  G06F16/242 ,  G06F16/2453

Abstract: 本申请提供的一种支持多个计算引擎的分布式查询计划生成方法及装置，涉及分布式数据查询领域，该方法包括：在一个数据库中集成多种计算引擎；生成不同的物理计划，对物理计划的代价进行评估，在生成物理计划过程中，包括：为不同的计算引擎支持不同的代价模型，生成所有计算引擎都会支持的物理计划和根据不同的计算引擎能力，为不同的计算引擎生成该引擎特有的物理计划；选择最优计划的同时确定执行该计划的最优计算引擎。本申请通过生成不同的物理计划化进行代价评估，相对以现有物理计划进行代价评估选出的物理计划，将更优越。