一种数据迁移方法、装置、电子设备及存储介质

    公开(公告)号:CN115543211A

    公开(公告)日:2022-12-30

    申请号:CN202211322258.4

    申请日:2022-10-26

    Abstract: 本发明公开了一种数据迁移方法、装置、电子设备及存储介质,所述方法包括:响应于接收到多个小文件,将所述多个小文件聚合成至少一个目标量级的大文件,每一个目标量级的大文件由所述多个小文件中至少部分小文件聚合得到;在每一个所述大文件的文件头中存储每一个小文件在所述大文件中的存储位置信息;响应于获取到数据存储系统的地址信息,利用多个数据读取线程并行读取大文件;基于每一个小文件在所述大文件中的存储位置信息,将读取到的大文件解析成小文件后写入到所述数据存储系统中。本发明通过直接读取大文件,解析并写入到数据存储系统中,能够高效实现离线迁移,提升数据的导出性能。

Patent Agency Ranking