公开(公告)号：CN118885335A

公开(公告)日：2024-11-01

申请号：CN202411390631.9

申请日：2024-10-08

Applicant: 天津南大通用数据技术股份有限公司

Inventor： 李轩宇

IPC: G06F11/14

Abstract: 本发明提供了一种数据处理方法、装置及设备，可以应用于人工智能技术领域。该方法包括：响应于已接收到备份任务，将备份任务进行切分，得到多个备份子任务，其中，备份子任务包括至少一个表的获取任务和至少一个表各自的获取路径，多个备份子任务为并行处理任务；对于每个备份子任务，基于至少一个表各自的获取路径，从待备份数据库中获取至少一个表各自的多个初始元数据；将与多个初始元数据各自对应的索引信息与多个初始元数据进行拼接，确定多个目标元数据；基于多个数据缓冲器和多个目标元数据各自的数据量，生成存储数据量为预设数据量的多个目标文件；将多个目标文件并行上传至备份空间中。

公开(公告)号：CN118885335B

公开(公告)日：2025-02-11

申请号：CN202411390631.9

申请日：2024-10-08

Applicant: 天津南大通用数据技术股份有限公司

Inventor： 李轩宇

IPC: G06F11/14

Abstract: 本发明提供了一种数据处理方法、装置及设备，可以应用于人工智能技术领域。该方法包括：响应于已接收到备份任务，将备份任务进行切分，得到多个备份子任务，其中，备份子任务包括至少一个表的获取任务和至少一个表各自的获取路径，多个备份子任务为并行处理任务；对于每个备份子任务，基于至少一个表各自的获取路径，从待备份数据库中获取至少一个表各自的多个初始元数据；将与多个初始元数据各自对应的索引信息与多个初始元数据进行拼接，确定多个目标元数据；基于多个数据缓冲器和多个目标元数据各自的数据量，生成存储数据量为预设数据量的多个目标文件；将多个目标文件并行上传至备份空间中。