-
公开(公告)号:CN117234412A
公开(公告)日:2023-12-15
申请号:CN202211102393.8
申请日:2022-09-09
Applicant: 华为技术有限公司
IPC: G06F3/06
Abstract: 一种数据迁移方法及相关装置,迁移调度装置确定对第一文件的数据从源设备迁移到目标设备的迁移任务,并对第一文件的元数据进行第一变更,以触发上述源设备或目标设备基于该第一文件的元数据的第一变更,完成该迁移任务。该方法基于对文件的元数据的变更(如,对文件的归属、存储布局等元数据的变更)来触发对该文件的数据迁移,而且文件的数据的迁移的进度也能够通过该文件的元数据的状态来反映。该方法可以提高数据迁移的效率,提升在数据使用和管理上的便捷性,还实现了迁移过程中各个设备的解耦,极大地提高业务系统的灵活性和可扩展性。
-
公开(公告)号:CN118427221A
公开(公告)日:2024-08-02
申请号:CN202310145290.8
申请日:2023-01-31
Applicant: 华为技术有限公司
IPC: G06F16/2455 , G06F16/2458 , G06F16/27 , G06F11/14
Abstract: 本申请公开了一种数据库任务处理方法及装置、数据库系统及容灾系统,属于数据库技术领域。计算系统接收针对目标数据库的部署模式选择指令,该部署模式选择指令用于指示目标数据库在存储系统中采用行列混存的部署模式或行列分离的部署模式。计算系统根据该部署模式选择指令确定目标数据库对应的执行计划,该执行计划与该部署模式选择指令所指示的部署模式相匹配。计算系统根据该执行计划在存储系统中处理针对目标数据库的数据库任务。本申请提供的数据库系统,可供用户灵活选择采用行列混存的部署模式或行列分离的部署模式来部署数据库,使得部署的数据库既能支持HTAP系统的运行,又提高了数据库系统的部署灵活性和应用灵活性。
-
公开(公告)号:CN117290298A
公开(公告)日:2023-12-26
申请号:CN202211058557.1
申请日:2022-08-30
Applicant: 华为技术有限公司
IPC: G06F16/13 , G06F16/11 , G06F16/176 , G06F16/16
Abstract: 本申请实施例提供一种数据处理方法及相关装置,应用于存储技术领域。该数据处理方法包括:获取第一文件系统的第一元数据流,该第一元数据流为流式结构且包含多条记录,多条记录中的每条记录包含第一文件系统中的一个节点的标识、一个节点的父节点的标识和一个节点的属性;根据第一元数据流,确定第一文件系统中的多个节点的层次结构。本申请实施例中,统一的流式结构的元数据表达方式,能够拉通异构文件系统之间的元数据,从而使得异构的文件系统中的数据不再是一个个数据孤岛,这会极大地提升用户在数据使用和管理上的便捷性。
-
公开(公告)号:CN115834276A
公开(公告)日:2023-03-21
申请号:CN202111426817.1
申请日:2021-11-27
Applicant: 华为技术有限公司
IPC: H04L12/40 , H04L67/1097
Abstract: 本申请实施例提供一种数据处理系统、数据处理方法及相关装置,应用于存储技术领域。本申请实施例中的虚拟总线系统包含存储层、虚拟总线和服务层,其中,存储层包括多个存储设备,服务层包含多个服务;存储设备和/或服务经过注册可以将注册信息写入虚拟总线中,而经过注册的存储设备或服务可以发现其他设备或服务;存储设备与存储设备之间、存储设备与服务之间、服务与服务之间可以经过虚拟总线进行数据流动,实现多方设备能够在不直接互联的情况下彼此发现和交流。本申请还提供了数据处理方法即相关的装置。通过本申请实施例,能够实现设备之间的流动,满足用户对数据流动的需求。
-
公开(公告)号:CN118784630A
公开(公告)日:2024-10-15
申请号:CN202310769201.7
申请日:2023-06-27
Applicant: 华为技术有限公司
IPC: H04L67/02 , H04L67/1097 , H04L69/00 , G06F16/13 , G06F16/172
Abstract: 一种数据访问方法及相关装置,应用于信息技术、存储技术领域。该方法应用于数据访问装置,数据访问装置与第一存储设备通信,第一存储设备的第一存储空间中存储了第一文件系统的数据,数据访问装置提供基于HTTP的存储访问协议的访问接口。数据访问装置接收来自第一计算设备的第一访问请求,第一访问请求用于访问第一文件系统中的第一数据,且第一访问请求遵循基于HTTP的存储访问协议。该数据访问装置接收第一访问请求后,通过基于第一文件系统的存储访问协议的第二访问请求,来访问第一存储空间中的数据,从而减少数据访问过程中的消息交互,降低了数据流动的时延,提升了数据流动的效率。
-
公开(公告)号:CN117331981A
公开(公告)日:2024-01-02
申请号:CN202211291631.4
申请日:2022-10-19
Applicant: 华为技术有限公司
IPC: G06F16/2457 , G06F16/215 , G06F16/21 , G06F16/2455
Abstract: 本申请提供一种数据流动感知方法及相关装置,应用于信息技术、存储技术领域。本申请中,大数据平台的目标结构化数据存储时对应的目录包含了目标目录,而数据流动感知装置可以感知目标目录的数据流动并基于目标目录的数据流动更新大数据平台的元数据库,使得大数据平台的元数据库中包含存储在本地的结构化数据的元数据,而不会包含非本地的结构化数据的元数据。本申请实现了数据存储系统对结构化数据的本地性的感知,使得大数据平台在执行查询时可以针对本地数据进行查询,既不会造成对本地数据的漏检,也不会访问已经流动到其他存储集群上的数据,有效提升查询结果的正确性和查询效率的稳定性。
-
公开(公告)号:CN118244973A
公开(公告)日:2024-06-25
申请号:CN202310481432.8
申请日:2023-04-27
Applicant: 华为技术有限公司
IPC: G06F3/06
Abstract: 本申请公开了元数据采集方法以及相关设备,用于减低数据滥用的风险,提升数据存储的安全性和元数据采集效率。应用于存储设备的元数据采集方法,包括接收配置参数,配置参数指示存储设备采集目标元数据,该目标元数据为存储设备存储的多组非结构化数据的元数据。基于配置参数,采集目标元数据。在目标存储空间存储目标元数据,目标存储空间位于存储设备的内部存储空间或者外部存储空间,且目标存储空间与包括存储设备的数据的存储空间相隔离。
-
-
-
-
-
-