-
公开(公告)号:CN117851281A
公开(公告)日:2024-04-09
申请号:CN202211213882.0
申请日:2022-09-30
Applicant: 成都华为技术有限公司
IPC: G06F12/0806 , G06F12/1045
Abstract: 一种数据访问方法,包括:在目标进程运行过程中,获取目标数据在目标进程中的第一虚拟地址;基于所述第一虚拟地址,查询第一地址映射关系表,确定本地缓存中是否存储有目标数据,若本地缓存中存储有目标数据,基于所述第一虚拟地址,查询所述第一地址映射关系表,得到所述目标数据在本地缓存中的物理地址;根据所述目标数据在本地缓存中的物理地址,获取所述目标数据。在分布式存储系统中使用Distributed mmap映射分布式存储系统中的文件之后,在本地记录该文件在分布式存储系统中的分布式虚拟地址。在目标进程运行过程中,若本地缓存不命中,通过Page Fault访问远端DVA空间,节省端到端软件栈的时延开销。
-
公开(公告)号:CN115543180A
公开(公告)日:2022-12-30
申请号:CN202110738604.6
申请日:2021-06-30
IPC: G06F3/06
Abstract: 本申请提供了一种固态硬盘的管理方法,该方法包括:在所述固态硬盘的使用过程中,将该固态硬盘中的第一部分存储介质从第一类闪存介质转换为第二类闪存介质。其中,该第二类闪存介质的单位存储容量大于第一类闪存介质的单位存储容量。本方法可以实现从第一类闪存介质到第二类闪存介质的转换,从而避免数据从不同类型介质之间进行数据迁移时对硬盘的过度磨损,能有效提升固态硬盘的寿命。
-
公开(公告)号:CN115495433A
公开(公告)日:2022-12-20
申请号:CN202110678722.2
申请日:2021-06-18
Abstract: 本申请提供一种分布式存储系统、数据迁移方法及存储装置,该分布式存储系统包括多个节点,该多个节点中的第一节点处于空闲状态,该多个节点中的第二节点处于繁忙状态。第一节点用于向该第二节点发送数据拉取请求,对应的,第二节点接收到第一节点发送的数据拉取请求,之后,第二节点基于该数据拉取请求将存储在第二存储器中的目标数据发送给第一节点,第一节点接收该目标数据,并将该目标数据存储在第一存储器中。通过上述方法,第二节点可以将目标数据迁出至第一节点,这样,第二节点便可以释放中用于存储目标数据的存储空间,从而缓解了存储器资源不足的问题,同时由于第二节点不需要寻找可用的存储资源,因此也减轻了第二节点的CPU负担。
-
公开(公告)号:CN104040477A
公开(公告)日:2014-09-10
申请号:CN201280002837.9
申请日:2012-12-31
Applicant: 华为技术有限公司
IPC: G06F3/06
CPC classification number: G06F3/0683 , G06F3/061 , G06F3/0659
Abstract: 公开一种存储资源调度方法及终端。一种存储资源调度方法,包括:主机获取用户设置的数据对象的优先级;查找优先级与服务质量QoS策略的对应关系;根据所述优先级与QoS策略的对应关系以及所述数据对象的优先级,确定所述数据对象的QoS策略;将所述数据对象的QoS策略发送至存储系统,以使所述存储系统根据所述数据对象的QoS策略对所述数据对象进行存储资源调度。本发明实施例减少了对数据对象优先级的误判,也减小了因优先级误判而产生的对存储资源调度的影响,提升了存储系统的处理性能。
-
公开(公告)号:CN116932196A
公开(公告)日:2023-10-24
申请号:CN202210633694.7
申请日:2022-06-06
Applicant: 华为技术有限公司
IPC: G06F9/50
Abstract: 公开了融合系统的数据处理方法、装置、设备和系统,涉及数据领域。该融合系统包括计算节点和存储节点。计算节点通过网络与存储节点连接构建了存算分离架构。计算节点的存储介质和存储节点的存储介质经过统一编址构成全局内存池,即计算节点和存储节点共享的全局存储介质。对系统进行读写操作时,获取到处理请求数据,根据内存操作指令对全局内存池进行处理请求数据的内存操作。从而,基于具有全局内存池的存算分离架构既确保计算和存储分别按需灵活扩展,又能够快速地对系统进行读写操作,缩短了端到端的数据处理时长,提升了数据传输速度,降低了系统能耗,改善了系统性能瓶颈。
-
公开(公告)号:CN113821311A
公开(公告)日:2021-12-21
申请号:CN202010564326.2
申请日:2020-06-19
Applicant: 华为技术有限公司
Abstract: 本申请提供了一种任务执行方法及存储设备,属于计算机技术领域。本申请提供了一种利用存储设备的多种处理器协作处理数据的方法,由存储设备中的中央处理器将数据处理任务划分为多个子任务,根据子任务的属性为子任务分配存储设备中的专项处理器。一方面,由于在进行数据处理的过程中,中央处理器承担了任务分解和任务调度的工作,专项处理器承担了执行子任务的工作,使得中央处理器的算力和专项处理器的算力均得到了充分利用。另一方面,由于分配子任务时考虑了子任务的属性,使得子任务能够依据其属性被调度到合适的专项处理器上执行。因此,该方法提高了数据处理的效率。
-
公开(公告)号:CN109885393A
公开(公告)日:2019-06-14
申请号:CN201910024624.X
申请日:2019-01-10
Abstract: 本发明公开了一种读写请求处理方法、装置、电子设备以及存储介质,属于数据处理领域。本方法通过对各个终端进行分组,并为每个终端组分配不同的服务时长,使得服务器在任一服务时长内,仅能处理与该服务时长对应的终端组中的终端的发送的读写请求,从而基于该终端组中的终端发送的读写请求所生成的QP和WQE有限,可以使得服务器的网卡的缓存区只存储有限的QP和WQE,进而可以避免出现网卡的缓存区出现资源分布不均的问题。
-
公开(公告)号:CN117785371A
公开(公告)日:2024-03-29
申请号:CN202211142315.0
申请日:2022-09-20
Applicant: 成都华为技术有限公司
Abstract: 一种页面换入方法以及装置,本申请中,主机中的DPU代替主机中的处理器将页面从存储设备换入至主机的内存中。主机中的DPU接收换入指令,换入指令用于指示将目标页面换入至主机的内存。DPU在接收到该换入指令后,从存储设备获取目标页面,将目标页面换入至内存,通知主机(如主机中的处理器或MMU)目标页面已换入到内存中。页面的换入操作可以由DPU执行,主机中的处理器不再需要将目标页面从存储设备换入到主机的内存中,有效释放处理器的算力,减少对页面换入操作对处理器的占用,进而保证了主机中业务类工作的执行效率。
-
公开(公告)号:CN114063894A
公开(公告)日:2022-02-18
申请号:CN202011188682.5
申请日:2020-10-30
Applicant: 华为技术有限公司
Abstract: 本申请提供一种协程执行方法及装置。其方法包括,第一协程用于访问内存池中的第一数据时产生错误信号,在运行第一协程时产生错误信号,响应于该错误信号,将第一数据从存储池迁移至内存池,在执行将第一数据从存储池迁移至内存池的过程中,将第一协程切换为第二协程作为当前执行协程。上述方式,在执行将第一数据迁移至内存池的过程中,并不会阻塞线程运行,从而减少IO时延不稳定的问题,提高了系统的性能和稳定性。
-
公开(公告)号:CN117648161A
公开(公告)日:2024-03-05
申请号:CN202211079772.X
申请日:2022-09-05
Applicant: 成都华为技术有限公司
Abstract: 本申请公开了一种实例热迁移方法及相关设备,涉及计算机技术领域。本申请中,源实例的共享数据保存在全局共享内存池中,源主机将源实例的全局地址信息发送至目标主机,目标主机可以基于源实例的全局地址信息,从全局共享内存池中获取源实例的共享数据。由于源实例的共享数据无需从源主机转移至目标主机,因此,可以大幅度减少实例热迁移需要传输的数据量,缩短实例热迁移所需的时长,并且减少源主机和目标主机的资源消耗。
-
-
-
-
-
-
-
-
-