-
公开(公告)号:CN114691424A
公开(公告)日:2022-07-01
申请号:CN202210256772.6
申请日:2022-03-16
Applicant: 浪潮云信息技术股份公司
IPC: G06F11/14
Abstract: 本发明公开了一种文件存储分布式增量备份方法及系统,属于基于ceph的对象存储领域;所述的方法具体步骤如下:S1对备份服务系统进行初始化设定;S2在本地安装备份客户端并完成相对应的配置文件配置,创建备份任务;S3利用任务分发模式进行数据备份;S4对备份服务器状态进行检测和资源管理;本发明方法采用任务分发的模式,保证每次任务备份量合适,减少由于网络波动造成的备份任务失败,同时,通过单次备份适量数据,保证即使失败也不会重新传输大量数据;增加容错性的同时也减少了文件备份所需要的的时间。
-
公开(公告)号:CN114675785A
公开(公告)日:2022-06-28
申请号:CN202210318371.9
申请日:2022-03-29
Applicant: 浪潮云信息技术股份公司
IPC: G06F3/06 , G06F12/0877
Abstract: 本申请公开了一种分布式存储方法,在获取到当前数据后,先判断当前数据是否在缓存池中命中,若未命中,则判断当前数据是否满足驻留条件。若满足,则将当前数据驻留在缓存池中;若不满足,则将当前数据保存至数据池。相对于当前技术中,需要将数据池中的数据拷贝到缓存池中,导致数据存储效率降低的问题,采用本技术方案,将满足驻留条件的数据驻留在缓存池中,省去了拷贝的过程,缩短了IO路径,同时,也避免了拷贝过程中IO相互耦合,挤占大量内存和宽带资源的问题,提高了数据缓存的效率。此外,本申请还公开了一种分布式存储装置、系统以及介质与分布式存储方法相对应,效果同上。
-
公开(公告)号:CN114047888B
公开(公告)日:2022-04-22
申请号:CN202210046264.5
申请日:2022-01-17
Applicant: 浪潮云信息技术股份公司
IPC: G06F3/06
Abstract: 本申请涉及云计算技术领域,公开了一种NVMe磁盘的挂载方法、设备及存储介质,包括:调用SPDK脚本,将NVMe驱动从内核中解绑,使用用户态驱动;当本地挂载磁盘时,通过第一存储节点启动SPDK vhost服务,将第一存储节点的本地磁盘映射至OpenStack虚拟机;当远程挂载磁盘时,通过第二存储节点启动SPDK nvmf服务,并通过第二计算节点启动SPDK vhost服务,经SPDK vhost接口连接SPDK nvmf服务;将第二存储节点的远端磁盘通过RDMA通信方式映射至本地。这样可以减少内核干预,节省CPU处理开销,提高虚拟机中NVMe磁盘的性能,有效降低网络时延,提升数据传输效率。
-
公开(公告)号:CN113918415A
公开(公告)日:2022-01-11
申请号:CN202111150216.2
申请日:2021-09-29
Applicant: 浪潮云信息技术股份公司
IPC: G06F11/30 , G06F16/955 , G06F16/958 , G06F9/445
Abstract: 本发明公开一种web浏览器涉黄图片监控系统,涉及图片监控技术领域,其实现具体过程包括:用户通过浏览器浏览网页,判断浏览器监控插件的工作状态,并根据判断结果获取用户所浏览网页的图片,采集用户的身份信息、主机名称、主机ip;监控插件调用SDK鉴黄接口,并将获取图片送入鉴黄模型,鉴黄模型检测图片,并向监控插件返回鉴黄结果;基于鉴黄结果,监控插件将超出设定阈值的图片判定为涉黄图片,并在网页打印警告信息;监控插件将判定的涉黄图片存入对象存储服务,同时,将获取涉黄图片的主机名称、主机ip、被判定的涉黄图片存入预警服务,进行后续分析。本发明可以及时阻断涉黄图片显示,且能够追溯违规浏览的源头,进行事后审计。
-
公开(公告)号:CN112328864A
公开(公告)日:2021-02-05
申请号:CN202011219698.8
申请日:2020-11-04
Applicant: 浪潮云信息技术股份公司
IPC: G06F16/9532 , G06F16/9538 , G06F16/182
Abstract: 本发明公开一种Ceph对象存储的下载量统计方法,涉及对象存储技术领域。为解决对象存储的raodsgw‑admins不具备按照域名进行分类的功能缺陷,采用方案利用Ceph对象存储中的radosgw‑admin usage show命令可以统计用户以及桶信息的功能,在其查询结果中增加新的信息,用以统计对象存储桶内数据的下载量。为实现该方案需要:在radosgw‑admin usage show的输出结果中添加两个字段:host和downloads,同时在用户使用s3cmd接口下载对象存储桶中的数据时,按照字节数实时统计下载量,并记录该桶所在服务端的host域名;将该host下桶内数据每次的下载量进行累加,记录到该host的key对应的value下;将用户对桶内对象的下载量按照桶所在的host域名进行分类与统计,最终添加到radosgw‑admin的查询结果中进行展示。本发明可以保证数据的实时性与准确性。
-
公开(公告)号:CN112085563A
公开(公告)日:2020-12-15
申请号:CN202010919178.1
申请日:2020-09-04
Applicant: 浪潮云信息技术股份公司
Abstract: 本发明提供一种基于CNN的云硬盘资源管理方法,属于云计算技术领域,本发明利用用户设置的阈值和业务数据,预测出未来某一段时间内,用户所需要的各种类型的云硬盘的数量,并通过云平台为用户自动购买或退订云硬盘。本发明根据用户的业务特点,利用CNN算法在处理庞大数据上的优势,通过云计算平台,能够自动为用户在未来某一段时间内购买最合理的云硬盘资源。
-
公开(公告)号:CN112035064A
公开(公告)日:2020-12-04
申请号:CN202010882876.9
申请日:2020-08-28
Applicant: 浪潮云信息技术股份公司
IPC: G06F3/06
Abstract: 本发明特别涉及一种用于对象存储的分布式迁移方法。该用于对象存储的分布式迁移方法,部署一个分布式集群,包括一个主节点与数个副节点,通过对象名、存储类型、存储权限、对象大小或创建时间段对各个节点进行筛选,只对符合要求的节点进行迁移;当在迁移过程中发现迁移对象中出现坏节点时,将坏掉节点的任务分配给迁移对象中其余的存活节点即可。该用于对象存储的分布式迁移方法,基于对象存储S3协议的特性,部署一个能够自动组建、自动维护的迁移集群,高效并安全地将对象从一个对象存储系统内迁移到另外一个对象存储系统内,最大限度的减少了人工的运维工作。
-
公开(公告)号:CN111835862A
公开(公告)日:2020-10-27
申请号:CN202010708448.4
申请日:2020-07-22
Applicant: 浪潮云信息技术股份公司
Abstract: 本发明公开了一种参考流量类型部署对象存储后端服务的实现方法,所述方法根据对象存储后端服务的部署方式,统筹考虑每种流量线路的高可用性及安全性,根据不同数据流量类型采用不同的协议,划分不同的网络进行传输,以兼顾数据传输效率。本发明与现有的部署方式相比,在架构上采用kubernetes集群管理部署节点,便于部署服务应用的统一管理与维护,实现了一套部署程序支持跨平台部署。网络划分上更为具体,实现用户数据与管理数据的分离,用户备份数据与用户其他数据的分离,数据流量的分离避免了业务峰值时各种业务之间的相互影响,有利于网络环境的升级与维护,可快速部署对象存储后端服务,极大降低了运维部署人员的部署成本和日常升级维护成本。
-
公开(公告)号:CN118819427B
公开(公告)日:2025-04-29
申请号:CN202411297064.2
申请日:2024-09-18
Applicant: 山东大学 , 浪潮云信息技术股份公司
IPC: G06F3/06 , G06F12/0811 , G06F13/28 , G06N20/00
Abstract: 本发明涉及分布式键值存储系统技术领域,具体是一种多级智能缓存系统及缓存数据的处理方法、程序产品。本发明在DRAM设置一级缓存,SCM持久性内存设置二级缓存,一级缓存和二级存储用于存储不同热度的数据。同时利用缓存效率因子模型计算出缓存数据条目的优先级,并在替换低优先级条目时利用强化学习的方式进行多级缓存间数据移动的决策。本发明可以有效地降低了DAOS系统对硬盘的访问压力,节省了一部分硬盘带宽和内存资源,提升了DAOS系统的整体IO性能。
-
公开(公告)号:CN119449873A
公开(公告)日:2025-02-14
申请号:CN202411490037.7
申请日:2024-10-24
Applicant: 浪潮云信息技术股份公司
IPC: H04L67/30 , H04L67/1097 , H04L69/28
Abstract: 本发明公开一种基于云对象存储的本地数据定时上传方法、装置、计算机设备及存储介质,涉及云计算技术领域;包括:步骤1:配置本地存储的参数配置文件,通过参数配置文件记录配置参数,步骤2:根据配置参数创建多个任务实例,步骤3:根据所述定时参数创建定时策略,基于定时策略,注册任务实例,步骤4:基于定时策略,生成cron表达式,基于quartz job和quartz trigger注册多个任务实例,步骤5:根据定时策略,当到达指定时间时,触发任务执行,开启多个子线程上传本地数据,并将上传总量,成功数、失败数、开始时间、结束时间记录到日志文件。
-
-
-
-
-
-
-
-
-