基于大模型的云存储系统性能测试方法及系统

    公开(公告)号:CN119088628A

    公开(公告)日:2024-12-06

    申请号:CN202411196570.2

    申请日:2024-08-29

    Inventor: 高伟男

    Abstract: 本发明公开了基于大模型的云存储系统性能测试方法及系统,属于云存储技术领域,本发明要解决的技术问题为如何生成多样化的测试数据和复杂的工作负载,全面模拟实际应用场景,提高性能测试的准确性和全面性,采用的技术方案为:生成数据:利用大模型预训练模型生成多样化的测试数据;生成工作负载:定义操作模式,并生成相应的工作负载模拟实际应用场景中的操作模式;测试执行:在云存储系统上执行生成的测试数据和工作负载,并记录性能指标;性能分析:对记录的性能指标进行分析,并生成详细的性能报告。该系统包括数据生成模块、工作负载生成模块、测试执行模块及性能分析模块。

    对象存储中基于国密SM4分组加密算法的数据加解密方法

    公开(公告)号:CN118473738A

    公开(公告)日:2024-08-09

    申请号:CN202410567067.7

    申请日:2024-05-09

    Abstract: 本发明公开一种对象存储中基于国密SM4分组加密算法的数据加解密方法,涉及数据加解密技术领域,包括:(一)数据加密阶段:在上传对象的header头中指定加密算法为SM4;对象存储将待上传对象按照设定的块大小进行分块处理,对每一个数据块进行SM4加密;对象存储将每个加密后的数据块存储到分布式存储集群中,将进行数据块加密的SM4秘钥存放在对象元数据中,完成整个对象的加密上传过程;(二)数据解密阶段:用户下载对象时,从对象元数据中取出SM4秘钥,按照设定大小的数据块读出对象,使用SM4秘钥对数据块进行SM4解密,所有数据块完成解密后,即完成整个对象的下载过程。本发明满足对象存储在特定应用场景中使用国产加密算法对数据进行加密的需求。

    一种云存储系统中支持隐私保护的用户数据割接方法及系统

    公开(公告)号:CN114500073B

    公开(公告)日:2024-04-12

    申请号:CN202210128727.2

    申请日:2022-02-11

    Abstract: 本发明公开了一种云存储系统中支持隐私保护的用户数据割接方法及系统,属于云存储技术领域,包括用户管理中心和云存储系统,用户管理中心进行用户的创建,将用户相关的信息保存;当用户开通云存储服务时,云存储系统基于用户管理中心存储的用户数据创建该用户,将该用户的用户数据保存在其底层存储模块中;该方法基于用户管理中心存储的用户数据更新云存储系统中存储的用户数据,完成对云存储系统中的用户数据的割接处理。本发明能够有效解决由于云存储系统中产品不断迭代和存储策略不断变化而导致所存储的用户数据内容出现不一致的问题。

    基于云存储系统的用户信息同步方法及系统

    公开(公告)号:CN115665191A

    公开(公告)日:2023-01-31

    申请号:CN202211224655.8

    申请日:2022-10-09

    Abstract: 本发明公开了基于云存储系统的用户信息同步方法及系统,属于云存储技术领域,本发明要解决的技术问题为如何提高云存储系统的稳定性、安全性以及服务质量,同时降低云存储系统的服务压力,减少资源浪费,采用的技术方案为:该方法具体如下:使用分布式消息队列Nats作为用户管理服务和数据存储服务之间的通信中间件;用户管理服务在分布式消息队列Nats中发布用户信息相关的主题,数据存储服务订阅相关的主题;当云存储系统中发生用户信息变动时,用户管理服务向分布式消息队列Nats的指定主题发布一条消息;数据存储服务检测到用户管理服务向分布式消息队列Nats发送的消息后,将检测到的用户管理服务向分布式消息队列Nats发送的消息进行消费。

    一种用户权限管理方法、系统、设备及介质

    公开(公告)号:CN119484128A

    公开(公告)日:2025-02-18

    申请号:CN202411670152.2

    申请日:2024-11-21

    Inventor: 高伟男

    Abstract: 本申请公开了一种用户权限管理方法、系统、设备及介质,涉及云计算技术领域。该方法包括:实时获取目标用户在云存储系统中的操作数据;利用预先训练的大模型对所述操作数据进行权限预测,以输出所述目标用户的所需权限;根据所述操作数据对所述目标用户的操作行为进行监测,并在监测到所述目标用户存在行为变化时,基于预设权限调整机制对所述所需权限进行动态调整,并生成权限变更记录;针对所述操作数据以及所述权限变更记录进行安全审计并生成相应的审计报告,以便根据所述审计报告调整所述云存储系统的安全策略。通过本申请的技术方案,显著提高了权限管理的准确性和灵活性,有效降低了数据泄露的风险。

    基于云存储系统的用户信息同步方法及系统

    公开(公告)号:CN115665191B

    公开(公告)日:2024-11-01

    申请号:CN202211224655.8

    申请日:2022-10-09

    Abstract: 本发明公开了基于云存储系统的用户信息同步方法及系统,属于云存储技术领域,本发明要解决的技术问题为如何提高云存储系统的稳定性、安全性以及服务质量,同时降低云存储系统的服务压力,减少资源浪费,采用的技术方案为:该方法具体如下:使用分布式消息队列Nats作为用户管理服务和数据存储服务之间的通信中间件;用户管理服务在分布式消息队列Nats中发布用户信息相关的主题,数据存储服务订阅相关的主题;当云存储系统中发生用户信息变动时,用户管理服务向分布式消息队列Nats的指定主题发布一条消息;数据存储服务检测到用户管理服务向分布式消息队列Nats发送的消息后,将检测到的用户管理服务向分布式消息队列Nats发送的消息进行消费。

    一种在对象存储系统中实现网络资源限流的方法

    公开(公告)号:CN118827562A

    公开(公告)日:2024-10-22

    申请号:CN202410918571.7

    申请日:2024-07-10

    Inventor: 高伟男 张明哲

    Abstract: 本发明公开一种在对象存储系统中实现网络资源限流的方法,涉及对象存储系统技术领域,包括:配置全局或本地的限流规则;部署限流逻辑程序;当有请求到达时,从集群中读取限流规则;判断已设置的限流规则是否被激活,如果限流规则处于激活状态,则继续执行后续步骤,否则,不进行任何限流逻辑判断;从对象存储集群中检索与限流规则相对应的令牌桶信息;根据限流信息和对应的令牌桶信息,更新对应操作类型的可用令牌数量,每一次操作都会消耗掉预设数目的令牌,当令牌用完时则不能进行该操作,此时达到了限流条件,当前的请求将被终止,同时客户端收到提示,说明请求被终止是由于达到了限流条件。本发明能够满足对象存储服务的限流要求。

    对象存储中可用于数据迁移的数据回源方法、系统和设备

    公开(公告)号:CN119045727A

    公开(公告)日:2024-11-29

    申请号:CN202411049412.4

    申请日:2024-08-01

    Inventor: 高伟男 张明哲

    Abstract: 本发明的一个或多个实施例涉及对象储存技术领域,尤其涉及一种对象存储中可用于数据迁移的数据回源方法、系统和设备,能够有效提高用户使用对象服务的便利性。所述对象存储中可用于数据迁移的数据回源方法包括:在收到来自用户的对象下载请求后,如果所述对象不存在,则检测是否在存储桶中为所述对象配置有数据回源规则;如果检测到所述存储桶中为所述对象配置有数据回源规则而且所述对象满足所述数据回源规则,则执行数据回源过程,其中按S3协议向所述数据回源规则中配置的源站的地址请求下载所述对象,并将从所述源站下载的所述对象存储到所述存储桶中且发送给用户。

    一种云存储系统中支持隐私保护的用户数据割接方法及系统

    公开(公告)号:CN114500073A

    公开(公告)日:2022-05-13

    申请号:CN202210128727.2

    申请日:2022-02-11

    Abstract: 本发明公开了一种云存储系统中支持隐私保护的用户数据割接方法及系统,属于云存储技术领域,包括用户管理中心和云存储系统,用户管理中心进行用户的创建,将用户相关的信息保存;当用户开通云存储服务时,云存储系统基于用户管理中心存储的用户数据创建该用户,将该用户的用户数据保存在其底层存储模块中;该方法基于用户管理中心存储的用户数据更新云存储系统中存储的用户数据,完成对云存储系统中的用户数据的割接处理。本发明能够有效解决由于云存储系统中产品不断迭代和存储策略不断变化而导致所存储的用户数据内容出现不一致的问题。

    桶自动分片方法及装置、介质、设备

    公开(公告)号:CN119002818A

    公开(公告)日:2024-11-22

    申请号:CN202411156194.4

    申请日:2024-08-22

    Abstract: 本发明提供一种桶自动分片方法及装置、介质、设备。该方法包括:在对象被上传到分布式对象存储系统的过程中,对每一个桶内的对象索引的数量进行监测;根据监测到的每一个桶内的对象索引的数量,确定该桶是否符合预设重新分片规则;若是,则将该桶对应的分片任务记录到任务列表中;确定当前处于待分配任务状态的对象存储网关客户端;将任务列表中的每一个分片任务分配给一个当前处于待分配任务状态的对象存储网关客户端,以使分配得到分片任务的对象存储网关客户端通过多个子线程将该分片任务对应的桶内的原始分片中的各个对象索引复制到目标分片中,实现对桶的重新分片。本发明可以降低重分片耗时,降低对前端业务的负面影响。

Patent Agency Ranking