一种面向智算集群的效能调优系统、方法及装置

    公开(公告)号:CN119179566A

    公开(公告)日:2024-12-24

    申请号:CN202411081319.1

    申请日:2024-08-08

    Abstract: 本发明提供一种面向智算集群的效能调优系统、方法及装置,属智算集群技术领域,所述系统包括:数据处理模块,用于获取智算集群中智算任务的任务运行指标数据;效能策略配置模块,用于基于任务运行指标数据对所述智算任务配置效能判定策略;效能监测模块,用于根据效能判定策略对运行任务进行效能检测,在运行任务不满足效能判定策略的情况下生成告警信息;效能调优模块,用于接受告警信息,并根据效能判定策略生成效能调优策略。本发明通过对智算任务的各任务运行指标数据进行分析,结合告警判定和调优策略,能够对智算任务与计算资源的失配现象进行告警,对智算任务提供更为合理的资源使用方案,确保任务执行高效性的同时提高集群整体的使用效能。

    基于分布式平台的大规模网络信息传播计算方法及装置

    公开(公告)号:CN109657330B

    公开(公告)日:2023-04-07

    申请号:CN201811532586.0

    申请日:2018-12-14

    Abstract: 本发明公开了一种基于分布式平台的大规模网络信息传播计算方法及装置,本发明实施步骤包括根据网络参数构建配置网络,构建信息传播模型,根据需求选择进行网络和信息传播模型的参数设定,配置信息格式、个体属性、消息传递函数、消息融合函数和消息处理函数,输入网络、信息格式、个体属性、消息传递函数、消息融合函数、消息处理函数通过并行分布式平台进行迭代计算,将包含传播记录的网络中有传播活动的节点及其相连的边筛选出来得到传播记录并输出。本发明具有并行计算能力强、用户定制能力强、传播计算通用性与适应性好、开发过程简单高效的优点,能大大降低并行分布式计算的开发难度,不需要另外考虑并行分布式的存储问题。

    一种云边协同数据分发系统
    4.
    发明公开

    公开(公告)号:CN118413530A

    公开(公告)日:2024-07-30

    申请号:CN202410409636.5

    申请日:2024-04-07

    Abstract: 本申请公开了一种云边协同数据分发系统,该方法包括:部署在云边环境中的域代理和SDN协调控制器;域代理包括部署在云端的路由代理节点和部署在边缘服务器的多个边缘代理节点,用于对跨域DDS数据路由和发现的全局管理和调度;SDN协调控制器部署在云端,用于获取边缘代理节点之间的Mesh组网的数据和状态,进行任务协调控制和数据分发;域代理还包括全局数据分发与管理模块和任务迁移调度模块;全局数据分发与管理模块用于域代理中的“发布‑处理‑订阅”主题的注册和跨域的数据路由与发现;任务迁移调度模块用于云边之间的数据处理任务迁移。本发明提供的一种云边协同数据分发系统,可以减少终端设备的计算能耗和处理延时。

    基于节点度的分布式大规模复杂社团探测方法及装置

    公开(公告)号:CN109656898B

    公开(公告)日:2021-05-07

    申请号:CN201811534844.9

    申请日:2018-12-14

    Abstract: 本发明公开了一种基于节点度的分布式大规模复杂社团探测方法及装置,本发明的实施步骤包括:准备关系网络数据;将关系网络数据加载到分布式文件系统进行网络分割,基于节点度的标签传播算法定制消息传递函数、消息融合函数和消息处理函数,然后将消息传递函数、消息融合函数和消息处理函数载入分布式文件系统;配置分布式文件系统的运行参数;调用分布式文件系统执行社团探测并输出社团探测结果。本发明适用于大规模复杂网络的社团探测,具有准确率高稳定性好、并行计算能力强、社团探测的通用性与适应性好、开发过程简单高效的优点。

    基于节点度的分布式大规模复杂社团探测方法及装置

    公开(公告)号:CN109656898A

    公开(公告)日:2019-04-19

    申请号:CN201811534844.9

    申请日:2018-12-14

    Abstract: 本发明公开了一种基于节点度的分布式大规模复杂社团探测方法及装置,本发明的实施步骤包括:准备关系网络数据;将关系网络数据加载到分布式文件系统进行网络分割,基于节点度的标签传播算法定制消息传递函数、消息融合函数和消息处理函数,然后将消息传递函数、消息融合函数和消息处理函数载入分布式文件系统;配置分布式文件系统的运行参数;调用分布式文件系统执行社团探测并输出社团探测结果。本发明适用于大规模复杂网络的社团探测,具有准确率高稳定性好、并行计算能力强、社团探测的通用性与适应性好、开发过程简单高效的优点。

    基于数据流定制的通用生态安全监测数据采集方法与装置

    公开(公告)号:CN109587153A

    公开(公告)日:2019-04-05

    申请号:CN201811534512.0

    申请日:2018-12-14

    CPC classification number: H04L69/08

    Abstract: 本发明公开了一种基于数据流定制的通用生态安全监测数据采集方法与装置,采集方法包括读取数据流定制配置,数据流定制配置包括生态监测设备的设备信息、通信端口信息、数据传输协议、生态监测设备与生态监测数据类型的映射关系以及生态监测数据类型与数据库存储字段的映射关系,基于数据流定制配置对每个生态监测设备开启一个线程采集生态监测数据;根据数据流定制配置解析生态监测数据的字段类型及其数据值、转换为数据库存储字段及其数据值进行存储、生成实时生态安全态势图表输出。本发明具有用户定制能力强、生态监测数据采集的通用性与适应性好,整体生态安全态势表现灵活程度高,能够为更好的为生态安全防护提供辅助决策支持的优点。

    基于文件热度的边缘服务器数据管理方法、系统和设备

    公开(公告)号:CN118796784A

    公开(公告)日:2024-10-18

    申请号:CN202410960503.7

    申请日:2024-07-17

    Abstract: 本申请涉及基于文件热度的边缘服务器数据管理方法、系统和设备,通过从提高边缘系统的存储鲁棒性角度出发,在边缘系统原有的数据索引机制和负载均衡策略的基础上,引入了基于文件热度的副本数量及位置确定方法,首先基于Zipf分布模拟了不同文件的访问热度,之后构建了基于文件热度的副本数量函数来计算不同文件热度下对应的文件副本数,最后对添加序列号的文件采用随机投影的方式以分散同一文件及其副本的存储位置,实现了副本数量同文件访问热度的自适应以及多副本文件的快速高效响应,确保了边缘服务器关键数据传递和交换的安全可靠。

    一种图像数据处理方法及系统
    10.
    发明公开

    公开(公告)号:CN113920419A

    公开(公告)日:2022-01-11

    申请号:CN202111284891.4

    申请日:2021-11-01

    Abstract: 本发明提供一种图像数据处理方法及系统,包括:规划无人机采集图像数据的航线,在航线上包括进行图像数据采集的多个航点;实时接收无人机在各航点处采集的图像数据,并对所有图像数据进行快速拼接和结构化处理,获取目标区域的正射影像图;将正射影像图输入至智能识别引擎,以对正射影像图中的要素进行识别标注,获取识别标注的成果数据,对并成果数据进行展示。本发明提供的图像数据处理方法及系统,利用无人机搭载遥感设备获取图像数据,对其进行拼接和结构化处理后,进行要素的识别及标注,最终将作业过程中产生的一系列要素数据进行展示,能快速、准确的定位出目标区域内所有要素所在的位置。

Patent Agency Ranking