面向分布式大模型流水线并行训练的边缘计算方法及装置

    公开(公告)号:CN119829254A

    公开(公告)日:2025-04-15

    申请号:CN202510024957.8

    申请日:2025-01-07

    Abstract: 本发明公开了面向分布式大模型流水线并行训练的边缘计算方法及装置。该方法的实施过程涵盖了几个关键步骤,旨在高效地处理复杂的深度学习模型和海量数据。首先,系统接收一个大模型训练任务,该任务携带了关键信息,包括大模型的类别、各层的详细结构以及mini‑batch的大小。随后,系统根据这些信息进行深入分析,生成一个专门针对分布式大模型的流水线并行训练调度策略,以优化训练过程并确保资源的高效利用。最后,生成的调度策略将被发送至边缘计算节点,指导这些节点执行大模型训练任务。通过这一系列精心设计的步骤,该方法不仅能够有效实现面向分布式大模型的流水线并行训练,还充分发挥了边缘计算的优势,从而显著提升整体训练效率。

    工单反馈运维方法、装置及存储介质

    公开(公告)号:CN116777428A

    公开(公告)日:2023-09-19

    申请号:CN202310738918.5

    申请日:2023-06-20

    Abstract: 本申请提供一种工单反馈运维方法、装置及存储介质,涉及数据处理技术领域,能够解决对工单反馈的处理效率和准确率较低的问题。该方法包括:实时采集在线工单反馈数据,在线工单反馈数据为长文本数据;通过Word2Vec对每个在线工单反馈数据对应的文字进行词向量化,得到特征矩阵,一个在线工单反馈数据对应一个特征矩阵;将特征矩阵输入目标长短时记忆LSTM模型,得到每个在线工单反馈数据对应的预设类型,目标LSTM模型是通过历史工单反馈数据训练得到的;根据每个在线工单反馈数据对应的预设类型,确定并执行每个在线工单反馈数据对应的自动化脚本。本申请实施例用于运营商对工单反馈的自动化交互和智能运维的过程中。

    一种光缆资源监测系统
    4.
    实用新型

    公开(公告)号:CN216391010U

    公开(公告)日:2022-04-26

    申请号:CN202123067187.1

    申请日:2021-12-08

    Abstract: 本申请提供了一种光缆资源监测系统,该系统包括:局端有源设备、远端无源设备和光缆,局端有源设备和远端无源设备通过光缆连接,光缆包括多根光纤;其中,局端有源设备用于通过光缆中待检测的目标光纤向远端无源设备传输混合光,混合光由业务光和测试光混合得到,且测试光与业务光的波长不同;远端无源设备用于在接收到混合光的情况下,通过目标光纤向局端有源设备反射测试光;局端有源设备还用于根据对测试光的接收情况,确定测试光经目标光纤传输后的光功率损耗,进而使得运营商及时、准确地掌握光纤资源的使用情况,实现对光纤资源的合理分配。

Patent Agency Ranking