一种面向云环境流处理任务的资源成本优化方法及系统

    公开(公告)号:CN116244076B

    公开(公告)日:2023-11-24

    申请号:CN202310103929.6

    申请日:2023-02-13

    Applicant: 安徽大学

    Abstract: 发明属于大数据领域,具体涉及一种面向云环境流处理任务的资源成本优化方法、系统、工具。该方法包括如下步骤:S1:构建基准性能测试工具。S2:构建云端控制器。S3:基于改进高维贝叶斯优化算法构建调优模型。S4:通过调优模型求解出实时处理系统的最佳配置。求解过程包含如下步骤:S41:初始化参数配置空间和超参数组合概率空间。S42:初始化观察集。S43:预设最大迭代轮次,并循环执行迭代求解过程。S44:将观察集中的最佳配置,输出作为所需的推荐配置。本发明提供的资源成本优化系统包括:基准性能测量模块、云端控制器和调优模型。本发明解决了现有配置优化方案无法有效应对流处理任务中的云配置和软件性能配置的协同调优场景的问题。

    一种面向云环境流处理任务的资源成本优化方法及系统

    公开(公告)号:CN116244076A

    公开(公告)日:2023-06-09

    申请号:CN202310103929.6

    申请日:2023-02-13

    Applicant: 安徽大学

    Abstract: 发明属于大数据领域,具体涉及一种面向云环境流处理任务的资源成本优化方法、系统、工具。该方法包括如下步骤:S1:构建基准性能测试工具。S2:构建云端控制器。S3:基于改进高维贝叶斯优化算法构建调优模型。S4:通过调优模型求解出实时处理系统的最佳配置。求解过程包含如下步骤:S41:初始化参数配置空间和超参数组合概率空间。S42:初始化观察集。S43:预设最大迭代轮次,并循环执行迭代求解过程。S44:将观察集中的最佳配置,输出作为所需的推荐配置。本发明提供的资源成本优化系统包括:基准性能测量模块、云端控制器和调优模型。本发明解决了现有配置优化方案无法有效应对流处理任务中的云配置和软件性能配置的协同调优场景的问题。

Patent Agency Ranking