-
公开(公告)号:CN115150418A
公开(公告)日:2022-10-04
申请号:CN202211032453.3
申请日:2022-08-26
Applicant: 北京蔚领时代科技有限公司
IPC: H04L67/1097 , H04L67/568 , G06F11/30 , G06F9/54
Abstract: 本公开实施例涉及一种服务器集群的数据存储方法,该方法包括:S10、中间件接收服务器集群中第一服务器上报的日志更新记录信息;S20、所述中间件的数据收集后台服务根据日志更新记录信息获取第一服务器中的与日志更新记录信息对应的日志信息,所述日志信息包括:日志数据,该日志数据的标识;S30、所述中间件的消息队列服务根据所述日志数据的标识,将所述日志数据排列在标识对应的队列中;以使至少一个数据消费者从所述队列中获取日志数据以存储或分析。本发明的方法采用异步结构,去解决了数据量特别大且类型特别多时:收集数据时产生的堆积而影响都存储系统的性能的缺陷。
-
公开(公告)号:CN115150418B
公开(公告)日:2024-01-26
申请号:CN202211032453.3
申请日:2022-08-26
Applicant: 北京蔚领时代科技有限公司
IPC: H04L67/1097 , H04L67/568 , G06F11/30 , G06F9/54
Abstract: 本公开实施例涉及一种服务器集群的数据存储方法,该方法包括:S10、中间件接收服务器集群中第一服务器上报的日志更新记录信息;S20、所述中间件的数据收集后台服务根据日志更新记录信息获取第一服务器中的与日志更新记录信息对应的日志信息,所述日志信息包括:日志数据,该日志数据的标识;S30、所述中间件的消息队列服务根据所述日志数据的标识,将所述日志数据排列在标识对应的队列中;以使至少一个数据消费者从所述队列中获取日志数据以存储或分析。本发明的方法采用异步结构,去解决了数据量特别大且类型特别多时:收集数据时产生的堆积而影响都存储系统的性能的缺陷。
-
公开(公告)号:CN115328634A
公开(公告)日:2022-11-11
申请号:CN202211042989.3
申请日:2022-08-29
Applicant: 北京蔚领时代科技有限公司
IPC: G06F9/48
Abstract: 本申请涉及一种适用于控制任务并发量的方法、系统、介质及设备,该适用于控制任务并发量的方法包括:获取后台生成的任务信息组;将获取到的任务信息组存储到预划分的等待区;根据预置的执行机器数量划分若干个执行单元;将所述等待区中的任务信息组按照预置的执行规则调入若干个所述执行单元进行分批处理。采用本申请实施例,可以在获取到的任务量过大时,控制处理的任务量,从而减少服务器卡死或网络阻塞的现象的发生。
-
-