公开(公告)号：CN107688907A

公开(公告)日：2018-02-13

申请号：CN201710788749.0

申请日：2017-09-05

Applicant: 江苏电力信息技术有限公司 ,  国网江苏省电力公司

Inventor： 冯曙明 ,  祁建 ,  胡天牧 ,  凌绍伟

IPC: G06Q10/06 ,  G06F9/54 ,  G06Q10/08 ,  G06Q50/06

CPC classification number: G06Q10/0633 ,  G06F9/546 ,  G06Q10/06395 ,  G06Q10/087 ,  G06Q50/06

Abstract: 本发明公开了提供一种基于队列分层处理机制的物资抽检方法，基于队列分层处理机制，将需要处理的多个批次的批量抽检计划数据分层处理；围绕5大平衡规则进行分级筛选处理及标识，将批量抽检数据按照不同标识分类，最终将符合生成抽检任务条件的数据生成抽检任务，通过将大批量数据存储在缓存中；分层分级通过独立通道分别处理，每一层级均涉及线程池以及多个独立的队列通道处理分发数据，通过自动定时触发，将数据自动分类分别丢入对应队列，线程池中线程获取队列数据自动进行逻辑计算消化或者进入下一层级再次进行处理消化。本发明减少与数据库的交互，提高数据流转的速度，提升物资抽检的效率及准确率。

公开(公告)号：CN107688907B

公开(公告)日：2022-01-18

申请号：CN201710788749.0

申请日：2017-09-05

Applicant: 江苏电力信息技术有限公司 ,  国网江苏省电力公司

Inventor： 冯曙明 ,  祁建 ,  胡天牧 ,  凌绍伟

IPC: G06Q10/06 ,  G06F9/54 ,  G06Q10/08 ,  G06Q50/06

Abstract: 本发明公开了提供一种基于队列分层处理机制的物资抽检方法，基于队列分层处理机制，将需要处理的多个批次的批量抽检计划数据分层处理；围绕5大平衡规则进行分级筛选处理及标识，将批量抽检数据按照不同标识分类，最终将符合生成抽检任务条件的数据生成抽检任务，通过将大批量数据存储在缓存中；分层分级通过独立通道分别处理，每一层级均涉及线程池以及多个独立的队列通道处理分发数据，通过自动定时触发，将数据自动分类分别丢入对应队列，线程池中线程获取队列数据自动进行逻辑计算消化或者进入下一层级再次进行处理消化。本发明减少与数据库的交互，提高数据流转的速度，提升物资抽检的效率及准确率。

公开(公告)号：CN106354763A

公开(公告)日：2017-01-25

申请号：CN201610689822.4

申请日：2016-08-19

Applicant: 江苏电力信息技术有限公司 ,  国网江苏省电力公司

Inventor： 曹震 ,  凌绍伟 ,  李林

IPC: G06F17/30

CPC classification number: G06F16/254

Abstract: 本发明公开了一种BW系统处理链智能优化的方法，在当前BW系统处理链布置的基础上，结合智能分析得到的系统资源占用率、处理链节点前后依赖关系，对处理链节点组合优化，参照处理链以往运行的数据，对相关属性进行数据化，利用Matlab工具集成的有向图路径搜寻，实现处理节点的组合顺序最优组合，实现BW系统处理链智能优化。本发明能够在客观的运行数据的基础上，综合考虑并发程度、系统资源、数据流顺序等影响因素，计算出处理链的最优化设计方案，使处理链的运行时间最短化。本发明同样适用于其它数据仓库系统的批量数据抽取作业。