基于微服务架构异步事件的高性能灵活任务调度派发系统、方法、装置、处理器及存储介质

    公开(公告)号:CN117952383A

    公开(公告)日:2024-04-30

    申请号:CN202410209146.0

    申请日:2024-02-26

    Abstract: 本发明涉及一种基于微服务架构异步事件高性能灵活任务调度派发系统,其中,该系统包括:任务调度管理模块,用于控制任务的分类方式和派发方式;任务异步接收模块,用于接收由外部系统发送至任务调度派发系统的任务消息队列中的待处理任务;任务派发管理模块,用于根据当前系统的任务派发属性;权限管理模块,用于向任务派发管理模块提供作业用户的权限信息及作业任务权限的校验检查;任务调度信息同步模块,用于针对已经完成派发的任务步当前任务的处理人和派发时间。本发明还涉及一种相应的方法、装置、处理器及其存储介质。本技术方案能够快速对接和集成不同厂商所建设的异构系统,并支持与异构系统的作业权限及多类型任务的快速集成。

    基于NIO针对大数据分布式系统进行消息处理优化的系统及方法

    公开(公告)号:CN110134534B

    公开(公告)日:2023-08-25

    申请号:CN201910411724.8

    申请日:2019-05-17

    Abstract: 本发明涉及一种基于NIO针对大数据分布式系统进行消息处理优化的系统,包括消息产生模块;消息分发模块;消息发送模块;消息接收模块;消息处理模块,根据接收的消息中的业务信息进行相应的业务操作;消息返回处理模块,用于等待消息的处理结果。本发明还涉及一种基于NIO针对大数据分布式系统进行消息处理优化控制的方法。采用了本发明的基于NIO针对大数据分布式系统进行消息处理优化的系统及方法,能够有效的降低分布式系统间消息通信时的资源占用高的问题,在提高消息通信的效率的同时保证了消息通信的及时性,且系统的通用性强,架构灵活,可扩展性高。该发明采用的方法很好的满足目前分布式系统间大批量和高并发消息通信的需求,具有广泛的应用范围。

    大数据环境下实现数据管理能力评估的系统及其方法

    公开(公告)号:CN110188024A

    公开(公告)日:2019-08-30

    申请号:CN201910462114.0

    申请日:2019-05-30

    Inventor: 郭兆彬 王克强

    Abstract: 本发明涉及一种大数据环境下实现数据管理能力评估的系统,包括目标建立模块;能力评估模块;数据采集模块,用于采集当前的数据管理能力信息;评估分析模块,根据权重对各能力项加权计算得出企业数据管理各能力域的指数;结果发布模块,用于生成当前评估的结果报告及弥合差距的路线图,评估数据管理能力。本发明还涉及一种实现大数据环境下数据管理能力评估处理的方法。采用了本发明的大数据环境下实现数据管理能力评估的系统及其方法,通过该方法及系统能够有效的评估企业数据管理能力,能指导企业进行数据管理过程和方法的建设,规划未来数据管理路线图,提出数据管理能力改进建议和方向,推进企业数据管理能力水平的提升。

    基于量子密钥技术实现数据动态加密的通信系统

    公开(公告)号:CN118138235A

    公开(公告)日:2024-06-04

    申请号:CN202410412490.X

    申请日:2024-04-08

    Inventor: 肖贺 魏明 王克强

    Abstract: 本发明涉及一种基于量子密钥技术实现数据动态加密的通信系统,其中,该系统包括:量子密钥管理平台,其用于生成和分发量子密钥,并基于动态加密管理对所述的量子密钥进行数据加密和解密操作,同时用于监测系统状态和外部威胁;以及与所述的量子密钥管理平台相连接的数个QKD设备,且各个QKD设备均与对应的用户进行通信连接。采用了本发明的该基于量子密钥技术实现数据动态加密的通信系统,利用量子密钥技术,提供了比传统方法更高级别的安全保障,特别是对抗未来量子计算机的潜在威胁,提高了通信系统的安全性,同时,其跨平台的设计,使得该系统可以被广泛应用于不同的行业和设备,能够为各类敏感数据传输提供安全保障,具有较为广泛的应用场景。

    大数据治理中基于元数据实现数据标准与数据质量关联处理的方法

    公开(公告)号:CN110119395B

    公开(公告)日:2023-09-15

    申请号:CN201910446036.5

    申请日:2019-05-27

    Inventor: 滑少鹏 王克强

    Abstract: 本发明涉及一种大数据治理中基于元数据实现数据标准与数据质量关联处理的方法,包括(1)采集元数据;(2)导入企业数据标准;(3)将元数据按照数据标准进行归类,并以数据标准编号为关键字段进行存储;(4)根据数据标准制定数据质量标准;(5)根据数据质量标准编写质量规则;(6)根据质量规则检核元数据。采用了本发明的大数据治理中基于元数据实现数据标准与数据质量关联处理的方法,打破了企业在数据治理中业务需求与技术需求上的壁垒,可以根据数据标准要求给出整改意见,真正做到了以业务为目标,以技术为手段,实现了在企业大数据治理中的完整闭环,对企业提高数据质量、规范数据定义,保证数据资产的有效管理具有重要意义,具有很好的推广应用价值。

    大数据治理中实现辅助制定数据标准的系统及方法

    公开(公告)号:CN110069633A

    公开(公告)日:2019-07-30

    申请号:CN201910333037.9

    申请日:2019-04-24

    Inventor: 魏明 张睿 王克强

    Abstract: 本发明涉及一种大数据治理中实现辅助制定数据标准的系统,包括数据获取模块,用于从第三方数据源中获取所需的元数据;任务创建模块,用于创建对表类型元数据和字段类型元数据的分析任务,对整个任务过程进行监控并记录日志;智能分析模块,用于实现元数据的分词和聚类分析;结果存储及展示模块,用于将信息存入数据库中,通过列表展示元数据信息。本发明还涉及一种基于该系统实现大数据治理中的数据标准辅助制定的方法。采用了该系统及方法,实现了数据源的元数据信息的获取,并支持创建任务及对整个分析过程监控记录,辅助制定该类元数据的数据标准,从而大大降低人力成本,解决了目前人工梳理数据标准不全面,效率低的问题。

    基于区块链技术实现政务信息资源共享和交换的系统、方法、装置、处理器及其存储介质

    公开(公告)号:CN112702402A

    公开(公告)日:2021-04-23

    申请号:CN202011483352.9

    申请日:2020-12-16

    Abstract: 本发明涉及一种基于区块链技术实现政务信息资源共享和交换的系统,其中,该系统包括区块链资源管理功能模块,用于对参与政务区块链服务的资源进行统一管理;区块链数据共享交换功能模块,用于发起共享申请并对其他节点发出的请求进行监听及验证;区块链共识算法维护存储功能模块,用于验证政务数据是否符合标准约束的一致性和有效性;区块链数据服务功能模块,用于生成非对称加密的服务URL地址并传输给资源申请方。本发明还涉及一种基于上述系统相关的方法、装置、处理器及存储介质。采用了本发明的相关的系统、方法、装置、处理器及存储介质,基于区块链技术的安全可信任、防篡改及可溯源的特点,有效解决政务信息资源共享与交换中信任孤岛问题。

    大数据治理中基于元数据实现数据标准与数据质量关联处理的方法

    公开(公告)号:CN110119395A

    公开(公告)日:2019-08-13

    申请号:CN201910446036.5

    申请日:2019-05-27

    Inventor: 滑少鹏 王克强

    Abstract: 本发明涉及一种大数据治理中基于元数据实现数据标准与数据质量关联处理的方法,包括(1)采集元数据;(2)导入企业数据标准;(3)将元数据按照数据标准进行归类,并以数据标准编号为关键字段进行存储;(4)根据数据标准制定数据质量标准;(5)根据数据质量标准编写质量规则;(6)根据质量规则检核元数据。采用了本发明的大数据治理中基于元数据实现数据标准与数据质量关联处理的方法,打破了企业在数据治理中业务需求与技术需求上的壁垒,可以根据数据标准要求给出整改意见,真正做到了以业务为目标,以技术为手段,实现了在企业大数据治理中的完整闭环,对企业提高数据质量、规范数据定义,保证数据资产的有效管理具有重要意义,具有很好的推广应用价值。

    大数据治理中实现辅助制定数据标准的系统及方法

    公开(公告)号:CN110069633B

    公开(公告)日:2022-12-06

    申请号:CN201910333037.9

    申请日:2019-04-24

    Inventor: 魏明 张睿 王克强

    Abstract: 本发明涉及一种大数据治理中实现辅助制定数据标准的系统,包括数据获取模块,用于从第三方数据源中获取所需的元数据;任务创建模块,用于创建对表类型元数据和字段类型元数据的分析任务,对整个任务过程进行监控并记录日志;智能分析模块,用于实现元数据的分词和聚类分析;结果存储及展示模块,用于将信息存入数据库中,通过列表展示元数据信息。本发明还涉及一种基于该系统实现大数据治理中的数据标准辅助制定的方法。采用了该系统及方法,实现了数据源的元数据信息的获取,并支持创建任务及对整个分析过程监控记录,辅助制定该类元数据的数据标准,从而大大降低人力成本,解决了目前人工梳理数据标准不全面,效率低的问题。

    基于NIO针对大数据分布式系统进行消息处理优化的系统及方法

    公开(公告)号:CN110134534A

    公开(公告)日:2019-08-16

    申请号:CN201910411724.8

    申请日:2019-05-17

    Abstract: 本发明涉及一种基于NIO针对大数据分布式系统进行消息处理优化的系统,包括消息产生模块;消息分发模块;消息发送模块;消息接收模块;消息处理模块,根据接收的消息中的业务信息进行相应的业务操作;消息返回处理模块,用于等待消息的处理结果。本发明还涉及一种基于NIO针对大数据分布式系统进行消息处理优化控制的方法。采用了本发明的基于NIO针对大数据分布式系统进行消息处理优化的系统及方法,能够有效的降低分布式系统间消息通信时的资源占用高的问题,在提高消息通信的效率的同时保证了消息通信的及时性,且系统的通用性强,架构灵活,可扩展性高。该发明采用的方法很好的满足目前分布式系统间大批量和高并发消息通信的需求,具有广泛的应用范围。

Patent Agency Ranking