公开(公告)号：CN117931436A

公开(公告)日：2024-04-26

申请号：CN202410027938.6

申请日：2024-01-08

Applicant: 广东国地规划科技股份有限公司 ,  广州蓝图地理信息技术有限公司 ,  国地时空信息科技(北京有限公司)

Inventor： 何剑锋 ,  张鸿辉 ,  冯亮 ,  罗伟玲 ,  张恒 ,  朱水勋 ,  马昊翔 ,  崔学森 ,  沈亨 ,  吴泳兴 ,  陈建桥 ,  刘映弟

IPC: G06F9/50 ,  G06F9/48 ,  G06F16/215 ,  G06F16/25 ,  G06F16/2458 ,  G06F16/248 ,  G06F16/22 ,  G06F16/9538 ,  G06F16/9537

Abstract: 本发明公开了一种基于时空大数据引擎的数据处理方法和装置，所述方法包括：获取多源数据集和若干时空大数据任务；将多源数据集分解为前后依赖的若干子过程，以此建立若干资源洞察模型；根据若干时空大数据任务的任务数量选择对应的引擎，得到若干引擎；根据若干资源洞察模型对若干引擎的负载进行控制，使若干引擎对多源数据集进行资源调度，得到调度数据；对调度数据进行数据治理和多维分析挖掘，得到目标数据。本发明提出一种基于时空大数据引擎的数据处理方法和装置，通过建立资源洞察模型以控制引擎对多源数据集进行搜索处理，能够快速得到目标数据，所以能够解决难以及时从多源数据集中获取目标数据以进行一站式智能管理的问题。

公开(公告)号：CN117931436B

公开(公告)日：2024-06-21

申请号：CN202410027938.6

申请日：2024-01-08

Applicant: 广东国地规划科技股份有限公司 ,  广州蓝图地理信息技术有限公司 ,  国地时空信息科技(北京有限公司)

Inventor： 何剑锋 ,  张鸿辉 ,  冯亮 ,  罗伟玲 ,  张恒 ,  朱水勋 ,  马昊翔 ,  崔学森 ,  沈亨 ,  吴泳兴 ,  陈建桥 ,  刘映弟

IPC: G06F9/50 ,  G06F9/48 ,  G06F16/215 ,  G06F16/25 ,  G06F16/2458 ,  G06F16/248 ,  G06F16/22 ,  G06F16/9538 ,  G06F16/9537

Abstract: 本发明公开了一种基于时空大数据引擎的数据处理方法和装置，所述方法包括：获取多源数据集和若干时空大数据任务；将多源数据集分解为前后依赖的若干子过程，以此建立若干资源洞察模型；根据若干时空大数据任务的任务数量选择对应的引擎，得到若干引擎；根据若干资源洞察模型对若干引擎的负载进行控制，使若干引擎对多源数据集进行资源调度，得到调度数据；对调度数据进行数据治理和多维分析挖掘，得到目标数据。本发明提出一种基于时空大数据引擎的数据处理方法和装置，通过建立资源洞察模型以控制引擎对多源数据集进行搜索处理，能够快速得到目标数据，所以能够解决难以及时从多源数据集中获取目标数据以进行一站式智能管理的问题。