-
公开(公告)号:CN105760279B
公开(公告)日:2018-09-07
申请号:CN201610133483.1
申请日:2016-03-09
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网浙江省电力公司 , 北京中电飞华通信股份有限公司 , 国网信息通信产业集团有限公司
Abstract: 本发明公开了一种分布式数据库集群故障预警关联树生成方法及系统,包括:构建M个本地频繁一项集表;构建初始的M个本地关联分支树;将初始的M个本地关联分支树发送至主服务器,并在主服务器中建立初始的主关联树,合并所有重复项;将所有频繁项形成为候选二项集表;将候选二项集表发送到全部M个本地节点,通过剪枝步骤生成频繁二项集表;重复上述步骤,直至不能生成更高维的频繁项集为止,得到最终的预警事件关联树。本发明提出的分布式数据库集群故障预警关联树生成方法及系统,解决了预警关联树建立效率低下的问题。
-
公开(公告)号:CN106250523A
公开(公告)日:2016-12-21
申请号:CN201610634581.3
申请日:2016-08-04
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网北京市电力公司 , 北京中电飞华通信股份有限公司
IPC: G06F17/30
CPC classification number: G06F16/2237 , G06F16/221
Abstract: 本发明公开了一种分布式列存储系统索引的方法,包括:获取每列数据的分布特征,设定每列数据的域值及划分规则;根据域值及划分规则,得到划分后的连续数据区域;分别对应每个数据区域建立一个区域编码向量;进行统计计算,得到每列数据的统计信息,将统计信息与对应的区域编码向量合并,得到带有统计信息的区域编码向量;将带有统计信息的区域编码向量作为位图索引的位向量进行数据的索引。所述分布式列存储系统索引的方法通过设定每列数据的域值和划分规则,使得分组位图索引的划分方式与查询的过滤条件相符合,通过计算列数据的统计信息,不仅提高了分组位图查询的准确性,而且能够保留列存储系统中数据的统计信息,保证数据信息的完整性。
-
公开(公告)号:CN110427383A
公开(公告)日:2019-11-08
申请号:CN201910395268.2
申请日:2019-05-13
Applicant: 国网冀北电力有限公司 , 北京中电普华信息技术有限公司 , 北京万里开源软件有限公司 , 北京国电通网络技术有限公司 , 国网信息通信产业集团有限公司
Abstract: 本发明公开了一种基于数据冗余的mysql集群在线数据重分布方法及相关设备。所述方法包括:接收数据重分布请求;根据所述数据重分布请求将第一节点中的第一主数据副本、第一备数据副本之间的数据同步的变更应用中断;将所述第一备数据副本的物理表空间导出生成表空间文件,将所述表空间文件分别拷贝到第二节点的第二主数据副本、第二备数据副本;将数据同步的变更应用中断之后存储到所述第一主数据副本中的增量数据分别增量同步到所述第二主数据副本、所述第二备数据副本。本发明所述方法无需进行复杂的sql拼接转换,保证迁移的数据一致性,同时提高数据重分布的效率。
-
公开(公告)号:CN106250523B
公开(公告)日:2019-04-16
申请号:CN201610634581.3
申请日:2016-08-04
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网北京市电力公司 , 北京中电飞华通信股份有限公司
IPC: G06F16/31
Abstract: 本发明公开了一种分布式列存储系统索引的方法,包括:获取每列数据的分布特征,设定每列数据的域值及划分规则;根据域值及划分规则,得到划分后的连续数据区域;分别对应每个数据区域建立一个区域编码向量;进行统计计算,得到每列数据的统计信息,将统计信息与对应的区域编码向量合并,得到带有统计信息的区域编码向量;将带有统计信息的区域编码向量作为位图索引的位向量进行数据的索引。所述分布式列存储系统索引的方法通过设定每列数据的域值和划分规则,使得分组位图索引的划分方式与查询的过滤条件相符合,通过计算列数据的统计信息,不仅提高了分组位图查询的准确性,而且能够保留列存储系统中数据的统计信息,保证数据信息的完整性。
-
公开(公告)号:CN107515899A
公开(公告)日:2017-12-26
申请号:CN201710604810.1
申请日:2017-07-24
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网北京市电力公司 , 北京中电飞华通信股份有限公司 , 国网信息通信产业集团有限公司
IPC: G06F17/30
Abstract: 本发明公开了一种数据库联合分片方法、装置以及存储介质,涉及数据仓库技术领域,其中的方法包括:计算连接条件包含的维表的选择谓词字段参与连接查询操作的维表字段查询频率;计算在维表与事实表进行连接查询操作时,事实表符合包含有选择谓词字段的连接条件的平均记录数;根据维表字段查询频率和平均记录数确定需要分片的维表,将需要分片的维表以及事实表进行联合分片。本发明的方法、装置以及存储介质,实现了根据工作负载特点、以及分片数量限制,自动选择部分维表,进行维表和事实表的联合分片;并且采用排序的方法,减少了算法的计算量,同时保证连接操作的代价最小化。
-
公开(公告)号:CN110413687B
公开(公告)日:2024-01-05
申请号:CN201910385755.0
申请日:2019-05-09
Applicant: 国网冀北电力有限公司 , 北京中电普华信息技术有限公司 , 北京万里开源软件有限公司 , 北京国电通网络技术有限公司 , 国网信息通信产业集团有限公司
Abstract: 本发明公开了一种基于节点互证校验的分布式事务故障处理方法及相关设备。所述方法包括:对所述分布式事物包含的每个分片进行第二阶段的提交;获取任一提交失败的分片以及与该分片关联的所述分布式事物的其他分片;判断所述分布式事物的其他分片中是否有任一分片提交成功;若是,则将该提交失败的分片重新提交。本发明所述方法及相关设备在第二阶段提交阶段出现故障的情况下依然可以确保集群事务提交的强一致性。
-
公开(公告)号:CN108287868B
公开(公告)日:2019-02-26
申请号:CN201711378123.9
申请日:2017-12-19
Applicant: 北京国电通网络技术有限公司 , 国家电网公司
IPC: G06F16/2453
Abstract: 本发明公开了一种数据库查询、数据块划分方法和装置,所述数据库查询方法包括:将用户发送的查询条件与查询单元集合中各查询单元进行比较,根据比较结果生成查询向量;将所述查询向量分别与所述数据库中各数据块所对应的向量进行并操作,根据并操作结果选取向量;根据所述查询条件,在选取的向量所对应的数据块中进行查询,得到查询结果;其中,所述查询单元集合是预先由查询工作负载中分解出的查询单元组合而成的。应用本发明以便于查询时实现更精细化的跳读,提高查询效率,且付出的存储成本较小。
-
公开(公告)号:CN107451229A
公开(公告)日:2017-12-08
申请号:CN201710605395.1
申请日:2017-07-24
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网北京市电力公司 , 北京中电飞华通信股份有限公司 , 国网信息通信产业集团有限公司
IPC: G06F17/30
Abstract: 本发明公开了一种数据库查询方法和装置,包括步骤:根据数据中的实体信息构建实体簇,并将实体簇与存储节点建立映射关系,根据所述映射关系将数据存储至存储节点;根据查询指令,将属于同一实体簇但位于不同存储节点上数据读取到一个存储节点的内存中;根据实体簇中的实体信息将维度数据在存储节点之间进行迁移;执行查询指令。实现了优化的数据库构建和数据库查询方法,提高数据库查询性能。
-
公开(公告)号:CN106777027A
公开(公告)日:2017-05-31
申请号:CN201611123673.1
申请日:2016-12-08
Applicant: 北京国电通网络技术有限公司 , 国家电网公司 , 国网北京市电力公司 , 北京中电飞华通信股份有限公司 , 国网信息通信产业集团有限公司
Abstract: 本发明公开了一种大规模并行处理行列混合数据存储装置及存储、查询方法,属于数据库技术领域。本发明装置包含联机事务处理模块、联机分析处理模块、存储模块、跨层查询模块以及跨层交互模块。本发明在一个数据库中同时实现了OLTP和OLAP两种功能,可以根据数据的访问频率将数据以适当的形式存储,既能为用户提供方便的查询服务,又可以为用户提供高效地数据分析服务,相对于现有技术中OLTP和OLAP分别部署的方式来说是一种重要的技术进步。
-
公开(公告)号:CN106547610A
公开(公告)日:2017-03-29
申请号:CN201610885951.0
申请日:2016-10-11
Applicant: 北京国电通网络技术有限公司
Abstract: 本发明公开了一种分布式事务提交方法及系统,在传统的分布式事务两阶段提交的方法基础上,通过增加了准备模块,用于当部分参与者超时未收到来自协调者的命令,或收到来自协调者的乱序命令,则与其他参与者进行通信后,根据大多数原则决定执行“提交”还是“撤销”命令。解决了在事务提交阻塞发生阶段可能会出现消息等待超时、消息乱序导致数据不一致的问题,提高了分布式事务提交的效率。
-
-
-
-
-
-
-
-
-