-
公开(公告)号:CN118885555A
公开(公告)日:2024-11-01
申请号:CN202410826907.7
申请日:2024-06-25
Applicant: 贵州电网有限责任公司
IPC: G06F16/31 , G06F16/33 , G06F40/30 , G06F40/279 , G06F40/216 , G06N3/08
Abstract: 本发明公开了一种能源行业大数据的语料库自动构建方法及系统,包括:采集能源行业数据,分析得到能源实体及事件关系,定义要素路径并构建触发词语义匹配模板;根据关键要素路径比例,计算关键要素路径集合;根据触发词匹配率,匹配事件关系,使用语义单元生成能源事件关系语料库。本发明通过采集和分析能源数据,定义要素路径并构建触发词语义匹配模板,奠定了数据处理基础。计算关键要素路径集合,优化匹配模板,提高匹配精度。随后,通过匹配事件关系,使用语义单元生成高质量语料库,确保丰富的事件关系和实体信息。建立事件关系抽取模型并进行两阶段训练,生成的语料库具备高准确性和全面性,显著提升了大数据分析和应用的效率与可靠性。
-
公开(公告)号:CN115695044B
公开(公告)日:2024-07-12
申请号:CN202211517250.3
申请日:2022-11-29
Applicant: 贵州电网有限责任公司
Abstract: 本发明公开了一种IT资产安全管控平台,其特征在于:所述平台包括外链业务模块、数据验证模块、身份验证模块、数据存储模块、数据监管模块及平台管控模块;所述外链业务模块为与外部业务端口相连进行IT资产数据同步;所述数据验证模块为对录入的IT资产数据进行数据来源验证;所述身份验证模块为验证登录信息进行操作管控;所述数据存储模块为用于分布式存储IT资产数据;所述数据监管模块为对IT资产数据进行安全筛查;所述平台管控模块为对平台运行规则、异常数据筛查规则、异常数据处理策略及数据分布式存储规则进行制定及执行;本发明架构简单,易于部署,资产管理步骤简单,能够实现IT资产数据的统一管理和动态监测。
-
公开(公告)号:CN118132580A
公开(公告)日:2024-06-04
申请号:CN202311723673.5
申请日:2023-12-14
Applicant: 贵州电网有限责任公司
IPC: G06F16/242 , H02J13/00 , G06F16/25
Abstract: 本申请涉及一种输电线路过载检测方法、装置和计算机设备,通过获取待检测线路段的实时电流数据;将所述实时电流数据转化为预设格式,并且写入Kafka消息队列;获取管理辖区内所有线路段对应的元数据信息,并且存储至数据库;利用实时计算引擎在所述数据库中查找与所述Kafka消息队列中的实时电流数据相匹配的目标元数据信息;基于所述目标元数据信息和所述待检测线路段的实时电流数据,对待检测线路段进行过载检测。上述输电线路过载检测方法,基于实时计算引擎和Kafka消息队列,能够及时并且精准的对输电线路过载情况进行检测,因而最大程度的降低安全风险。
-
公开(公告)号:CN118897947A
公开(公告)日:2024-11-05
申请号:CN202410846433.2
申请日:2024-06-27
Applicant: 贵州电网有限责任公司
IPC: G06F18/10 , G06F40/289 , G06F40/216 , G06F40/30 , G06F40/126 , G06F18/25 , G06F18/22 , G06N3/0442 , G06N3/045
Abstract: 本发明公开了一种面向大数据环境的动态文档去重方法及系统,涉及动态文档去重技术领域,包括采集原始文本数据并进行预处理,基于自然语言处理方法对预处理文本数据进行关键词切分;计算切分文本数据中每个关键词的TF‑IDF值获取频率文本数据,基于哈希函数生成关键词特征集并生成标识符;通过标识符比较各文档的相似度,构建分布式计算框架对比较过程进行并行去重处理。本发明所述方法基于自然语言处理方法对预处理文本数据进行关键词切分,提高了数据的结构化水平,通过TF‑IDF值计算和哈希函数映射,提高了数据处理的效率和准确性,通过并行计算和任务分发,解决了现有技术在处理大规模数据时存在的效率瓶颈问题。
-
公开(公告)号:CN118779465A
公开(公告)日:2024-10-15
申请号:CN202410800497.9
申请日:2024-06-20
Applicant: 贵州电网有限责任公司
IPC: G06F16/36 , G06F16/31 , G06F40/289 , G06N3/08 , G06N3/045 , G06F16/35 , G06F18/22 , G06F18/23 , G06Q50/06
Abstract: 本发明公开了一种基于机器学习的能源行业知识图谱优化与更新方法,涉及电力系统技术领域,包括,获取与能源行业知识相关的结构化数据、半结构化数据、非结构化数据以及实时数据;对获取的数据进行数据清洗、标准化以及数据标注,得到数据集;采用深度学习模型对数据集进行实体识别和关系抽取,将实体和关系表示为三元组,生成知识图谱,并采用图数据库存储和管理所述知识图谱。本发明通过整合能源行业相关的数据到一个统一的数据集中,充分利用各种类型的数据,提高数据的全面性和准确性。
-
公开(公告)号:CN118113459A
公开(公告)日:2024-05-31
申请号:CN202410077151.0
申请日:2024-01-18
Applicant: 贵州电网有限责任公司
Abstract: 本发明公开了一种多方协同控制的气象大数据处理效率方法及系统,方法包括:通过气象网络业务底层数据,获取当前区域气象系统复杂节点的数据;通过移动边缘算力解构方法进行处理分析,得到业务模型可解构的智能架构;设计气象网络业务的多因子,通过强化学习的对抗性智能体优化策略,进行气象网络业务中的多因子最优规划,通过多因子联合计算,自适应动态生成气象业务的调度,得到至算力节点的最优路径调度。本发明能够最大限度地减少数据共享和隐私泄露的风险,提高模型的性能和泛化能力,提高气象网络业务资源效率,有助于提高气象网络业务的整体性能、加快业务处理速度,从而优化资源利用率。
-
公开(公告)号:CN119759996A
公开(公告)日:2025-04-04
申请号:CN202411815764.6
申请日:2024-12-11
Applicant: 贵州电网有限责任公司
Abstract: 本发明公开了一种基于湖仓一体的异构能源数据存储方法包括,收集异构能源数据,并对所述数据进行预处理;对处理后的数据利用FCM算法进行模糊聚类提取出特征关键字;基于Hive组件将所述HDFS组件中的所述源数据加载到基于Hive组件创建的湖仓表中。本方法通过FCM聚类和ETL工具统一异构能源数据,优化数据加载和查询效率,降低处理耗时。利用湖仓一体架构增强了数据治理和跨领域共享,提升了系统扩展性和灵活性,降低数据处理耗时,提高数据查询及执行的效率并有效降低数据孤岛难统一管理的问题。
-
公开(公告)号:CN119646045A
公开(公告)日:2025-03-18
申请号:CN202411789334.1
申请日:2024-12-06
Applicant: 贵州电网有限责任公司
IPC: G06F16/2455 , G06F16/28
Abstract: 本发明公开了一种针对能源大数据的批流一体数据处理方法包括,进行能源大数据采集及能源大数据存储;使用Flink Catalog统一接入Kafka和Iceberg的元数据,为Kafka和Iceberg分别创建一个数据库空间,进行能源大数据加工处理;执行能源大数据分析应用。本发明的目的在于提供一种针对能源大数据的批流一体数据处理方法,解决现有技术中对能源大数据的流处理与批处理无法有效结合、数据处理效率低、扩展性和兼容性不足、技术先进性不够的问题。
-
公开(公告)号:CN116821237A
公开(公告)日:2023-09-29
申请号:CN202310723655.0
申请日:2023-06-16
Applicant: 贵州电网有限责任公司
Abstract: 本申请涉及一种数据库增量数据同步方法、装置、计算机设备、存储介质和计算机程序产品,涉及数据库技术领域。所述方法包括:查询源数据库和目的数据库之间的同步日志,确定上一次执行数据库数据同步的历史时间戳;根据历史时间戳,查询源数据库的操作日志,确定源数据库中待同步的增量数据;将待同步的增量数据装载至预设于目的数据库的临时表中;对临时表中的增量数据进行去重处理,将去重后的增量数据同步至目的数据库中。采用本方法能够在异构数据库之间实现增量数据同步。
-
公开(公告)号:CN115908052A
公开(公告)日:2023-04-04
申请号:CN202211518248.8
申请日:2022-11-29
Applicant: 贵州电网有限责任公司
Abstract: 本发明公开了一种基于区块链的数据资产管理方法、装置及存储介质,包括:布置区块链节点,多个子端节点分别与一个中继端节点通讯连接,多个中继端节点分别与一个主端节点通讯连接;资产录入,终端电力设备向对应的子端节点上传数据资产,或子端节点对对应的终端电力设备的数据资产进行实时采集上链;子端节点对上链的数据资产依次进行安全认证、资产分类、价值评估,中继端节点对数据资产进行存储;资产处置,主端节点认证操作者ID并基于权限对各个中继端节点内的数据资产进行处置。另外,本申请公开了资产数据的安全管理装置和计算机可读存储介质。通过本申请,能够对数据资产进行系统化及安全可靠的管控。
-
-
-
-
-
-
-
-
-