-
公开(公告)号:CN114139497B
公开(公告)日:2024-08-23
申请号:CN202111519931.9
申请日:2021-12-13
Applicant: 国家电网有限公司大数据中心
IPC: G06F40/126 , G06F40/194 , G06F40/30 , G06N3/0475 , G06N3/08
Abstract: 本发明属于文本摘要提取技术领域,尤其为一种基于BERTSUM模型的文本摘要提取方法先对需要提取摘要的文本进行预处理,然后将预处理后的数据输入改进的BERT模型进行处理,判断出应该出现在摘要中的句子,BERT模型的改进过程中,在BERT模型原本的损失函数中增加一个余弦相似度损失,避免了数据处理中过度拟合,使得获得的摘要更加准确;另外,通过加入余弦相似性约束,使得BERT模型在训练早期,获得的结果的损失能够更快的下降,提高数据处理的速度;BERT模型的改进方面还包括加入融合指针网络的UniLM模型,通过融合指针网络的UniLM模型对文本下游生成任务进行微调,提前获取文本中的关键信息词,提高文本摘要的获得速度。
-
公开(公告)号:CN114969392A
公开(公告)日:2022-08-30
申请号:CN202210633230.6
申请日:2022-06-07
Applicant: 国家电网有限公司大数据中心
IPC: G06F16/383 , G06F16/36 , G06F40/30 , G06F40/279 , G06F40/216
Abstract: 本发明公开了一种多源异构数据标签生成方法及生成系统,属于信息处理的技术领域,该方法包括S1:记录和管理多源异构数据标签需求;S2:根据需求开展标签需求分析、梳理标签逻辑、开展标签数据溯源工作,制定数据标签规则;S3:按数据标签规则和数据标签逻辑开发及生成数据标签,其中,标签的生成包括手工生成和自动生成2种方式:手工生成是通过编写SQL或建模方式手动生成标签;自动生成是通过逻辑配置或者数据挖掘批量自动产生多个标签。本发明能够实现对业务知识的沉淀和共享,以支撑数据应用产品的快速构建、发布,提升企业数据应用建设与数据运营效率。
-
公开(公告)号:CN114443664A
公开(公告)日:2022-05-06
申请号:CN202210105132.5
申请日:2022-01-28
Applicant: 国家电网有限公司大数据中心
Abstract: 本发明公开了用于多源异构数据的虚拟表管理方法、装置及存储介质,属于信息处理的技术领域,该方法包括:S1:创建虚拟表,定义虚拟表结构;S2:建立虚拟表与底层数据之间的映射关系,将底层数据源的数据转换为虚拟表中的数据;S3:对数据消费者授权虚拟表访问权限;S4:数据消费者通过界面浏览和查询虚拟表中的数据。本发明可以实现多源异构数据的自动化查询,可有效、快速地查询底层数据中的数据,有利于数据的发现、理解。
-
公开(公告)号:CN114139497A
公开(公告)日:2022-03-04
申请号:CN202111519931.9
申请日:2021-12-13
Applicant: 国家电网有限公司大数据中心
IPC: G06F40/126 , G06F40/194 , G06F40/30 , G06N3/04 , G06N3/08
Abstract: 本发明属于文本摘要提取技术领域,尤其为一种基于BERTSUM模型的文本摘要提取方法先对需要提取摘要的文本进行预处理,然后将预处理后的数据输入改进的BERT模型进行处理,判断出应该出现在摘要中的句子,BERT模型的改进过程中,在BERT模型原本的损失函数中增加一个余弦相似度损失,避免了数据处理中过度拟合,使得获得的摘要更加准确;另外,通过加入余弦相似性约束,使得BERT模型在训练早期,获得的结果的损失能够更快的下降,提高数据处理的速度;BERT模型的改进方面还包括加入融合指针网络的UniLM模型,通过融合指针网络的UniLM模型对文本下游生成任务进行微调,提前获取文本中的关键信息词,提高文本摘要的获得速度。
-
公开(公告)号:CN113918634A
公开(公告)日:2022-01-11
申请号:CN202111205394.0
申请日:2021-10-15
Applicant: 国家电网有限公司大数据中心
Abstract: 本发明公开了用于数据交互的数据适配方法、适配器及存储介质,属于信息处理的技术领域,该方法应用于数据虚拟化服务器中的数据虚拟化层和底层数据源之间,包括以下步骤:S1:建立多源异构数据采集适配器,其中,多源异构数据采集适配器包括多个子适配器,用于根据数据虚拟化服务器的请求,调用对应的子适配器来读取底层数据源中的数据;S2:建立统一的适配器接口,其中,通过所述统一的适配器接口能够根据调用的底层数据源类型访问底层数据源中的数据。本方法能够建立统一的接口和适配器模式,对标准统一的字节码进行识别,由底层的系统相关组件进行后续的工作,为上层数据消费者提供简洁、统一访问的访问入口。
-
公开(公告)号:CN119166748A
公开(公告)日:2024-12-20
申请号:CN202411246325.8
申请日:2024-09-06
Applicant: 国家电网有限公司大数据中心
IPC: G06F16/33 , G06F18/213 , G06F18/22 , G06N3/0455 , G06N3/0499 , G06N3/0464 , G06N3/08
Abstract: 本发明提供一种基于改进BERT的SG‑CIM模型检索方法和系统,应用于SG‑CIM模型检索技术领域。方法包括:通过BERT模型对输入的针对SG‑CIM模型的检索业务描述进行特征提取,得到检索业务描述的检索特征;基于检索特征与预置的各项针对SG‑CIM模型的模型成果的成果特征之间的相似度,筛选出与检索业务描述匹配的模型成果作为检索结果;特征提取过程中,若检索业务描述中存在至少两个词属于同一电力业务系统,基于属于同一电力业务系统的词的情况进行自注意力处理。本发明解决了基于关键词SG‑CIM模型信息检索过程检索精度低及难以应对长文本或复杂描述的检索需求的问题。
-
公开(公告)号:CN111738589B
公开(公告)日:2024-02-27
申请号:CN202010566453.6
申请日:2020-06-19
Applicant: 国家电网有限公司大数据中心
IPC: G06Q10/0631 , G06Q10/10 , G06F16/33
Abstract: 本发明实施例公开了一种基于内容推荐的大数据项目工作量评估方法、装置及设备。包括:获取待评估项目的工作量基数及影响因子;对所述待评估项目和历史项目进行相似度计算,获得所述待评估项目对应的历史相似项目集合;根据所述历史相似项目集合确定所述待评估项目的影响因子的调整系数;根据所述工作量基数和各影响因子的调整系数计算所述待评估项目的工作量。本发明实施例公开的基于内容推荐的大数据项目工作量评估方法,根据工作量基数以及由历史相似项目集合确定的影响因子的调整系数计算待评估项目的工作量,可以提高大数据项目工作量评估的准确性。
-
公开(公告)号:CN115827933A
公开(公告)日:2023-03-21
申请号:CN202210695025.2
申请日:2022-06-20
Applicant: 国家电网有限公司大数据中心
IPC: G06F16/904 , G06F16/36
Abstract: 本发明公开了一种多源异构数据标签的发布、呈现和更新方法及系统,属于信息处理的领域,该方法包括S1:接收多源异构数据标签,对生成的数据标签进行审核,分析、判断、评估是否能满足业务实际需求;S2:将审核通过的数据标签进行发布,用以后续通过可视化功能或采用数据服务方式,提供给业务或技术部门使用;S3:通过数据标签可视化功能对数据标签进行呈现,其包括数据标签展现和数据标签统计;S4:对可视化的数据标签进行评价,依据评价结果对数据标签进行升级维护、停用和退役处理。在S4进行相关处理后,通过S3的可视化功能对更新后的数据标签进行呈现。本发明进一步增强对多源异构数据的发现和理解能力,提升数据标签方面的应用能力。
-
公开(公告)号:CN115688538A
公开(公告)日:2023-02-03
申请号:CN202110837149.5
申请日:2021-07-23
Applicant: 国家电网有限公司大数据中心
IPC: G06F30/27 , G06F17/16 , G06F119/12
Abstract: 一种面向负荷调控的可平移负荷辨识方法及系统,包括:基于提取的负荷状态确定负荷状态改变的初始变点时刻;基于初始变点时刻采用三个窗口的滑动窗口计算原变点时刻;基于原变点时刻结合变点时刻计算式得到负荷状态改变时刻;基于初始变点时刻与负荷状态改变时刻采用关联规则学习确定负荷非零状态的时间关联性;由运行周期内不同时刻的负荷状态确定各个不同负荷使用的频繁程度,并结合重要程度函数构建负荷强关联集合;判断负荷强关联集合中是否存在时间关联性的负荷非零状态,将不存在时间关联性的负荷非零状态的负荷强关联集合作为可平移负荷集合,可平移负荷集合中的负荷作为可平移负荷。本发明可准确的辨识出负荷状态改变时刻和可平移负荷。
-
公开(公告)号:CN115513960A
公开(公告)日:2022-12-23
申请号:CN202110690953.5
申请日:2021-06-22
Applicant: 国家电网有限公司大数据中心
Abstract: 一种面向需求响应的温控负荷联合控制方法及系统,包括获取调控需求功率及调控时段、温控负荷及负荷群的工作功率、历史使用数据;按照各负荷群中温控负荷的工作功率平均值升序确定各负荷群参与调控的顺序;由各负荷群中各温控负荷的工作功率及历史使用数据结合波动功率计算式计算得到的各温控负荷在调控时段的波动功率确定各负荷群中各温控负荷参与调控的顺序;进而将各负荷群在调控时段的总工作功率依次输入到预先构建的功率差额最小化目标函数中求解后利用得到的功率差额和预先设定的优化阈值确定最优调控方案;其中,功率差额最小化目标函数是根据需求功率与各负荷群的总工作功率间的差额构建的。本发明针对调控需求利用温控负荷进行精准调控。
-
-
-
-
-
-
-
-
-