公开(公告)号：CN116796699A

公开(公告)日：2023-09-22

申请号：CN202310841499.8

申请日：2023-07-11

Applicant: 浙江大学 ,  国网山东省电力公司济南供电公司

Inventor： 冯尊磊 ,  魏耀全 ,  陈霞 ,  宋杰 ,  宋明黎 ,  梁栋 ,  禚俊杰 ,  刘珅岐

IPC: G06F30/398 ,  G06N3/088 ,  G06N3/0895 ,  G06N3/092 ,  G06N3/045

Abstract: 基于状态关系主动提问的存储电路智能化设计方法和系统，其方法包括：首先将存储电路数据的节点特征进行对齐从而构建存储电路结构状态的一条高维向量表示。然后利用随机采样的存储电路结构数据训练特征提取器，之后构建强化学习模型。在训练强化学习模型时，将每一步遇到的存储电路结构状态特征提取出来，并放入特征池中。然后依据每一步当前存储电路结构状态特征与特征池的距离，判断是否向专家进行提问。若向专家提问，专家会给予具体动作建议让模型去执行。最后，为了保证模型能够快速学习专家知识，为每一条专家建议的样本设置额外的内置奖励。