一种基于运转数字模型的PLC控制系统及方法

专利主权项内容

1.一种基于运转数字模型的PLC控制系统，包括操作端、控制端和设备端，其特征在于，所述操作端用于根据需求下发控制指令，所述控制端通过数据映射将操作端下发的控制指令识别转换为控制端所能识别的控制指令，并通过映射后的控制指令向设备端发送驱动控制指令，所述设备端根据接收的驱动控制指令对设备进行驱动，并对设备进行数据采集，采集得到的设备状态数据和物料状态数据回传至操作端，所述操作端对设备状态数据进行可视化；其中，所述控制端包括存储有生产计划的数据库，所述控制指令包括日生产计划，所述控制端根据日生产计划匹配数据库中的生产计划，调用数据库中相匹配的生产计划生成相应驱动控制指令；所述操作端通过采集得到的设备状态数据，根据RL算法对数据库中的控制数据进行优化决策；所述操作端对设备状态数据和物料状态数据进行采集，并建立设备状态向量和物料状态向量/>，其中，所述/>表示第m个设备状态数据，所述/>表示第/>个物料状态数据；所述操作端通过Q-learning算法对设备状态和物料状态进行组合优化，并对优化后的控制参数进行更新，具体计算方式为：
；其中，所述表示在t时刻环境所处的物料状态，所述/>表示在物料状态/>时设备的状态向量，所述/>表示在物料状态/>下，设备状态为/>时得到的即时奖励，所述/>表示设备状态/>的下一个状态向量，所述/>表示下一个状态下所有可能设备状态的最大Q值，所述/>表示折扣因子，用于计算未来奖励的当前价值，所述/>表示学习率。