一种钻探作业中采用自动化控制的方法及装置

专利主权项内容

1.一种钻探作业中采用自动化控制的方法，其特征在于，包括以下步骤：S1. 数据采集；S2. 根据采集的数据，通过系统终端分别进行钻进控制、下钻控制、起钻控制、扩孔/划孔控制和排除卡钻控制；所述钻进控制具体包括以下子步骤：S201. 定义状态空间和动作空间，其中，所述状态空间表示DQN模型的输入，所述状态空间至少包括钻头位置、钻头转速、轴向力、进给速度、泥浆流量、地层硬度和钻头磨损，所述动作空间至少包括转速控制、轴向力控制和钻头更换；S202. 通过定义回报函数评估每个动作的效果；利用均方误差评估预测Q值与目标Q值的差异，对于每个训练步骤，使用以下损失函数更新网络：
；其中，所述表示损失函数，所述/>表示神经网络参数，所述/>表示对训练数据进行取平均或期望，所述/>表示即时回报，及在状态/>采取动作/>时的即时回报，所述/>表示折扣因子，所述/>的取值介于0和1之间，所述/>表示在新状态/>下，所有可能动作/> 的Q值的最大值，所述/>表示目标网络的参数，所述/>表示当前神经网络的参数，所述/>表示当前状态空间，所述/>表示当前状态/>下采取的动作，所述/>表示执行动作/>后的下一个状态，所述/>表示新状态/>下的动作；S203. 通过训练好的模型实时调整钻进参数，选择最优动作作为输出。