一种驾驶员疲劳监测预警方法及系统

专利主权项内容

1.一种驾驶员疲劳监测预警方法，其特征在于，所述方法包括：步骤1，获取包含驾驶员面部图像的原始视频，按序从视频中读取出每帧图像，通过预处理模块对读取的每帧图像进行依次处理，得到对应的高分辨率图像；步骤2，对于每张高分辨率图像，将所述高分辨率图像输入改进后的YOLOV7算法中检测出的眼球和眼皮边缘对应的多个目标框，以及目标框中的眼球和眼皮边缘的真实坐标；步骤3，将每个目标框通过目标框解码的方法得到目标框的真实坐标，根据所述目标框的真实坐标将所述眼球和眼皮边缘的真实坐标进行坐标转换，得到基于眼部的眼球和眼皮边缘的坐标，根据基于眼部的眼皮边缘的坐标确定眼皮边缘运动轨迹，根据基于眼部的眼球的坐标确定眼球大小；步骤4，将眼动仪收集的信息结合对应的时间戳，传入LSTM模型中获得眼球的运动轨迹；步骤5，对驾驶员进行头部检测得到头部状态信息，通过车辆自身传感器和车载系统获得车辆状态信息；步骤6，根据眼皮边缘运动轨迹、眼球大小、眼球的运动轨迹融合得到眼部状态信息，将的眼部状态信息，头部状态信息和车辆状态信息融合后传入多信息融合检测模块，综合判段驾驶员的驾驶状态。