← 返回列表

一种基于多相机联动目标监测的焊机和目标监测方法

申请号: CN202311731422.1
申请人: 杭州三信网络技术有限公司; 浙江大学台州研究院; 武义县泉城数据资源发展有限公司; 杭州峰景科技有限公司; 广视三信(台州)信息技术有限公司
申请日期: 2023/12/15

摘要文本

本发明公开了一种基于多相机联动目标监测的焊机和目标监测方法, 包括焊机本体、控制器、服务器、人脸识别模块、语音广播模块、工作摄像头和场景摄像头,焊机位于车间,车间划分为安全人行通道区域与焊机工作区域,工作摄像头的成像范围设置为焊机工作区域,场景摄像头的成像范围设置为安全人行通道区域,本发明通过背景模型消除背景突变对于目标追踪的影响;通过预估操作人员的位置;通过场景摄像头加权追踪目标;通过对人员区分过滤非目标人员,从而降低了背景突变对于目标追踪的影响,提高目标追踪的准确性和准确性,大大提高了目标的追踪效率。

专利详细信息

项目 内容
专利名称 一种基于多相机联动目标监测的焊机和目标监测方法
专利类型 发明授权
申请号 CN202311731422.1
申请日 2023/12/15
公告号 CN117412180B
公开日 2024/3/15
IPC主分类号 H04N23/90
权利人 杭州三信网络技术有限公司; 浙江大学台州研究院; 武义县泉城数据资源发展有限公司; 杭州峰景科技有限公司; 广视三信(台州)信息技术有限公司
发明人 陈浙泊; 江波; 潘凌锋; 廖志明; 楼子昂; 余建安; 王炜; 郑赛; 于晓鹏; 陈龙威; 陈一信
地址 浙江省杭州市西湖区西溪街道文二路195号; 浙江省台州市市府大道西段618号; ; 浙江省杭州市钱塘区白杨街道24号大街873号1号楼2701-2705室; 浙江省台州市台州湾新区东部新区甲南大道东段9号台州湾新区行政服务中心1061室(自主申报、仅限办公)

专利主权项内容

(来源 马克数据网) 1.一种焊机的目标监测方法,其特征在于:包括以下步骤:1)背景初始化;2)人员进入车间,身份识别模块执行身份识别流程,判断待进入的人员是否为该车间允许的人员,若是,控制器向服务器发送该人员的进入通知,若否,语音广播报警,提示有非法人员进入;3)人员进岗监测模块执行人员进岗监测流程,判断操作人员是否进入焊机工作区域,若是,执行4),若否,执行人员进岗监测流程;4)人员在岗监测模块执行人员在岗监测流程,判断操作人员是否离岗,若是,执行5),若否,执行人员在岗监测流程;5)人员离岗监测模块执行人员离岗监测流程,判断操作人员离岗是否超时,若是,焊机本体进入待机模式,执行场景监测流程,若否,语音广播模块报警提示,焊机本体进入待机模式;6)场景监测模块执行场景监测流程进行目标跟踪,判断操作人员是否离开车间,若是,语音广播模块报警提示;若否,语音广播模块报警提示,执行人员进岗监测流程;7)判断离岗的操作人员是否进入焊机工作区域,若是执行4),若否,执行6);8)待机模式;9)结束步骤;所述6)中场景监测流程通过位置敏感度、空间注意力、时间注意力调用场景摄像头,用于监测操作人员是否在车间,具体包括以下步骤:6.1.0)设定场景摄像头位置敏感度排序权重;设定操作人员向各焊机工作区域移动的概率为上式中θ为操作人员和各焊机工作区域之间的连线与操作人员速度方向的夹角,k为焊机工作区域的序号,k=1...U,U为焊机工作区域的总数;k6.1.1)设定场景摄像头空间观测注意力权重;上式中W为t时刻空间观测注意力权重,D为t时刻操作人员与各场景摄像头的距离值,itit6.1.2)设定场景摄像头时间观测注意力权重;上式中,T为t时刻时间观测注意力权重,v为操作人员的速度,P为在t时刻图像中操作人员的位置与P为在t-△t时刻图像中操作人员的位置,根据1.1.2)中图像与车间空间的距离转化式,获得车间空间坐标下的距离值,△t为时间差;itttt-△t6.1.3)预估操作人员的位置;操作人员离开焊机工作区域后,确定操作人员速度方向,设定操作人员向车间入口移动为负,操作人员向车间出口移动为正;更新θ和W;kit设定操作人员在t+1时刻图像的预估位置为6.1.4)根据预估的操作人员位置得到车间空间坐标系下的坐标,根据各焊机工作区域在车间空间坐标系下的坐标,以及操作人员向各焊机工作区域移动的概率/>获得操作人员在t+1时刻的目标焊机工作区域P0;6.1.5)根据目标焊机工作区域P0,根据各场景摄像头的拍摄权重P打开场景摄像头;X目标焊机工作区域P0的相邻场景摄像头分别为CiP0和Ci(P0+1),CiP0一侧相邻场景摄像头为Ci(P0-1)、Ci(P0-2),Ci(P0+1)另一侧相邻场景摄像头为Ci(P0+2)、Ci(P0+3),以目标焊机工作区域P0为中心,与各场景摄像头Ci的距离为设定各场景摄像头的拍摄权重为P,X上式中Z为目标焊机工作区域相关的若干场景摄像头的总数,Z为设定值,i=1...Z。