← 返回列表
一种基于折半交叉网络的健康指导方法和系统
申请人信息
- 申请人:河海大学; 南京荟英电子科技有限公司
- 申请人地址:211100 江苏省南京市江宁区秣陵街道佛城西路8号
- 发明人: 河海大学; 南京荟英电子科技有限公司
专利详细信息
| 项目 | 内容 |
|---|---|
| 专利名称 | 一种基于折半交叉网络的健康指导方法和系统 |
| 专利类型 | 发明申请 |
| 申请号 | CN202311698698.4 |
| 申请日 | 2023/12/12 |
| 公告号 | CN117392760A |
| 公开日 | 2024/1/12 |
| IPC主分类号 | G06V40/20 |
| 权利人 | 河海大学; 南京荟英电子科技有限公司 |
| 发明人 | 黄倩; 陈莹莹; 毛莺池; 李畅; 王彦芳; 巫义锐 |
| 地址 | 江苏省南京市开发区佛城西路8号; 江苏省南京市江宁区东山街道东麒路33号 |
摘要文本
本发明公开一种基于折半交叉网络的健康指导方法和系统，包括如下步骤：构建物理层和数据处理层，通过摄像头采集动作视频并进行处理得到去噪深度图和时间梯度图；构建行为识别层：构建特征提取网络，通过特征提取得到深度特征图和时间梯度特征图；构建折半交叉注意力模型，计算得到特征向量；输入全连接层，并通过激活函数进行激活，通过分类器得到输出结果；构建控制层：根据输出结果建立行为与控制的匹配关系，确定每个动作对应的语音指令以及实现对用户的建议提示。采用本发明的健康指导方法，解决了数据维度过高和无关特征信息对模型性能产生影响的问题，增强了对人体行为时空特征的表述能力，提高了行为识别精度和颈椎康复指导系统的可靠性。 （来 自 专利查询网）
专利主权项内容
1.一种基于折半交叉网络的健康指导方法，其特征在于，包括如下步骤：步骤1，采集动作视频，得到深度图和彩色图，并进行数据传输；步骤2，对步骤1中深度图和彩色图分别进行处理得到去噪深度图和时间梯度特征图；步骤3，对去噪深度图和时间梯度特征图进行特征提取，得到深度图像特征图和彩色图像特征图；构建折半交叉注意力模型，对折半交叉注意力模型进行训练，将深度图像特征图和彩色图像特征图输入训练后的折半交叉注意力模型中进行计算，得到特征向量；将特征向量输入全连接层，并通过激活函数进行激活，输出得到注意力特征图，最后通过分类器处理，得到输出结果；步骤4，根据步骤3输出结果建立行为与控制的匹配关系，确定每个动作对应的语音指令以及实现对用户的建议提示。。来自：马 克 团 队