阅读量：

10

申请(专利)号：

CN202210709795.8

申请日期：

2022-06-23 00:00:00

公开/公告号：

CN202210709795.8

公开/公告日期：

2022-08-26 00:00:00

申请(专利权)人：

天津理工大学

发明人：

沈丛，杨甜，东天宇，幸高松，陆星元，袁甜甜，陈胜勇

展开

摘要：

本发明提供了一种基于ResNet34网络注意力机制的连续手语识别方法及装置,涉及人工智能识别技术领域,包括:S1:获取第一视频数据训练集,并采用KFE聚类算法获取第二视频数据训练集,S2:构建ResNet34网络拓扑,将PSA通道注意力机制和RCC空间注意力机制融合成PR注意力机制,并与ResNet34网络拓扑进行集成以提取第二视频数据集的特征信息;S3:构建BiLSTM网络拓扑以对第二视频数据集的特征信息进行编码,采用LSTMCTC端对端网络结构拓扑以对编码后第二视频数据集进行解码;S4:构建目标函数,以对ResNet34网络拓扑与PR注意力机制集成后的网络拓扑参数,BiLSTM网络拓扑参数以及LSTMCTC端对端网络结构拓扑参数进行调整.本发明可以缓解现有技术中视频冗余造成的神经网络结构过度拟合的技术问题.

展开