一种基于手势识别的电气设备工业机器人、控制单元及实现方法

本发明公开一种基于手势识别的电气设备工业机器人、控制单元及实现方法系统，工业机器人包括手势采集模块、手势识别模块、环境感知模块、路径规划模块、运动控制模块以及电气设备交互模块，解决了传统工业机器人操作复杂、人机交互不便捷以及在复杂环境下路径规划与运动控制不够精准高效的问题。本发明通过手势采集模块利用高分辨率摄像头及深度传感器实时采集操作人员的手势图像及深度信息；手势识别模块采用双流时空卷积神经网络TS‑CNN对采集的手势数据进行特征提取与识别，空间特征提取模块基于ResNet‑50模块提取单帧手势图像特征，动态手势验证单元在3秒内依次识别解锁控制权限，精准识别操作人员手势并进行权限验证，实现高效便捷的人机交互。