一种基于深度学习与点云的无序堆叠物料分拣方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种基于深度学习与点云的无序堆叠物料分拣方法
申请号:CN202411456870
申请日期:2024-10-18
公开号:CN119005255B
公开日期:2025-01-24
类型:发明专利
摘要
本发明涉及一种基于深度学习与点云的无序堆叠物料分拣方法,所述方法包括:构建散乱序堆叠物料数据集;训练YOLOv5s物料识别模型;基于YOLOv5的目标推理结果和深度相机采集的深度图像构建无序堆叠物料三维点云;利用改进随机一致性采样算法估计机械臂末端抓取位姿;利用YOLOv5推理边界框估计物料尺寸;利用相机视场角估计物料最佳拍摄高度;利用串口通信实现上位机对机械臂的抓取控制;利用估计物料尺寸对物料进行分级分拣。本发明是基于视觉感知、深度学习的概念进行设计和开发的,将2D彩色图像深度学习推理结果与3D深度图像融合构建点云,提高了无序堆叠物料识别、抓取姿态估计的准确度,同时根据物料估计尺寸进行分级分拣,提高物料分拣的稳定性。
技术关键词
物料分拣方法 深度相机 彩色图像 机械臂末端执行器 开发板 负压传感器 坐标系 尺寸 点云 视场角 相机成像模型 货仓 测试机 算法 手眼标定 姿态估计
系统为您推荐了相关专利信息
修复控制方法 协作机械臂 深度相机 修复系统 机械臂坐标系
多尺度特征融合 锂电池 重型卡车 多尺度特征提取 融合特征
焊接机器人 焊接坡口 深度相机 定位方法 三维重建模型
抓取控制方法 水下机器人 数据 机械臂末端执行器 人机协同控制
采摘末端执行器 薄型气缸 切割部件 触觉传感系统 夹持部件