一种基于多模态感知融合的自主机器人决策系统及其方法
申请号:CN202411820487
申请日期:2024-12-11
公开号:CN119295883A
公开日期:2025-01-10
类型:发明专利
摘要
本发明涉及自主机器人决策系统技术领域,更具体地说,涉及一种基于多模态感知融合的自主机器人决策系统及其方法,包括:多模态数据采集模块,用于获得环境的多模态感知数据;数据预处理模块,与多模态数据采集模块相连,用于对多模态感知数据进行预处理;特征提取模块,与数据预处理模块相连,用于从预处理后的多模态感知数据中提取特征;动态时空图构建模块,与特征提取模块相连,用于基于特征构建动态时空图;多模态数据融合模块,与动态时空图构建模块相连,用于对动态时空图中的多模态数据进行融合;通过自适应时间对齐和跨模态空间注意力机制,系统能够有效处理不同传感器数据的时空不一致性,实现厘米级的定位精度。
技术关键词
多模态数据采集
自主机器人
多模态数据融合
特征提取模块
决策系统
特征提取单元
深度图数据
控制执行模块
动态
融合多模态信息
规划
点云特征提取
3D点云数据
视觉特征提取
深度特征提取
GPS接收器