摘要
本申请公开了一种适应老年人特征的多模态起身意图识别方法，包括：获取用户的毫米波雷达数据并生成点云；获取用户的视觉数据，从用户视觉数据中识别人体关键点与物体边界框，并根据人体关键点与物体边界框的重叠关系判断用户的起身意图；将毫米波雷达特征向量与视觉特征向量进行对齐并融合获得融合后的特征向量；构建层次化时序注意力模型HTAM，在时序模型的基础上结合注意力机制和层次化结构。本申请通过毫米波雷达和视觉摄像头不同模态传感技术的融合，为老人起身意图识别提供了一种更精准、高效且适应性强的数据输入，结合手部床边扶手抓取特征辅助信息，通过引入多阶段层次化时序模型HTAM来提高对老人起身意图识别的能力。
