基于自适应多模态融合的云游戏虚拟现实手势交互方法、设备及存储介质

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
基于自适应多模态融合的云游戏虚拟现实手势交互方法、设备及存储介质
申请号:CN202411808732
申请日期:2024-12-10
公开号:CN119311122A
公开日期:2025-01-14
类型:发明专利
摘要
本发明提出一种基于自适应多模态融合的云游戏虚拟现实手势交互方法、设备及存储介质,包括以下步骤:S1,采集用户手部骨骼点数据,获取关键骨骼点的三维坐标,生成骨骼点特征向量;S2,采集手部深度图数据,提取手部区域的深度梯度特征,生成深度梯度特征向量;S3,采集手部运动时间序列数据,计算关键骨骼点的速度和加速度特征,生成时间序列特征向量;S4,对骨骼点特征、深度图特征和时间序列特征进行加权融合,生成融合特征向量;S5,结合融合特征向量与场景信息,推断用户交互意图并执行相应虚拟现实操作;通过多模态特征的加权融合,该方法显著提高了手势识别的准确性和抗干扰能力,适用于云游戏与虚拟现实交互场景。
技术关键词
手势交互方法 深度图数据 检测用户手势 虚拟现实交互 时间序列特征 游戏 意图 时间序列数据采集 加速度 执行虚拟现实 时间变化特征 坐标 物体 生成深度图 深度值 多模态特征