一种基于实时语音识别和动作捕捉的虚拟戏剧模拟方法及系统
申请号:CN202411526350
申请日期:2024-10-30
公开号:CN119414961A
公开日期:2025-02-11
类型:发明专利
摘要
本发明涉及一种基于实时语音识别和动作捕捉的虚拟戏剧模拟方法及系统,步骤包括:接收使用者所选择想要模拟的演出段落和角色,VR头戴式显示器以第一人称视角显示对应的虚拟场景和NPC表演;通过动作捕捉与光学定位系统捕捉获取使用者的姿态和位置信息,驱动虚拟角色第一视角在虚拟场景内和NPC进行表演模拟;基于获取使用者的姿态和位置信息,实时判断使用者是否满足到达指定位置和/或是否完成指定道具的交互,并判断表演进度,实时进行动态演出模拟;获取使用者的语音信息,通过语音识别实时解析使用者的台词文本信息,并判断表演进度,实时进行动态演出模拟。本发明能够贴近真实演出让单个使用者也完成多人的戏剧表演练习。
技术关键词
实时语音
VR头戴式显示器
光学定位系统
驱动虚拟角色
动作捕捉系统
模拟系统
子系统
识别点
视角
动作捕捉技术
显示虚拟场景
数据
动态
广视场角
文本
标记
服装