摘要
本发明涉及人工智能和虚拟现实技术领域,公开了基于多模态数据融合的虚拟数字人生成及交互优化系统,包括:多模态输入融合模块,用于采集和融合来自音频、视频和触摸的多种模态的数据;自适应行为调整模块,用于根据用户输入和交互历史,自适应地调整虚拟数字人的行为和响应策略;实时动态渲染模块,用于生成和渲染虚拟数字人的形象,并使其动作、表情和语言输出的实时同步;个性化定制界面模块,用于为用户提供虚拟数字人外观、声音和行为的个性化定制功能;系统集成与优化模块,用于将各模块集成。通过融合多种模态的数据(如音频、视频、触摸),系统能够全面理解用户的行为和情感状态,减少交互延迟,使用户体验到更加流畅的互动过程。