摘要
一种集成多种大语言模型的多模态人机交互优化系统,专注于智能人形机器人的人机交互领域。通过融合提示工程、自然语言处理和个性化角色配置等技术,显著提升了人机交互的灵活性、适应性和个性化水平。该技术利用多种大语言模型的优势,处理复杂对话逻辑,生成与人设、情绪、语境相适配的个性化语音、情绪、动作反馈,从而优化实时人机交互。具体实施包括语音唤醒单元、语音识别单元、函数调用单元、拟人对话单元、关键词匹配单元和语音合成单元,最终实现高度自然且沉浸的人机交互体验。本发明在语音识别准确性、响应速度、情绪动作表征及个性化互动等方面表现出优异性能,提供了更加生动、沉浸、个性化的用户体验。