摘要
本发明涉及语音语义技术领域,可应用于金融科技、医疗健康等业务系统平台中,公开了一种客服对话的异常行为分析方法、装置、设备及介质,包括:获取目标客户的客服交互记录数据,根据客服交互记录数据筛选预设时间范围内的客服对话行为;调用客服对话行为对应的客服交互音频数据,对客服交互音频数据进行多模态声音识别,得到语音文字内容及情绪波动数据;提取语音文字内容的关键语义信息及情绪波动数据的情绪特征信息;将关键语义信息及情绪特征信息进行关联拼接,得到交互分析数据;对交互分析数据进行深度语义推理,得到异常客服对话原因,根据异常客服对话原因将客服对话行为判定为异常行为。本发明可以提升客服对话中异常行为分析的准确性。