摘要
本发明公开了一种基于综合视讯平台的多模融合网关,涉及通信网络技术领域,该多模融合网关包括:多模数据处理模块,用于基于综合视讯平台的多模数据流,利用数据分离算法实时提取音频数据、视频数据和辅助数据,并生成终端间的音频兼容性映射关系,建立多模数据关联索引;用户身份关联模块,用于实时转换不同编解码标准间的音频流,并利用多模态融合算法分析音视频数据和辅助数据的综合特征,建立用户身份与多模数据流的关联模型;动态权限管理模块,用于构建跨平台权限关系图谱,并实时调整用户在不同平台间的音视频传输权限和交互权限。本发明能够有效解决视讯平台内不同终端间的音频兼容性问题和权限映射问题。