摘要
本发明涉及智能会议处理技术领域,涉及利用AI的会议纪要处理方法及其系统,包括通过噪声抑制算法对采集会议音频流及关联文本数据进行实时噪声抑制,并采用跨模态对齐算法对降噪后的数据进行跨模态对齐;在预训练Transformer模型的注意力层中插入领域专用注意力头,构建领域增强的语音识别模型,将音频转换为带说话人标签的文本序列;采用异构图神经网络构建结构化议题演进图谱;基于强化学习策略提取结构化议题演进图谱中的关键决策节点,生成最终会议摘要文档。在解码阶段,基于实时声学置信度动态调整声学模型与语言模型的融合比例,提高专业领域词汇的识别率,有效降低专业会议中术语转写错误频发,语义连贯性差的问题。