基于多模态大模型的内镜报告生成方法、装置及存储介质

本申请涉及医疗技术辅助领域，公开了一种基于多模态大模型的内镜报告生成方法、装置、计算设备及存储介质，该方法包括：采集消化内镜检查影像，并对消化内镜检查影像进行预处理；对预处理后的消化内镜图片进行分类标注，构建消化内镜检查多模态图文报告数据库；利用多模态图文报告数据库训练预设的初始报告模型；将待输出报告的消化内镜检查影像输入训练后的消化内镜报告模型中，以生成输出的消化内镜报告。本申请根据采集的消化内镜检查图像，检测消化内镜检查图像中存在的可疑病灶并采集代表性图像，形成图像报告，并生成描述与诊断的文字报告，最终生成完整、准确、规范的消化内镜检查报告，提高内镜报告生成效率和质量。