摘要
本发明涉及涉及大健康和人工智能技术领域,具体提供了一种基于多模态大模型的中医舌诊药饮推荐方法,包括:根据预处理后的舌象图像,采用BLIP‑2作为多模态编码框架提取完整查询向量组;基于完整查询向量组构建视觉语义向量;采用大型语言模型,基于视觉语义向量生成舌象病症描述;构建药饮知识库,基于药饮知识库对舌象病症描述以及用户自述进行检索,获取最终候选药饮;基于大型语言模型,根据所述舌象病症描述以及最终候选药饮,结合目标模板生成推荐方案。本发明借助BLIP‑2模型的跨模态表示能力,将用户文本描述与舌象图像特征联合建模,并基于语言模型生成个性化的健康状态描述,为后续药饮推荐提供更加精准的语义基础。