摘要
本申请提供异常事件视频指令数据生成方法及装置,其中所述异常事件视频指令数据生成方法包括:分类样本视频集中包含的样本视频,得到异常视频集与正常视频集;基于预训练的多模态大模型对所述异常视频集进行处理,得到异常事件片段;对所述异常事件片段进行抽帧,基于抽帧结果拼接得到图像序列,并通过所述多模态大模型处理所述图像序列,生成异常描述;基于预训练的大语言模型,构建所述样本视频对应的视频级描述;通过所述大语言模型处理所述异常描述,得到异常事件指令,并通过所述大语言模型处理所述视频级描述,得到包含16种类型的问答式视频级指令。实现以视频帧作为检测粒度,构建高质量的视频异常检测指令数据集。