大语言模型中慢思考与快速响应区域的解耦方法及装置

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
大语言模型中慢思考与快速响应区域的解耦方法及装置
申请号:CN202510882807
申请日期:2025-06-28
公开号:CN120764686A
公开日期:2025-10-10
类型:发明专利
摘要
本发明公开了一种大语言模型中慢思考与快速响应区域的解耦方法及装置。其中,该方法包括:构造慢思考提示和快响应提示,将慢思考提示和快响应提示分别输入大语言模型,并记录大语言模型的每一线性层的神经元激活值;基于慢思考提示和快响应提示分别对应的神经元激活值,计算激活值差向量,并基于激活值差向量获取提示差向量;迭代处理多个推理问题,获取所有推理问题中的提示差向量的正值位置交集,识别出与慢思考相关的关键神经元集合;基于关键神经元集合中的关键神经元的位置信息,构建梯度掩码矩阵,基于梯度掩码矩阵采用掩码方式对关键神经元进行微调,得到优化后的大语言模型。本发明解决了现有模型推理能力不佳的技术问题。
技术关键词
大语言模型 掩码矩阵 可读存储介质 计算机程序产品 处理器 存储器 线性 计算机设备 识别模块 强度 索引 样本 动态