一种LLM场外微调隐私保护方法、系统、设备及介质

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种LLM场外微调隐私保护方法、系统、设备及介质
申请号:CN202410913796
申请日期:2024-07-09
公开号:CN118734361A
公开日期:2024-10-01
类型:发明专利
摘要
一种LLM场外微调隐私保护方法、系统、设备及介质,能够对Offsite‑Tuning方法中的Adapter进行隐私保护,其方法包括模型拥有者先利用CKKS算法对传输前的Adapter进行加密,然后下游数据拥有者对自己私有的数据进行加密并对加密后的密文Adapter进行微调,将微调后的结果Adapter传回给模型拥有者,模型拥有者再对其进行解密,从而得到更新后的Adapter,再将其聚合并拼接到大模型中,从而实现场外微调中对Adapter的保护;其系统设备和介质能够根据所述隐私保护方法实现场外微调中对Adapter的保护;具有同时保护模型拥有者的模型参数和下游数据拥有者的私有数据的有益效果。
技术关键词
隐私保护方法 同态加密算法 矩阵 微调方法 存储计算机程序 隐私保护设备 解密 隐私保护系统 训练神经网络 可读存储介质 参数 模型更新 系统设备 加密模块 数据加密 明文 私钥 浮点数