基于可学习图补丁的面向跨领域图模型预训练方法和系统

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
基于可学习图补丁的面向跨领域图模型预训练方法和系统
申请号:CN202510260282
申请日期:2025-03-06
公开号:CN119782822B
公开日期:2025-05-30
类型:发明专利
摘要
本发明公开了一种基于可学习图补丁的面向跨领域图模型预训练方法和系统,属于图模型训练技术领域。获取多源域的预训练图数据集;将预训练图数据集中的每个图数据的节点特征拆分为各通道的节点令牌集合,各通道的节点令牌集合及其相应通道的图结构作为该通道的关键图补丁;编码图数据中各通道的关键图补丁并聚合后作为图数据表征;基于图数据表征结果,引入特征遮蔽复原任务和图邻居上下文预测任务对各模块预训练,预训练后的模块组合作为用于提取目标域图数据表征的跨领域图模型,以实现目标域图数据的下游任务。本发明实现了将分解后的关键图补丁在无辅助信息情况下从不同源域图数据中提取可迁移信息,提升了图模型在多领域任务中的迁移性能。
技术关键词
补丁 预训练方法 令牌 节点特征 数据 通道 编码模块 社交网络图 神经网络模型 邻居 模型训练技术 模型预训练 多层感知机 解码器 推荐系统 注意力机制