基于多阶段并行策略的水利大数据高效处理方法及系统

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
基于多阶段并行策略的水利大数据高效处理方法及系统
申请号:CN202511160571
申请日期:2025-08-19
公开号:CN120994394A
公开日期:2025-11-21
类型:发明专利
摘要
本发明提供了一种基于多阶段并行策略的水利大数据高效处理方法及系统,其中方法包括步骤S1,将水利数据按预设时间窗口划分为多个子数据集,每个子数据集封装为独立的任务包;步骤S2,基于任务包,通过CPU‑GPU协同架构进行动态负载均衡计算,输出完成计算的任务包;步骤S3,将完成计算的任务包,解析后输出至业务端。本发明采用改进的种子蔓延算法,通过CPU‑GPU协同架构,利用全局任务池和动态负载迁移技术,提升GPU计算资源利用率,采用三级动态拉取控制策略避免GPU过载或闲置。本发明从算法设计、硬件加速、数据组织和业务适配四个维度构建了完整的水利大数据处理体系,提升了处理效率,为智慧水利建设提供了可靠的技术支撑。
技术关键词
水利大数据 并行策略 多阶段 多处理器 磁盘缓存区 动态 移动平均算法 无锁队列 迁移技术 指标 阈值方法 存储结构 控制策略 参数 指数 标签 核心