一种基于云计算的数据处理方法与系统

本发明涉及云计算技术领域，公开了一种基于云计算的数据处理方法与系统，针对多节点数据流动态变化和通信延迟问题，通过时间窗口过滤、带宽占用分析等技术识别并剔除失效梯度数据，采用异步更新机制和延迟节点隔离技术处理通信延迟超标节点，结合并行节点筛选和异步任务分发优化计算资源分配，最后利用延迟补偿策略协调各节点梯度更新时间，实现了分布式计算环境下梯度数据的高效同步。本发明有效解决了分布式环境中由于通信延迟导致的数据不一致问题，提高了梯度同步的精度和效率，为大规模分布式机器学习模型的训练提供了可靠的技术支持。