一种基于分布式通信的数据分析方法、系统、设备及介质
申请号:CN202510000811
申请日期:2025-01-02
公开号:CN119402440B
公开日期:2025-04-15
类型:发明专利
摘要
本发明公开了一种基于分布式通信的数据分析方法、系统、设备及介质,涉及数据处理技术领域,包括:基于分布式通信网络,实时监控节点状态并获取节点资源状态数据集,通过机器学习算法,建立节点性能评估模型,动态分配数据分析任务的计算资源以优化资源分配,并根据数据分析任务的需求和节点性能,设计任务分配策略,建立分布式数据处理框架;通过分布式分解并执行计算数据分析任务,聚合收集分布式计算结果并动态调整优化资源任务分配,获得最终的数据分析结果,本发明能够实时监控节点状态并智能调整资源分配方案,根据节点的通信状况和计算能力动态优化任务分配的优点,进而解决现有技术中动态资源管理不足和任务调度灵活性差的问题。
技术关键词
分布式数据处理
节点资源状态
任务分配策略
数据分析方法
资源分配
分布式通信网络
动态资源管理
机器学习算法
分布式数据分析
数据流管理
任务调度器
框架
多层感知机
滑动窗口技术
交叉验证方法
数据分析系统
网络结构