一种集群数据处理方法、装置、设备及介质

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种集群数据处理方法、装置、设备及介质
申请号:CN202411586571
申请日期:2024-11-08
公开号:CN119088663B
公开日期:2025-01-28
类型:发明专利
摘要
本申请公开了一种集群数据处理方法、装置、设备及介质,涉及计算机技术领域,包括:收集计算节点多个维度的当前负载数据;对当前负载数据进行预处理,并通过多个不同主题的消息队列及根据预处理后负载数据的维度信息对预处理后负载数据进行分类存储;根据当前待分析指标从至少一个主题的消息队列存储的预处理后负载数据中获取与目标维度对应的第一数据;将第一数据输入至目标时间序列模型,以输出得到与目标维度对应的预测负载数据,将第一数据输入至目标随机森林分类模型,以输出得到与目标维度对应的安全状态评分。本申请基于消息队列的特点对传统信息收集存储技术进行改进,解决了传统技术开销大、响应慢以及IO量不均衡的问题。
技术关键词
集群数据处理方法 时间序列模型 随机森林 时序依赖关系 编码模块 训练集 队列 主题 收集存储技术 消息 注意力 数据收集模块 数据抽样 指标 数据存储模块 模式 数据处理装置 数据获取模块 数据处理模块