一种基于大数据的人工智能数据聚合方法

AITNT-国内领先的一站式人工智能新闻资讯网站
# 热门搜索 #
一种基于大数据的人工智能数据聚合方法
申请号:CN202510196519
申请日期:2025-02-21
公开号:CN119690974B
公开日期:2025-04-18
类型:发明专利
摘要
本发明涉及数据处理技术领域,具体为一种基于大数据的人工智能数据聚合方法,包括以下步骤:收集交通监控原始数据,通过数据清洗和预处理,移除重复数据和修正错误数据,生成初步清洗数据;对所述初步清洗数据应用动态索引调整,根据数据项的访问频率和类型,动态调整索引树的深度和分支,得到优化后索引数据。本发明中,在动态索引调整过程中,根据数据访问频率和类型动态优化索引树结构,提高了高频数据的检索效率,并降低低频数据的存储开销。层次化数据压缩将数据分层处理,通过轻量级压缩和高级压缩算法相结合的方式大幅减少存储空间的使用,为大规模数据处理奠定了基础。
技术关键词
人工智能数据 数据存储结构 数据访问模式 索引 大数据 交通监控 频率 分层 查询算法 构建机器学习模型 压缩算法 节点 数据分类 数据压缩技术 分支 多维特征向量 存储设备