摘要
本发明涉及数据处理技术领域,具体为一种基于大数据的人工智能数据聚合方法,包括以下步骤:收集交通监控原始数据,通过数据清洗和预处理,移除重复数据和修正错误数据,生成初步清洗数据;对所述初步清洗数据应用动态索引调整,根据数据项的访问频率和类型,动态调整索引树的深度和分支,得到优化后索引数据。本发明中,在动态索引调整过程中,根据数据访问频率和类型动态优化索引树结构,提高了高频数据的检索效率,并降低低频数据的存储开销。层次化数据压缩将数据分层处理,通过轻量级压缩和高级压缩算法相结合的方式大幅减少存储空间的使用,为大规模数据处理奠定了基础。