一种基于大数据处理自更新去冗余的人工智能公共数据平台

本发明涉及一种基于大数据处理自更新去冗余方法及其人工智能公共数据平台；所述方法包括：针对和该待存储数据的数据类型相同的每个数据条目，基于和该其对应的稀疏特征矩阵和该待存储数据的稀疏特征矩阵进行比较以得到该公共数据平台中的待确定数据的数据条目；基于该待存储数据的稀疏特征矩阵进行特征值补全以得到完整特征补全矩阵；比较该特征补全矩阵和该待确定数据的特征矩阵以确定是否进行自更新去冗余。本发明适用于大数据处理，利用人工智能技术，将数据内容比较转换为特征值的比较，在不降低去冗余准确性的基础上大大的提高了自更新去冗余的处理效率。