摘要
本发明涉及一种基于自动化采集的油价数据实时入库方法,包括:实时动态确定目标网站的油价信息页面,并解析油价信息页面的页面编码格式,以及基于页面编码格式解析油价信息页面,并将油价信息页面转换为文档对象模型树;根据文档对象模型树,获取油价信息页面中的油价相关信息的原始文本内容,并对原始文本内容进行数据清洗,得到清洗后的数据;将清洗后的数据及其对应的采集时间的时间戳进行绑定,得到带有时间戳标记的油价数据;将带有时间戳标记的油价数据存储至数据库,相比于现有技术,其不仅能够提高入库效率,还能够有效降低数据存储错误率。