一种基于Excel的大数据量导入导出处理方法、系统、设备及介质
申请号:CN202510225649
申请日期:2025-02-27
公开号:CN120067198A
公开日期:2025-05-30
类型:发明专利
摘要
本发明提供一种基于Excel的大数据量导入导出处理方法、系统、设备及介质,属于批量数据处理技术领域,所述方法:对业务系统的用户查询信息进行统计,构建统一查询模型;创建异步数据处理组件,并基于统一查询模型进行封装后添加到业务系统;异步数据处理组件响应基于Excel的数据导入或导出请求,并使用统一查询模型解析用户查询信息,确定目标操作和数据流向,生成目标任务;调度服务接收目标任务启动异步操作,根据目标任务与服务器资源情况对目标任务进行划分,直至目标任务完成向业务系统前端页面反馈。本发明通过构建统一查询模型和异步数据处理组件,实现高效数据处理与合理资源调度,降低成本,保障数据安全,提升用户体验。
技术关键词
异步数据处理
查询模型
业务系统
统一数据结构
数据导入模块
批量数据处理技术
服务器
高效数据处理
任务调度
保障数据安全
校验模块
对象
页面
格式
消息通知
处理器
资源
基础