摘要
本发明提出一种基于统一SQL架构的数据处理调度系统及方法,涉及大数据处理的技术领域,包括:用户编写数据处理任务,将编写好的数据处理任务部署到SQL网关模块或调度模块;调度模块调度记录数据处理任务的执行,将SQL文件传输至SQL语法适配器模块,将算法请求传输至算法请求模块;SQL语法适配器模块对SQL文件进行语法适配,将语法适配后的SQL文件传输至SQL网关模块;SQL网关模块将接收的SQL文件发送到计算引擎中执行,将执行结果输出至存储模块;算法请求模块接收算法请求,调用外部算法对本地数据进行处理,将算法请求结果输出至存储模块。本发明有效降低计算资源浪费,提高开发和运维效率。