低代码、可视化拖拽
云原生大数据工作流调度

数据调度平台 WhaleScheduler
低代码、可视化拖拽
云原生大数据工作流调度

描述
数十种工作组件满足全生态数据调度场景
数百万任务同时在线   秒级任务高达10万并发
去中心化的多Master多Worker机制,保证了极高的稳定性和性能。可对调用的资源进行控制和分配,利用多租户机制,实现任务之间的并行度控制、资源控制、用户资源限制等诸多功能。
为什么选择WhaleScheduler
全生态调度
支持数十种工作组件的全生态的数据调度,同时可灵活进行版本控制,帮助用户针对任意单次运行的流程进行调整,不影响原有模板的设计流程。
描述
全模式DAG开发
提供全模式DAG开发能力,可以使用IDE、低代码、python代码、Excel导入编排工作流任务,快速整合内部使用者和开发者的开发使用流程。
描述
全研发链路管理
支持自动化的CI/CD流程,同时支持本地文件上传与跨环境打包部署,帮助企业快速适配DataOps流程,实现开发、测试、部署的整体流程提效。
描述
云原生与批流一体
支持公有云、私有云和混合云,支持云原生,支持传统数据仓库,支持开源的数据湖,同时支持批流任务同时管理,让企业用户实现数据湖、数据仓库、云的一体化调度。
描述
复杂工作流运行管理
拥有强大的容错机制和工作流运行管理以保障数据质量,极大程度的解放人力,让运维人员事半功倍的快速处理各种复杂场景。
描述
丰富的时间管理
支持自定义多种业务日历与切日时间管理,满足企业多部门间的协同使用场景。
描述
全生态调度
支持数十种工作组件的全生态的数据调度,同时可灵活进行版本控制,帮助用户针对任意单次运行的流程进行调整,不影响原有模板的设计流程。
全模式DAG开发
提供全模式DAG开发能力,可以使用IDE、低代码、python代码、Excel导入编排工作流任务,快速整合内部使用者和开发者的开发使用流程。
全研发链路管理
支持自动化的CI/CD流程,同时支持本地文件上传与跨环境打包部署,帮助企业快速适配DataOps流程,实现开发、测试、部署的整体流程提效。
云原生与批流一体
支持公有云、私有云和混合云,支持云原生,支持传统数据仓库,支持开源的数据湖,同时支持批流任务同时管理,让企业用户实现数据湖、数据仓库、云的一体化调度。
复杂工作流运行管理
拥有强大的容错机制和工作流运行管理以保障数据质量,极大程度的解放人力,让运维人员事半功倍的快速处理各种复杂场景。
丰富的时间管理
支持自定义多种业务日历与切日时间管理,满足企业多部门间的协同使用场景。
始于开源  但远未止步
描述
Apache DolphinScheduler 于2021年成为Apache软件基金会孵化器的顶级项目,是业界知名的分布式易扩展的,可视化大数据工作流调度系统。社区保持高活跃度,当前已有500+贡献者,近万star数,500+PR数和9000+ commits,并在 1000+ 家公司的生产环境上稳定运行。
Apache DolphinScheduler
WhaleScheduler 完美继承了 DolphinScheduler 所有的功能和强大的易用性, 针对行业客户增加了企业级产品功能并加强系统安全与稳定性,支持数据库、云、大数据、AI组件等数十种系统的任务调度。
DolphinScheduler  VS  WhaleScheduler
功能对比
DolphinScheduler
开源版
调度功能
批量工作流管理
开源数据处理组件 DataX, Sqoop, SeaTunnel 
支持组件
UI 拖拽,Python 生成工作流
数据质量管理 Alpha 版
运行调试
工作流重跑、暂停、停止等功能
Ops功能
权限审计
仅支持用户、租户级别控制
简单的审计日志
安全漏洞
无专业支持,Bug 自助发现、修改 、贡献
信创支持
不支持
性能
依赖社区发现处理
支持百万级任务,比 Airflow 等调度快 5 倍
不支持
服务支持
不支持
稳定性
运维
WhaleScheduler
企业版
调度功能
批量工作流管理
基于 IDE 的 SQL 血缘分析,工作流血缘
条件触发任务
工作流支持业务日期调度
自定义日历与切日管理
支持组件
支持 SQL 等语言的 IDE 云端开发与统一调试
开源组件 与 Informatica 等传统 ETL 工具
开源大数据组件 与 传统数据仓库等(例如 Teradata 与 Greenplum)
UI 拖拽,Python 生成工作流
Excel 导入生成工作流和任务
数据质量管理
运行调试
工作流重跑、暂停、停止等功能外,还支持丰富的运行态管理,例如对任务隔离,对任务优先加权等
绝对时间工作流基线告警
多环境导入导出部署上线
Ops功能
与 GitHub/GitLab 等打通进行开发、测试、生产等环境一体化 Ops 管理
权限审计
基于角色的权限中心设计,支持资源、角色、用户和租户对接企业内部系统
 金融级别审计日志
安全漏洞
安全漏洞第三方检测,金融级漏洞修复
工业级别测试修改,确保质量
信创支持
支持信创环境,例如,麒麟v10、TDSQL、达梦等
性能
经过专业的测试人员测试,所有的 Bug 都被修复
商业版经过了 8000+ 小时的疲劳和稳定验证,修复了重要的内存泄露和稳定性的问题,保证商业版本的稳定运行
在开源基础上进行了系统级改进,完善了任务处理机制,提升任务并行量数十倍
服务支持
 提供丰富的系统指标监控
商业专业安装部署&调试、版本升级、支持服务,商业级别答疑 & 培训
提供完善售后服务,7x24 小时的技术支持服务
稳定性
运维
工作流、IDE 脚本多个层级开发调试
开源版
DolphinScheduler
批量工作流管理
调度功能
支持组件
开源数据处理组件DataX,Sqoop,SeaTunnel

UI拖拽,Python生成工作流

数据质量管理Alpha版
运行调试
工作流重跑、暂停、停止等功能
Ops功能
权限审计
仅支持用户、租户级别控制

简单的审计日志
安全漏洞
无专业支持,Bug自助发现、修改、贡献
信创支持
不支持
性能
支持百万级任务,比Airflow等调度快5倍
稳定性
依赖社区发现处理
运维
不支持
服务支持
不支持
企业版
WhaleScheduler
调度功能
批量工作流管理

基于IDE的SQL血缘分析,工作流血缘

条件出发任务

工作流支持业务日期调度

自定义日期与切日管理
支持组件
支持SQL等语言的IDE云端开发与统一调试

开源组件与Informatica等传统ETL工具

开源大数据组件 与 传统数据仓库等(例如Teradata 与 Greenplum)

UI拖拽,Python生成工作流

Excel导入生成工作流和任务

数据质量管理
运行调试
工作流重跑、暂停、停止等功能外,还支持丰富的运行态管理,例如对任务隔离,对任务优先加权等

绝对时间工作流基线告警

多环境导入导出部署上线

工作流、IDE脚本多个层级开发调试
Ops功能
与GitHub/GitLab等打通进行开发、测试、生产等环境一体化Ops管理
权限审计
基于角色的权限中心设计,支持资源、角色、用户和租户对接企业内部系统

金融级别审计日志
安全漏洞
安全漏洞第三方检测,金融级别漏洞修复

工业级别测试修改,确保质量
信创支持
支持信创环境,例如,麒麟v10、TDSQL、达梦等
性能
在开源基础上进行了系统级改进,完善了任务处理机制,提升任务并行量数十倍
稳定性
经过专业的测试人员测试,所有的Bug都被修复

商业版经过了 8000+ 小时的疲劳和稳定验证,修复了重要的内存泄露和稳定性的问题,保证商业版本的稳定运行
运维
提供丰富的系统指标监控
服务支持
商业专业安装部署&调试、版本升级、支持服务,商业级别答疑 & 培训

提供完善善后服务,7x24 小时的技术支持服务
描述
请扫描企业微信二维码
描述
即刻体验
WhaleScheduler数据调度平台
获取产品白皮书
预约产品演示
描述
请扫描企业微信二维码
描述
描述
获取产品白皮书
预约产品演示
即刻体验
WhaleScheduler数据调度平台