DolphinScheduler(可视化工作流任务调度系统) v1.3.5官方版 for Win

软件截图

DolphinScheduler(可视化工作流任务调度系统) v1.3.5官方版更新说明:

• 修复了已知问题

DolphinScheduler(可视化工作流任务调度系统) v1.3.5官方版是一个分布式去中心化、易扩展的可视化DAG工作流任务调度系统。它致力于解决数据处理流程中错综复杂的依赖关系，使调度系统在数据处理流程中开箱即用。该系统具有高可靠性去中心化的多Master和多Worker，自身支持HA功能，采用任务队列来避免过载，不会造成机器卡死，简单易用。

DolphinScheduler还提供了DAG监控界面，所有流程定义都是可视化的，通过拖拽任务定制DAG，通过API方式与第三方系统对接，一键部署丰富的使用场景，支持暂停恢复操作。此外，系统支持多租户，更好地应对大数据的使用场景，同时支持更多的任务类型，如spark、hive、mr、python、sub_process、shell等。

该系统具有高扩展性，支持自定义任务类型，调度器使用分布式调度，调度能力随集群线性增长，Master和Worker支持动态上下线。通过DAG图的方式将Task按照任务的依赖关系关联起来，实时可视化监控任务的运行状态，支持丰富的任务类型，包括Shell、MR、Spark、SQL(mysql、postgresql、hive、sparksql)、Python、Sub_Process、Procedure等。

此外，DolphinScheduler还支持工作流定时调度、依赖调度、手动调度、手动暂停/停止/恢复，同时支持失败重试/告警、从指定节点恢复失败、Kill任务等操作。系统还支持工作流优先级、任务优先级及任务的故障转移及任务超时告警/失败，全局参数设置、节点自定义参数设置等功能。通过Zookeeper实现Master集群和Worker集群去中心化，支持对Master/Worker的cpuload、memory、cpu在线查看，以及工作流运行历史树形/甘特图展示、任务状态统计、流程状态统计等功能。

总的来说，DolphinScheduler是一个功能丰富、易扩展、可视化的工作流任务调度系统，适用于各种复杂的数据处理流程。