文章目录
Azkaban简单介绍
一、Azkaban特点
二、Azkaban组成结构
三、Azkaban部署模式
1、solo-server ode(独立服务器模式)
2、two server mode(双服务器模式)
3、distributed multiple-executor mode(分布式多执行器模式)
Azkaban简单介绍
一、Azkaban特点
Azkaban通过作业的依赖性解决业务调度顺序,并提供易于使用的UI界面来维护和跟踪工作流程,其主要特点如下:
- 兼容任何版本的Hadoop;
- 易于使用的Web UI界面;
- 简单的Web和Http工作流上传;
- 支持工作流定时调度;
- 支持模块化和可插入;
- 支持身份验证和授权;
- 支持用户操作跟踪;
- 提供有关失败和成功的电子邮件提醒;
- 提供SLA警报和自动查杀功能。
二、Azkaban组成结构
Azkaban工作流管理器由三个核心部分组成,分别是Relational Database(关系型数据库MySQL)、AzkabanWebServer(Web服务器)、AzkabanExecutorServer(执行服务器)。三者关系具体如图所示。
三、Azkaban部署模式
1、solo-server ode(独立服务器模式)
在独立服务器模式下,使用的数据库是内嵌的H2,并且web server和executor server都在同一进程中运行,通常适用于小规模测试阶段。
2、two server mode(双服务器模式)
双服务器模式适用于比较复杂的生产环境,它的数据库会由具有主从设置的MySQL实例提供支持。其中,Web服务器和执行服务器应在不同的进程中运行,以便升级和维护过程中不影响用户。
3、distributed multiple-executor mode(分布式多执行器模式)
分布式多执行器模式适用于特别复杂的生产环境,理想情况下,Web服务器和执行服务器应在不同的主机中运行,以便升级和维护不影响用户。这种分布式多主机设置的模式为Azkaban带来了强大且可扩展的性能。
- 📢博客主页:https://lansonli.blog.csdn.net
- 📢欢迎点赞 👍 收藏 ⭐留言 📝 如有错误敬请指正!
- 📢本文由 Lansonli 原创,首发于 CSDN博客🙉
- 📢停下休息的时候不要忘了别人还在奔跑,希望大家抓紧时间学习,全力奔赴更美好的生活✨