当前位置 : 主页 > 编程语言 > 其它开发 >

Azkaban概述

来源:互联网 收集:自由互联 发布时间:2022-07-14
1、Azkaban特点 兼容任何版本的hadoop 易于使用的Web用户界面 简单的工作流的上传 方便设置任务之间的关系 调度工作流 模块化和可插拔的插件机制 认证/授权(权限的工作) 能够杀死并重新
1、Azkaban特点
  1. 兼容任何版本的hadoop  
  1. 易于使用的Web用户界面  
  1. 简单的工作流的上传  
  1. 方便设置任务之间的关系  
  1. 调度工作流  
  1. 模块化和可插拔的插件机制  
  1. 认证/授权(权限的工作)  
  1. 能够杀死并重新启动工作流  
  1. 有关失败和成功的电子邮件提醒
  2、Azkaban的架构 Azkaban由三个关键组件构成:
  • AzkabanWebServer:AzkabanWebServer是整个Azkaban工作流系统的主要管理者,它用户登录认证、负责project管理、定时执行工作流、跟踪工作流执行进度等一系列任务。  
  • AzkabanExecutorServer:负责具体的工作流的提交、执行,它们通过mysql数据库来协调任务的执行。  
  • 关系型数据库(MySQL):存储大部分执行流状态,AzkabanWebServer和AzkabanExecutorServer都需要访问数据库。
【本文由:香港云服务器 http://www.558idc.com/ne.html网络转载请说明出处】
网友评论