今天阳光很暖
02
24
20
Azkaban 4. 插件安装与开发 Azkaban 4. 插件安装与开发
1. 插件介绍Azkaban 本身是一个工作流调度系统,核心能力是项目管理、任务依赖、任务执行、定时调度、执行日志和权限控制。 但是实际使用中,仅靠内置能力通常不够。例如: 需要支持 Hadoop、Hive、Pig、Spark 等不同类型
2021-02-20
15
Azkaban 3. 授权介绍 Azkaban 3. 授权介绍
1. 授权介绍Azkaban 的授权主要用来控制用户在系统中能做什么事情。 一个调度系统通常不只是自己使用,实际环境中会有开发、测试、运维、数据分析等多类用户。如果所有人都能创建项目、上传任务、执行任务、修改定时调度,就很容易出现误操作。
2021-02-15
10
03
Azkaban 1. 架构介绍 Azkaban 1. 架构介绍
1. Azkaban 介绍Azkaban 是由Linkedin开源的一个批量工作流任务调度器。用于在一个工作流内以一个特定的顺序运行一组工作和流程。Azkaban定义了一种KV文件格式来建立任务之间的依赖关系,并提供一个易于使用的web用户
2021-02-03