文章分类 -  Azkaban

Azkaban3.72.1 web模块本地调试及web端接口统计
摘要:后面要做数据平台的调度系统,这两天在研究开源的调度工具。 为了方便后面的二次开发,我开始azkaban本地调试,来熟悉azkaban的逻辑和统计web端接口的工作。 https://github.com/azkaban/azkaban 2. 为azkaban创建专属的用户和库 https://www 阅读全文

posted @ 2019-05-13 10:38 YOOC 阅读(882) 评论(0) 推荐(0)

Azkaban源码分析2-----项目的创建和提交
摘要:1.创建、提交项目 Azkaban的项目都是打包成zip文件上传到web页面上的,其实项目和工作流的信息都是存储在Mysql数据库中的 在上传zip文件时,azkaban会对上传的文件进行解压缩,然后分析各个job组成的工作流并且申城DAG图 具体的工作流程: azkaban.project.Dir 阅读全文

posted @ 2019-01-02 11:34 YOOC 阅读(635) 评论(0) 推荐(0)

Azkaban源码分析1----日志保存和获取
摘要:Azkaban是一个JavaWeb项目,源码阅读难度相对不大本篇主要介绍Azkaban的日志保存和获取。 闲话不说直接正文!!!!! 阅读源码第一步,找到入口类: Azkaban是一个gradlew项目,从github下载好源码导入idea中,目录为: azkaban-web-server:里面主要 阅读全文

posted @ 2018-12-24 09:37 YOOC 阅读(3214) 评论(0) 推荐(0)

Azkaban的插件安装
摘要:配置编译环境 1.ant 下载地址:https://ant.apache.org/bindownload.cgi 执行解压命令安装到 /usr/local 目录下: tar -zxvf apache-ant-1.9.13-bin.tar.gz -C /usr/local 重命名: mv apache 阅读全文

posted @ 2018-12-10 10:12 YOOC 阅读(1208) 评论(0) 推荐(0)

Azkaban3.x部署
摘要:Azkaban3.x版本部署 ## **下载资料** 从Azkaban的官网下载资料 第一步:cd 到需要安装的目录。 第二步: 执行 git clone https://github.com/azkaban/azkaban.git (克隆日期为2018年11月27号版本为3.6.2),将azkab 阅读全文

posted @ 2018-12-09 22:17 YOOC 阅读(657) 评论(0) 推荐(0)

导航