……

文章分类 -  airflow

任务调度
airFlow
摘要:https://pan.baidu.com/s/10II0njHuy8dSQYxfXl-iqA 阅读全文
posted @ 2020-06-03 18:15 大码王 阅读(126) 评论(0) 推荐(0) 编辑
airflow实战总结
摘要:airflow 介绍 airflow是一款开源的,分布式任务调度框架,它将一个具有上下级依赖关系的工作流,组装成一个有向无环图。 特点: 分布式任务调度:允许一个工作流的task在多台worker上同时执行 可构建任务依赖:以有向无环图的方式构建任务依赖关系 task原子性:工作流上每个task都是 阅读全文
posted @ 2020-05-20 14:44 大码王 阅读(986) 评论(0) 推荐(0) 编辑
Airflow实战
摘要:1. 安装及初始化 # airflow needs a home, ~/airflow is the default, # but you can lay foundation somewhere else if you prefer # (optional) export AIRFLOW_HOME 阅读全文
posted @ 2020-05-20 14:43 大码王 阅读(272) 评论(0) 推荐(0) 编辑
​ Airflow入门介绍
摘要:1, 简介 ​ Airflow是一个可编程,调度和监控的工作流平台,基于有向无环图(DAG),airflow可以定义一组有依赖的任务,按照依赖依次执行。airflow提供了丰富的命令行工具用于系统管控,而其web管理界面同样也可以方便的管控调度任务,并且对任务运行状态进行实时监控,方便了系统的运维和 阅读全文
posted @ 2020-05-20 14:38 大码王 阅读(492) 评论(0) 推荐(0) 编辑

复制代码