随笔分类 -  DolphinScheduler

摘要:1.添加每个表 2.进行初始化: (1)将where条件,和sql前置踢出复制,sql前置用truncate table (2)弄完之后运行一遍。 (3)运行完成后,源系统数据与部门数据库进行数据核对,核对不成功的去查看原因。 3.完成后核对后把where条件添加回来,sql前置也添加回来,在跑一遍 阅读全文
posted @ 2022-09-01 19:15 小王同学学编程 阅读(144) 评论(0) 推荐(0)
摘要:1.综述 SQL任务类型,用于连接数据库并执行相应SQL 2.创建数据源 3.创建任务 点击项目管理-项目名称-工作流定义,点击“创建工作流”按钮,进入DAG编辑页面。 工作栏拖动SQL到画板中,选择需要连接的数据源,即可完成创建。 4.任务参数 数据源:选择对应的数据源。 sql类型:支持查询和非 阅读全文
posted @ 2022-08-21 17:57 小王同学学编程 阅读(1329) 评论(0) 推荐(0)
摘要:一、项目管理 1.创建项目 2.项目首页 任务状态统计:在指定时间范围内,统计任务实例中状态为提交成功、正在运行、准备暂停、暂停、准备停止、停止、失败、成功、需要容错、kill、等待线程的个数 流程状态统计:在指定时间范围内,统计工作流实例中状态为提交成功、正在运行、准备暂停、暂停、准备停止、停止、 阅读全文
posted @ 2022-08-21 16:07 小王同学学编程 阅读(428) 评论(0) 推荐(0)
摘要:Apache DolphinScheduler 是一个分布式易扩展的可视化DAG工作流任务调度开源系统。适用于企业级场景,提供了一个可视化操作任务、工作流和全生命周期数据处理过程的解决方案。 DolphinScheduler 以 DAG(Directed Acyclic Graph,DAG)流式方式 阅读全文
posted @ 2022-08-21 11:39 小王同学学编程 阅读(221) 评论(0) 推荐(0)

levels of contents