2019年9月17日

Traefik 2.0 发布了

摘要: Traefik 2.0 发布了,包含了很多不错的行特性 tcp 路由(同时也支持sni 路由) 参考配置 tcp: routers: to-db-1: entrypoints: - web-secure rule: "HostSNI(`db1.domain`)" service: "db1" tls 阅读全文

posted @ 2019-09-17 22:36 荣锋亮 阅读(1431) 评论(0) 推荐(0)

cronicle docker 运行试用

摘要: Cronicle 是一款基于nodejs 开发的分布式任务调度工具,包含了比较全的UI,使用也比较简单,为了 方便学习,简单制作了一个docker 镜像,方便使用 Dockerfile FROM node:12.10.0-stretch-slim LABEL AUTHOR="rongfenglian 阅读全文

posted @ 2019-09-17 20:51 荣锋亮 阅读(838) 评论(0) 推荐(0)

Cronicle 基于nodejs 的分布式任务调度工具

摘要: Cronicle 是一款不多的分布式任务调度工具,基于nodejs 开发,同时包含看web UI,从官方介绍看到的UI还是 挺不错的,而且功能很丰富,值得试用下 参考资料 http://cronicle.net/ https://github.com/jhuckaby/Cronicle/ 阅读全文

posted @ 2019-09-17 13:38 荣锋亮 阅读(2342) 评论(0) 推荐(0)

pipelinewise 学习二 创建一个简单的pipeline

摘要: pipelinewise 提供了方便的创建简单pipeline的命令,可以简化pipeline 的创建,同时也可以帮我们学习 生成demo pipeline pipelinewise init --name pipelinewise_samples pipelinewise init --name 阅读全文

posted @ 2019-09-17 13:15 荣锋亮 阅读(736) 评论(0) 推荐(0)

pipelinewise 学习一 docker方式安装

摘要: pipelinewise 没有提供基于pip 包的模式进行安装,而且推荐使用docker 以及源码的方式 以下是一个使用docker运行的方式 安装 git clone https://github.com/transferwise/pipelinewise.git cd ./pipelinewis 阅读全文

posted @ 2019-09-17 10:57 荣锋亮 阅读(273) 评论(0) 推荐(0)

Supercharging your ETL with Airflow and Singer

摘要: 转自:https://www.stitchdata.com/blog/supercharging-etl-with-airflow-and-singer/ singer 团队关于singer 与airflow 集成的文章 Earlier this year we introduced Singer, 阅读全文

posted @ 2019-09-17 10:37 荣锋亮 阅读(537) 评论(0) 推荐(0)

ubuntu中使用 alien安装rpm包

摘要: 我们可以使用alien 在ubuntu中安装rpm 包 使用方法: 安装 alien 安装 apt-get update apt-get install alien apt-get update apt-get install alien apt-get update apt-get install 阅读全文

posted @ 2019-09-17 09:50 荣锋亮 阅读(5995) 评论(0) 推荐(1)

PipelineWise illustrates the power of Singer

摘要: 转自:https://www.stitchdata.com/blog/pipelinewise-singer/ 转自:https://www.stitchdata.com/blog/pipelinewise-singer/ Stitch is based on Singer, an open sou 阅读全文

posted @ 2019-09-17 09:09 荣锋亮 阅读(281) 评论(0) 推荐(0)

pipelinewise 基于singer 指南的的数据pipeline 工具

摘要: pipelinewise 是基于开源singer 指南开发的数据pipeline工具,与singer tap 以及target 兼容 支持的特性 内置的elt 特性 轻量级 支持多种复制方法,cdc(基于log 的)基于key 的增量模式,全量 管理schema的变动 加载时的数据转换(可以方便进行 阅读全文

posted @ 2019-09-17 09:03 荣锋亮 阅读(582) 评论(0) 推荐(0)

导航