随笔分类 -  ETL工具

flume安装及使用
摘要：Flume的安装及使用 Flume的安装 1、上传至虚拟机，并解压 tar -zxvf apache-flume-1.9.0-bin.tar.gz -C /usr/local/soft/ 在环境变量中增加如下命令，可以使用 soft 快速切换到 /usr/local/soft alias soft= 阅读全文
posted @ 2021-10-22 20:08 钟心意 阅读(169) 评论(0) 推荐(0)
FlinkX安装及使用
摘要：FlinkX的安装与简单使用 FlinkX的安装 安装unzip：yum install unzip 1、上传并解压 unzip flinkx-1.10.zip -d /usr/local/soft/ 2、配置环境变量 3、给bin/flinkx这个文件加上执行权限 chmod a+x flinkx 阅读全文
posted @ 2021-10-21 22:55 钟心意 阅读(807) 评论(0) 推荐(0)
DataX安装及使用
摘要：DataX的安装及使用 DataX的安装 DataX不需要依赖其他服务，直接上传、解压、安装、配置环境变量即可 也可以直接在windows上解压 DataX的使用 stream2stream 编写配置文件stream2stream.json # stream2stream.json { "job": 阅读全文
posted @ 2021-10-21 21:13 钟心意 阅读(340) 评论(0) 推荐(0)
SQOOP的安装和使用
摘要：SQOOP安装及使用 SQOOP安装 1、上传并解压 tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /usr/local/soft/ 2、修改文件夹名字 mv sqoop-1.4.7.bin__hadoop-2.6.0/ sqoop-1.4.7 阅读全文
posted @ 2021-10-20 15:05 钟心意 阅读(263) 评论(0) 推荐(0)