随笔分类 -  ETL工具

Kettle的安装及简单使用
摘要：Kettle的安装及简单使用 目录Kettle的安装及简单使用一、kettle概述二、kettle安装部署和使用Windows下安装案例1：MySQL to MySQL案例2：使用作业执行上述转换，并且额外在表stu2中添加一条数据案例3：将hive表的数据输出到hdfs案例4：读取hdfs文件并将 阅读全文
posted @ 2021-10-24 22:22 lmandcc 阅读(4242) 评论(0) 推荐(1)
Flume的安装及使用
摘要：Flume的安装及使用 Flume的安装 1、上传至虚拟机，并解压 tar -zxvf apache-flume-1.9.0-bin.tar.gz -C /usr/local/soft/ 在环境变量中增加如下命令，可以使用 soft 快速切换到 /usr/local/soft alias soft= 阅读全文
posted @ 2021-10-22 21:51 lmandcc 阅读(1074) 评论(0) 推荐(0)
FlinkX的安装与简单使用
摘要：FlinkX的安装与简单使用 FlinkX的安装 安装unzip：yum install unzip 1、上传并解压 unzip flinkx-1.10.zip -d /usr/local/soft/ 2、配置环境变量 3、给bin/flinkx这个文件加上执行权限 chmod a+x flinkx 阅读全文
posted @ 2021-10-21 21:57 lmandcc 阅读(1245) 评论(0) 推荐(0)
DataX的安装及使用
摘要：DataX的安装及使用 DataX的安装 DataX不需要依赖其他服务，直接上传、解压、安装、配置环境变量即可 也可以直接在windows上解压 DataX的使用 stream2stream 编写配置文件stream2stream.json # stream2stream.json { "job": 阅读全文
posted @ 2021-10-21 21:55 lmandcc 阅读(348) 评论(0) 推荐(0)
Sqoop
摘要：SQOOP安装及使用 SQOOP安装 1、上传并解压 tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /usr/local/soft/ 2、修改文件夹名字 mv sqoop-1.4.7.bin__hadoop-2.6.0/ sqoop-1.4.7 阅读全文
posted @ 2021-10-19 20:04 lmandcc 阅读(348) 评论(0) 推荐(0)