随笔分类 -  DataX

使用datax将postgresql或者greenplum中的数据同步到elasticsearch
摘要:1、使用datax工具将postgresql或者greenplum数据库中的数据同步到elasticsearch中。DataX目前已经有了比较全面的插件体系,主流的RDBMS数据库、NOSQL、大数据计算系统都已经接入,目前支持数据如下图: 类型数据源Reader(读)Writer(写)文档 RDB 阅读全文
posted @ 2021-02-06 16:55 别先生 阅读(1423) 评论(1) 推荐(0)
使用datax将mysql数据同步到ES 附elasticsearchwriter插件
摘要:1、使用datax工具将mysql数据库中的数据同步到elasticsearch中。DataX目前已经有了比较全面的插件体系,主流的RDBMS数据库、NOSQL、大数据计算系统都已经接入,目前支持数据如下图: 类型数据源Reader(读)Writer(写)文档 RDBMS 关系型数据库 MySQL 阅读全文
posted @ 2021-01-09 16:56 别先生 阅读(2562) 评论(0) 推荐(0)
datax的安装与使用
摘要:1、官网下载地址:https://github.com/alibaba/DataX DataX 是阿里巴巴集团内被广泛使用的离线数据同步工具/平台,实现包括 MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxC 阅读全文
posted @ 2020-07-17 20:47 别先生 阅读(12397) 评论(1) 推荐(1)