随笔分类 -  DataX

DataX案例:读取MongoDB的数据导入MySQL
摘要:读取MongoDB的数据导入MySQL 1)在MySQL中创建表 mysql> create table jason(name varchar(20),url varchar(20)); 2)编写DataX配置文件 [jason@hadoop102 datax]$ vim job/mongodb2m 阅读全文
posted @ 2020-09-14 15:14 架构艺术 阅读(2929) 评论(1) 推荐(0)
DataX案例:读取MongoDB的数据导入到HDFS
摘要:读取MongoDB的数据导入到HDFS 1)编写配置文件 [jason@hadoop102 datax]$ vim job/mongdb2hdfs.json { "job": { "content": [ { "reader": { "name": "mongodbreader", "paramet 阅读全文
posted @ 2020-09-14 15:12 架构艺术 阅读(2560) 评论(0) 推荐(0)
DataX案例:读取Oracle的数据存入HDFS中
摘要:读取Oracle的数据存入HDFS中 1)编写配置文件 [oracle@hadoop102 datax]$ vim job/oracle2hdfs.json { "job": { "content": [ { "reader": { "name": "oraclereader", "paramete 阅读全文
posted @ 2020-09-14 15:10 架构艺术 阅读(859) 评论(0) 推荐(0)
DataX案例:从Oracle中读取数据存到MySQL
摘要:从Oracle中读取数据存到MySQL 1)MySQL中创建表 [oracle@hadoop102 ~]$ mysql -uroot -p000000 mysql> create database oracle; mysql> use oracle; mysql> create table stud 阅读全文
posted @ 2020-09-14 15:07 架构艺术 阅读(655) 评论(0) 推荐(0)
Oracle数据库
摘要:Oracle数据库 以下操作使用root账号。 4.1 oracle数据库简介 Oracle Database,又名Oracle RDBMS,或简称Oracle。是甲骨文公司的一款关系数据库管理系统。它是在数据库领域一直处于领先地位的产品。可以说Oracle数据库系统是目前世界上流行的关系数据库管理 阅读全文
posted @ 2020-09-14 15:02 架构艺术 阅读(264) 评论(0) 推荐(0)
DataX案例:从stream流读取数据并打印到控制台
摘要:从stream流读取数据并打印到控制台 1)查看配置模板 [jason@hadoop102 bin]$ python datax.py -r streamreader -w streamwriter DataX (DATAX-OPENSOURCE-3.0), From Alibaba ! Copyr 阅读全文
posted @ 2020-09-14 10:29 架构艺术 阅读(2257) 评论(0) 推荐(0)
DataX基础与安装
摘要:第1章 概述 1.1 什么是DataX ​ DataX 是阿里巴巴开源的一个异构数据源离线同步工具,致力于实现包括关系型数据库(MySQL、Oracle等)、HDFS、Hive、ODPS、HBase、FTP等各种异构数据源之间稳定高效的数据同步功能。 1.2 DataX的设计 为了解决异构数据源同步 阅读全文
posted @ 2020-09-09 18:21 架构艺术 阅读(192) 评论(0) 推荐(0)