摘要: sqoop数据迁移 1. 概述 sqoop是apache旗下一款“Hadoop和关系数据库服务器之间传送数据”的工具。 导入数据:MySQL,Oracle导入数据到Hadoop的HDFS、HIVE、HBASE等数据存储系统; 导出数据:从Hadoop的HDFS、HIVE中导出数据到关系数据库mysq 阅读全文
posted @ 2020-11-25 16:32 十一vs十一 阅读(357) 评论(0) 推荐(0)
摘要: 数仓工具 1. 学习目标 能够使用Hue操作HDFS 能够使用Hue操作Hive 理解为什么选择Sqoop 理解Sqoop1和Sqoop2的区别 理解Sqoop抽取数据的两种方式 能够使用Sqoop导入完整数据到HDFS 能够使用Sqoop导入完整数据到Hive 能够使用Sqoop导入条件数据到HD 阅读全文
posted @ 2020-11-25 15:23 十一vs十一 阅读(621) 评论(0) 推荐(0)
摘要: 项目介绍和需求管理 1. 学习目标 了解知行教育大数据的项目背景 了解知行教育大数据的看板划分 了解项目技术架构 了解ClouderaManager的应用场景 掌握ClouderaManager架构 能够使用Vmware虚拟机环境 2. 项目简介 知行教育大数据分析平台,突出的是“真”,此项目是传智 阅读全文
posted @ 2020-11-25 09:39 十一vs十一 阅读(406) 评论(0) 推荐(0)