06 2023 档案

Sqoop 应用 利用Sqoop导数
摘要：本文参考链接：Sqoop基本原理及常用方法 本文中的案例 Sqoop版本为：sqoop-1.4.6 sqoop-1.4.7有点问题 一、Sqoop基本原理 1.1、何为Sqoop？ Sqoop(SQL-to-Hadoop)是一款开源的工具，主要用于在Hadoop(Hive)与传统的数据库(mysql 阅读全文
posted @ 2023-06-28 16:51 KwFruit 阅读(98) 评论(0) 推荐(0)
Sqoop 安装配置
摘要：1.下载 Sqoop 安装包下载地址：Sqoop 官网 选择自己集群合适的版本。 2.解压 tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz 改个名称： mv sqoop-1.4.7.bin__hadoop-2.6.0 sqoop-1.4.7 3.添加环境 阅读全文
posted @ 2023-06-27 15:36 KwFruit 阅读(111) 评论(0) 推荐(0)
Hive3.1.3集群安装
摘要：一、安装mysql Hive默认的Derby数据库一次只能打开一个会话，不支持多用户并发访问，需要替换Hive的存储引擎为mysql 1. 下载mysql安装包 wget http://dev.mysql.com/get/mysql57-community-release-el7-7.noarch. 阅读全文
posted @ 2023-06-27 11:33 KwFruit 阅读(501) 评论(0) 推荐(0)
大数据 Hadoop 集群安装
摘要：一、集群配置信息 二、克隆相关主机，以及初始化主机名及IP 链接：https://www.cnblogs.com/mangoubiubiu/p/17364337.html 配置Hosts vi /etc/hosts 192.168.117.120 hadoop120 192.168.117.121 阅读全文
posted @ 2023-06-18 14:01 KwFruit 阅读(79) 评论(0) 推荐(0)