摘要：
1 下载Sqoop 下载地址：https://archive.apache.org/dist/sqoop/ 2 安装Sqoop 将Sqoop包上传，这里使用了Xftp 进入Sqoop安装包目录，安装 tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz 为了方 阅读全文
posted @ 2023-04-08 18:18
来个煎饼
阅读(888)
评论(0)
推荐(0)
摘要：
进入Hive元存储数据库，这里为MySQL 修改字段注释字符集 alter table COLUMNS_V2 modify column COMMENT varchar(256) character set utf8; 修改表注释字符集 alter table TABLE_PARAMS modify 阅读全文
posted @ 2023-04-07 20:20
来个煎饼
阅读(304)
评论(0)
推荐(0)
摘要：
0 准备工作 启动了Hadoop 启动了Hive元存储数据库 1 开启Hive远程连接服务 nohup hiveserver2 1>/dev/null 2>&1 & nohup：用户即使退出，程序也会在后台运行 1：标准输出 2：错误输出 /dev/null：Linux中的黑洞,表示不存储信息 &： 阅读全文
posted @ 2023-04-07 17:54
来个煎饼
阅读(209)
评论(0)
推荐(0)
摘要：
解决方法： 在hadoop配置文件core-site.xml添加，将root替换为你的用户名 使用通配符值 * 来允许来自任何主机或任何用户的模拟。例如，通过在core-site.xml中指定如下，从任何主机访问的名为 oozie 的用户都可以模拟属于任何组的任何用户。 <property> <na 阅读全文
posted @ 2023-04-06 20:55
来个煎饼
阅读(413)
评论(0)
推荐(0)
摘要：
0 准备工作 搭建Hadoop完全分布式集群：Hadoop完全分布式集群搭建 下载安装MySQL：CentOS7 MySQL安装 1 下载Hive Hive官网：https://hive.apache.org/general/downloads/ 找到适配自己Hadoop版本的Hive 找到后进入下 阅读全文
posted @ 2023-04-06 18:31
来个煎饼
阅读(118)
评论(0)
推荐(0)
摘要：
1 备份 mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.backup 2 下载新的 CentOS-Base.repo 到 /etc/yum.repos.d/ CentOS 6 curl -o /etc/y 阅读全文
posted @ 2023-04-06 16:07
来个煎饼
阅读(43)
评论(0)
推荐(0)
摘要：
DLLs：python的动态链接库，跟编译器有关，和python 编程关系不大。 Doc：python的参考书，有很多实例。 lnclude：python编译器的C语言源码。 Lib：这个库很重要，是python的标准库，你扩充的库都安装在这里面。 libs：python的内置库，语法存在的地方。 阅读全文
posted @ 2023-04-06 15:35
来个煎饼
阅读(139)
评论(0)
推荐(0)
摘要：
Namenode默认端口： | 端口 | 介绍 | | | | | 9820 | NameNode默认的内部端口 | | 9870 | NameNode的web访问（http访问）端口 | | 9871 | NameNode的web访问（https访问）端口 | Secondary Namenode 阅读全文
posted @ 2023-04-06 15:31
来个煎饼
阅读(257)
评论(0)
推荐(0)
摘要：
1 检查当前系统中是否已安装JDK yum list installed | grep java 2 卸载Java，若未检测出jdk则跳过 yum remove 检测出的包 3 安装JDK 3.1 选择到jdk官网上下载你想要的jdk版本。 下载地址：https://www.oracle.com/j 阅读全文
posted @ 2023-04-06 15:20
来个煎饼
阅读(408)
评论(0)
推荐(0)
摘要：
0 准备工作 首先需要准备三台虚拟机：CentOS7下载安装 三台虚拟机都配置了静态IP：CentOS7 静态IP配置 三台虚拟机都关闭了防火墙，且设置了开机不自启：CentOS7 防火墙操作 三台虚拟机都配置了IP-主机名映射：CentOS7 配置IP-主机名映射 三台虚拟机都配置了ssh免密登录 阅读全文
posted @ 2023-04-06 15:07
来个煎饼
阅读(183)
评论(0)
推荐(0)
浙公网安备 33010602011771号