摘要: 1)配置bash文件时出错,想要改正时报错 终端输入:export PATH=/bin:/usr/bin:$PATH 2)linux配置环境变量操作失误出现:/usr/libexec/grepconf.sh: line 5: grep: command not found 的解决办法: 出现原因:错 阅读全文
posted @ 2023-03-02 23:39 千帆万木春 阅读(111) 评论(0) 推荐(0)
摘要: Hadoop全分布 一,网络配置 1) 修改当前机器名称 [root@VM-M-01598231825725 ~]# hostnamectl set-hostname master(master为自定义) [root@VM-M-01598231825725 ~]# bash 可以看到主机名称已变更为 阅读全文
posted @ 2022-05-24 08:19 千帆万木春 阅读(221) 评论(0) 推荐(0)
摘要: Spark搭建与应用 一:安装scala 1)解压scala-2.11.8.tgz到 /usr/local/src目录下 master机器: [root@master ~]# tar -zxvf /opt/software/scala-2.11.8.tgz -C /usr/local/src/ 2) 阅读全文
posted @ 2022-05-22 21:28 千帆万木春 阅读(84) 评论(0) 推荐(0)
摘要: Flume组件部署及应用 一:Flume组件部署 1)解压flume安装包到“/usr/local/src”路径,并修改解压后文件夹名为flume [root@master ~]# tar -zxvf /opt/software/apache-flume-1.6.0-bin.tar.gz -C /u 阅读全文
posted @ 2022-05-20 08:12 千帆万木春 阅读(84) 评论(0) 推荐(0)
摘要: [hadoop@master ~]$ cd /usr/local/src/hive/conf/ [hadoop@master conf]$ vi hive-site.xml #打开文档后输入i进入插入模式,添加如下配置 <?xml version="1.0" encoding="UTF-8" sta 阅读全文
posted @ 2022-05-19 12:58 千帆万木春 阅读(57) 评论(0) 推荐(0)
摘要: 配置hive的环境变量 命令 vim /etc/profile 命令 export HIVE_HOME=/usr/local/hive 命令 export PATH=$PATH:$HIVE_HOME/bin 配置完环境变量后使用命令让它生效 命令 source /etc/profile 第三步检验环 阅读全文
posted @ 2022-05-18 07:56 千帆万木春 阅读(137) 评论(0) 推荐(0)
摘要: Flume组件部署及应用 一:Flume组件部署 1)解压flume安装包到“/usr/local/src”路径,并修改解压后文件夹名为flume [root@master ~]# tar -zxvf /opt/software/apache-flume-1.6.0-bin.tar.gz -C /u 阅读全文
posted @ 2022-04-18 23:33 千帆万木春 阅读(31) 评论(0) 推荐(0)
摘要: spark 1)解压spark安装包到/usr/local/src/目录,并改名为spark master机器: [root@master ~]# tar -zxvf /opt/software/spark-2.0.0-bin-hadoop2.6.tgz -C /usr/local/src [roo 阅读全文
posted @ 2022-04-17 23:22 千帆万木春 阅读(56) 评论(0) 推荐(0)
摘要: 一:安装scala 1)解压scala-2.11.8.tgz到 /usr/local/src目录下 master机器: [root@master ~]# tar -zxvf /opt/software/scala-2.11.8.tgz -C /usr/local/src/ 2)更换目录名 maste 阅读全文
posted @ 2022-04-16 23:20 千帆万木春 阅读(44) 评论(0) 推荐(0)
摘要: 四:在Master节点上安装hadoop 1)解压缩到/usr/local/src目录下 master机器: [root@master ~]# rm -r -f /usr/local/src/hadoop [root@master ~]# tar -zxvf /opt/software/hadoop 阅读全文
posted @ 2022-04-13 23:16 千帆万木春 阅读(57) 评论(0) 推荐(0)