01 2021 档案

hadoop集群启动
摘要：1.集群规划 hadoop有三个重要的进程为NN(NameNode)、2NN(SecondaryNameNode)、RM(ResourceManager) 其中由于2NN需要做editlog和fsimage的合并占用的内存空间大致相等，为了性能NN和2NN要再两台机器上。 启动情况如下 hadoop 阅读全文
posted @ 2021-01-23 14:04 爬上巨人的肩膀 阅读(383) 评论(0) 推荐(0)
文件分发脚本
摘要：#!/bin/bash #1 获取输入参数个数，如果没有参数，直接退出 pcount=$# if((pcount==0)); then echo no args; exit; fi #2 获取要分发的文件名称 p1=$1 fname=basename $p1 echo fname=$fname #3 阅读全文
posted @ 2021-01-23 13:55 爬上巨人的肩膀 阅读(87) 评论(0) 推荐(0)
centos7卸载自带jdk并安装jdk1.8
摘要：[root@hadoop103 software]# lshadoop-2.7.2.tar.gz jdk-8u144-linux-x64.tar.gz[root@hadoop103 software]# java -versionopenjdk version "1.8.0_222-ea"OpenJ 阅读全文
posted @ 2021-01-23 12:11 爬上巨人的肩膀 阅读(310) 评论(0) 推荐(0)
source命令详解
摘要：1.souce：在当前bash环境下读取并执行FileName中的命令。 可以在shell启动前加载环境变量 weidiandeMacBook-Pro:myshworkspace weidian$ pwd /Users/weidian/myshworkspace weidiandeMacBook-P 阅读全文
posted @ 2021-01-22 10:15 爬上巨人的肩膀 阅读(998) 评论(0) 推荐(0)
hadoop集群搭建
摘要：1.准备三台虚拟机hadoop102，hadoop103，hadoop104 2.配置网络 查看网关 [root@localhost ~]# traceroute www.baidu.com traceroute to www.baidu.com (180.101.49.12), 30 hops m 阅读全文
posted @ 2021-01-01 16:36 爬上巨人的肩膀 阅读(162) 评论(0) 推荐(0)