2020年6月27日
摘要: Hadoop伪分布模式配置 Hadoop共有三种部署方式:本地模式,伪分布模式及集群模式;本次安装配置以伪分布模式为主,即在一台服务器上运行Hadoop(如果是分布式模式,则首先要配置Master主节点,其次配置Slave从节点)。以下说明如无特殊说明,默认使用root用户登录主节点,进行以下的一系 阅读全文
posted @ 2020-06-27 23:36 itprobie-菜鸟程序员 阅读(400) 评论(0) 推荐(0)
摘要: 之前在用Mapreduce写代码时,在DFS Location下的会报一个error,大体的意思就是与主机名相关的错误 然后我就觉得可能时Hadoop开启时出了错误,然后我就重启了Hadoop,jps查看了一下,果然出现了错误 可见jps命令输入后什么都没有,原本应该如下图所示 后来我就在网上百度, 阅读全文
posted @ 2020-06-27 22:41 itprobie-菜鸟程序员 阅读(3135) 评论(1) 推荐(0)
摘要: 执行hadoop的start-all.sh命令式启动报如下的错误 [root@iZbp13pwlxqwiu1xxb6szsZ hadoop-3.2.1]# start-all.sh Starting namenodes on [iZbp13pwlxqwiu1xxb6szsZ]ERROR: Attem 阅读全文
posted @ 2020-06-27 20:41 itprobie-菜鸟程序员 阅读(2354) 评论(0) 推荐(0)
摘要: Hadoop的核心由3个部分组成: HDFS: Hadoop Distributed File System,分布式文件系统,hdfs还可以再细分为NameNode、SecondaryNameNode、DataNode。 YARN: Yet Another Resource Negotiator,资 阅读全文
posted @ 2020-06-27 18:16 itprobie-菜鸟程序员 阅读(437) 评论(0) 推荐(0)
摘要: 使用source或.执行shell脚本shell中,source 是内置命令,用途是读取文件中内容,并在当前shell中逐条执行。这种方式执行的脚本无须执行权限。source命令可以缩写为一个小数点,如: source test.sh 等价于 . test.sh 采用source 执行文件,可以使得 阅读全文
posted @ 2020-06-27 18:01 itprobie-菜鸟程序员 阅读(195) 评论(0) 推荐(0)
摘要: 1、114.114.114.114 114.114.114.114是国内移动、电信和联通通用的DNS,手机和电脑端都可以使用,干净无广告,解析成功率相对来说更高,国内用户使用的比较多,而且速度相对快、稳定,是国内用户上网常用的DNS 2、8.8.8.8 8.8.8.8是GOOGLE公司提供的DNS, 阅读全文
posted @ 2020-06-27 17:24 itprobie-菜鸟程序员 阅读(169) 评论(0) 推荐(0)
摘要: 一、不能使用dig、nslookup 二、安装相应软件包 yum install -y bind-utils 三、使用命令 1.dig命令 dig命令是一个功能强大的DNS查询命令。 一般格式:dig [@global-server] [domain] [q-type] [q-class] {q-o 阅读全文
posted @ 2020-06-27 17:05 itprobie-菜鸟程序员 阅读(1702) 评论(0) 推荐(0)
摘要: 有关于centos7获取IP地址的方法主要有两种,1:动态获取ip;2:设置静态IP地址 在配置网络之前我们先要知道centos的网卡名称是什么,centos7不再使用ifconfig命令,可通过命令 IP addr查看,如图,网卡名为ens32,是没有IP地址的 1、动态获取ip(前提是你的路由器 阅读全文
posted @ 2020-06-27 16:56 itprobie-菜鸟程序员 阅读(419) 评论(0) 推荐(0)