摘要: 接着上一篇中安装hdfs后,直接在NameNode所在的服务器上安装JobTracker,而DataNode就是TaskTracker,所以只需要配置JobTracker就可以 找到NameNode所在的服务器上找到Hadoop对应的conf文件夹下,修改mapred-site.xml文件,添加Jo 阅读全文
posted @ 2018-08-05 17:12 黎小白 阅读(1001) 评论(0) 推荐(0)
摘要: 第一步修改IP地址 vi /etc/sysconfig/network-scripts/ifcfg-eth0 修改对应的IP地址 删除UUID和HWADDR 第二步删除文件70-persistent-net.rules rm -rf /etc/udev/rules.d/70-persistent-n 阅读全文
posted @ 2018-08-05 09:32 黎小白 阅读(193) 评论(0) 推荐(0)
摘要: (1)type cd --cd 命令的类型 (分为外部命令和内部命令)eg:内部命令(内部命令只有20多个) Last login: Sat May 19 10:35:50 2018[root@localhost ~]# type cdcd is a shell builtin[root@local 阅读全文
posted @ 2018-07-30 21:22 黎小白 阅读(404) 评论(0) 推荐(0)
摘要: 在学习Hadoop过程中需要学的内容有: (1)Core:一套分布式文件系统以及支持Map-Reduce计算框架 (2)AVro:定义了一种用于支持大数据应用的数据格式,并为这种格式提供了不同的编程语言的支持 (3)HDFS:Hadoop分布式文件系统 (4)Map/Reduce:是一个使用简易的软 阅读全文
posted @ 2018-07-30 21:06 黎小白 阅读(727) 评论(0) 推荐(0)
摘要: 在windows电脑里面搭建的一个简单的HDFS(Hadoop 分布式文件系统) 用了三个服务器:IP地址分别为: 192.168.233.3 HDFS的名称节点:NameNode 192.168.233.4 HDFS的数据节点:DataNode 和 HDFS的第二名称节点 SecondearyNa 阅读全文
posted @ 2018-07-29 18:31 黎小白 阅读(391) 评论(0) 推荐(0)