搭建Hadoop伪分布模式环境实验
我使用的是Finalshell,不是Xshell,各位可以参考一下
1.首先,开启虚拟机,等待连接成功,输入"start-all.sh"启动HDFS,Yarn,然后输入jps查看进程是否正常

2.打开HDFS Web界面,在本地浏览器输入namenode节点服务器的ip或域名+端口(例如:我用是edge,namenode节点服务器的ip改成了node1【纯属想偷懒】,就可以看到HDFS集群的概述,如果不知道自己的ip话,输入命令"ifconfig"就可以查看自己的ip了,例如:

这是HDFS的Web页面

这是Yarn的Web页面

3.运行mapreduce,查看程序是否正常
首先,cd到mapreduce中

通过示例计算圆周率pi,输入"hadoop jar ..."或者"yarn jar..."

计算圆周率pi时,可以适当地增大后面两个数,让计算变得更准确,但相应的计算时间也会增加


浙公网安备 33010602011771号