集群管理端口

 Hadoop官方文档:https://hadoop.apache.org/docs/r1.0.4/cn/

   Spark官方文档 :http://spark.apachecn.org/#/

HDFS端口:

参数

描述

默认

配置文件

例子值

fs.default.name namenode

namenode RPC交互端口

8020

core-site.xml

hdfs://master:8020/

dfs.http.address 

NameNode web管理端口

50070

hdfs- site.xml

0.0.0.0:50070

dfs.datanode.address

datanode 控制端口

50010 

hdfs -site.xml 

0.0.0.0:50010

dfs.datanode.ipc.address

datanode的RPC服务器地址和端口

50020

hdfs-site.xml

0.0.0.0:50020

dfs.datanode.http.address

datanode的HTTP服务器和端口

50075

hdfs-site.xml 

0.0.0.0:50075

注意:  Hadoop2.0默认web管理端口:50070                                Hadoop3.0默认web管理端口:9870

 

MR端口:

参数

描述

默认

配置文件

例子值

mapred.job.tracker

job-tracker交互端口 

8021

mapred-site.xml

hdfs://master:8021/

job

tracker的web管理端口

50030

mapred-site.xml

0.0.0.0:50030

mapred.task.tracker.http.address

task-tracker的HTTP端口

50060

mapred-site.xml

0.0.0.0:50060

其它端口:

参数

描述

默认

配置文件

例子值

dfs.secondary.http.address

secondary NameNode web管理端口

50090

hdfs-site.xml

0.0.0.0:50090

                                     

Spark端口:http://localhost:8080

Yarn 端口:http://localhost:8088

Jupyter Notebook:http://localhost:8888

                               

 

posted @ 2021-08-31 17:27  Theext  阅读(101)  评论(0)    收藏  举报