spark web ui默认8080端口和zookeeper的admin 8080端口冲突,怎么解决?

 

修改Spark Web UI默认的8080端口

修改SPARK_HOME/sbin目录下start-master.sh,查找8080定位并修改成你想要的端口便可rest

if [ "$SPARK_MASTER_WEBUI_PORT" = "" ]; then

  SPARK_MASTER_WEBUI_PORT=8087

fi

  

也可以在sbin/spark-env.sh中新增如下配置

#Master 监控页面默认访问端口为 8080,但是可能会和 Zookeeper 冲突,所以改成 8989,也可以自定义,访问 UI 监控页面时请注意
SPARK_MASTER_WEBUI_PORT=8989

  

注意如果同时在start-master.sh和spark-env.sh中都配置了端口,第二种方式的优先级高于第一种方式。

posted on 2021-12-18 19:07  坚守梦想  阅读(540)  评论(0编辑  收藏  举报