spark安装

将spark文件上传到Linux并解压缩,使用的版本是spark-3.0.0-bin-hadoop3.2.tgz

tar -zxvf spark-3.0.0-bin-hadoop3.2.tgz -C /kkb/soft
cd /kkb/soft
mv spark-3.0.0-bin-hadoop3.2 spark-local

进入解压缩后的目录

bin/spark-shell

 

 webui这里无法显示

 

 

排查原因,先看看端口占用:

netstat -ntlp

 

4040端口正处于监听状态,没有发现问题

接下来就检查防火墙

systemctl status firewalld

排除防火墙的原因

spark启动时显示一行如下,表示web ui可以通过下面的网址访问,但是我输入后没有能够进入,可能是ip映射的问题

 

最后将默认网址修改成ip地址开头的就能够访问了 

 

 

posted @ 2022-05-17 12:03  lbeaner  阅读(27)  评论(0)    收藏  举报