spark的安装

前置准备：jdk，python
镜像：https://mirrors.tuna.tsinghua.edu.cn/apache/spark/spark-3.5.8/
解压：
tar -xzf spark-3.5.8-bin-hadoop3.tgz
mv spark-3.5.8-bin-hadoop3 spark
配置环境变量：

cat >> ~/.bashrc <<'EOF'
export SPARK_HOME=/root/spark
export PATH=$SPARK_HOME/bin:$SPARK_HOME/sbin:$PATH
export PYSPARK_PYTHON=python3
EOF

source ~/.bashrc

验证：
spark-shell

pyspark