JIANGzihao0222

导航

 

2024年1月22日

摘要: 本次学习学习Spark集群环境的搭建 Spark集群环境搭建 首先下载Spark安装包 选取一个节点为Master,后进行配置: vim ~/.bashrc 在.bashrc添加如下配置 export SPARK_HOME=/usr/local/spark // 注意路径 export PATH=$ 阅读全文
posted @ 2024-01-22 17:31 实名吓我一跳 阅读(21) 评论(0) 推荐(0)
 
摘要: 本次学习学习了spark的安装和使用方法 运行代码 Spark shell本身就是一个Driver,里面包含main方法 进入shell界面 ./bin/spark-shell -- master<master-url> <master-url>: local 使用一个CPU本地去运行SPARK:完 阅读全文
posted @ 2024-01-22 17:25 实名吓我一跳 阅读(24) 评论(0) 推荐(0)