|NO.Z.00014|——————————|Deployment|——|Hadoop&OLAP数据库管理系统.v14|——|Kylin.v05|Spark-standalone集群模式|core/mamory|
一、集群模式--Standalone模式
### --- 检查集群状态
~~~     # 启动服务
[root@hadoop01 ~]# start-dfs.sh 
[root@hadoop01 ~]# start-yarn.sh
[root@hadoop01 ~]# start-all-spark.sh~~~     # 检查集群状态
[root@hadoop00 ~]# jps
Hadoop01:Master、Worker
Hadoop02:Worker
Hadoop03:Worker二、使用浏览器查看:http://hadoop01:8080/

三、Standalone配置
### --- 测试在 spark-env.sh 中增加参数,分发到集群,重启服务:
[root@hadoop01 ~]# vim $SPARK_HOME/conf/spark-env.sh
export SPARK_WORKER_CORES=10
export SPARK_WORKER_MEMORY=20g[root@hadoop01 ~]# rsync-script $SPARK_HOME/conf/spark-env.sh
 
[root@hadoop01 ~]# stop-all-spark.sh 
[root@hadoop01 ~]# start-all-spark.sh  三、在浏览器中观察集群状态,测试完成后将以上两个参数分别改为10、20g,重启服务。

### --- 修改回默认的配置
~~~     发送到其它主机并重启服务
[root@hadoop01 ~]#  vim $SPARK_HOME/conf/spark-env.sh
# export SPARK_WORKER_CORES=1
# export SPARK_WORKER_MEMORY=2gWalter Savage Landor:strove with none,for none was worth my strife.Nature I loved and, next to Nature, Art:I warm'd both hands before the fire of life.It sinks, and I am ready to depart
                                                                                                                                                   ——W.S.Landor
 
                     
                    
                 
                    
                 
                
            
         浙公网安备 33010602011771号
浙公网安备 33010602011771号 
