2019年12月10日
es内存不够
8核32G 3台 ELS机器，当时只给es配置了8G内存，es的总体数据量大小将近30G（查看GET /_cat/shards?v） Read More
posted @ 2019-12-10 21:10 soft.push("zzq") Views(312) Comments(0) Diggs(0)
spark资源调度和任务调度
资源调度： （1）executor默认在集群中分散启动，可通过参数配置集中在某个work启动，不过分散启动有利于数据本地化。 （2）如果spark-submit提交任务时，如果不指定--executor-cores，则spark会在每个work中启动一个executor并消耗掉work中的所有cor Read More
posted @ 2019-12-10 21:02 soft.push("zzq") Views(289) Comments(0) Diggs(0)
tomcat参数调整
（1）maxConnections能接收的最大请求数（nio下默认1W，基本不用调整，足够了）； （2）acceptCount在操作系统层面的请求堆积，linux操作系统下除了acceptCount参数队列以外还有其它的队列堆积请求（有需要的情况下可以增加）。 （3）还有就是我们处理请求的maxTh Read More
posted @ 2019-12-10 11:43 soft.push("zzq") Views(163) Comments(0) Diggs(0)