2019年10月22日
小记---------spark优化之更优分配资源
摘要： spark优化：在一定范围之内，增加资源与性能的提升是成正比的。 因此， 一个cpu core 执行一个task线程、 task数： 若有 cpu core 2个、num-executor 2个 那么task有4个 公式：task = num-executor * cpu core . cpu co 阅读全文
posted @ 2019-10-22 21:59 二黑诶 阅读(316) 评论(0) 推荐(0)