2020年11月18日
解决spark日志清理问题
摘要： 背景 由于采用了sparkstreaming 任务一直再运行导致日志文件暴涨，达到了硬盘的预警，不得已必须指定策略定期删除日志已保证服务器硬盘空间。 spark的日志分类 spark的日志都有那些： 1.event(history) 2.work 3.executor 解决方法 方案1 一开始为了快 阅读全文
posted @ 2020-11-18 18:17 DB乐之者 阅读(2169) 评论(1) 推荐(0) 编辑