摘要: 今日学习了spark和hadoop的优缺点 Hadoop中的MR中每个map/reduce task都是一个java进程方式运行,好处在于进程之间是互相独立的,每个task独享进程资源,没 有互相干扰,监控方便,但是问题在于task之间不方便共享数据,执行效率比较低。比如多个map task读取不同 阅读全文
posted @ 2024-01-11 20:19 樱花开到我身边 阅读(36) 评论(0) 推荐(0)