2020年暑假 (6)

marpreduce运行平台YARN

marpreduce程序应该是在很多机器上并行启动,并且先执行map task,当众多的map task都处理完自己的数据后,还需要启动众多的reduce task,需要一个自动化的调度平台,hadoop中就为运行mapreduce之类的分布式运算程序开发了一个自动化的调度平台--YARN

 

posted @ 2020-08-19 11:13  祈欢  阅读(48)  评论(0编辑  收藏  举报