分布式缓存DistributedCache的使用

分布式缓存用于将使用的小文件首先分发到各个datanode节点上,然后利用map/reduce阶段的setup()方法将文件内容读入内存,加快程序执行。具体实现方法如下:

http://demievil.github.io/2014/10/29/Hadoop-DistributedCache/

posted @ 2016-03-04 09:16  lz3018  阅读(560)  评论(0编辑  收藏  举报