大数据从业者

摘要： 【一些概念】 本地化（Localization） 将资源下载到本地的过程，这样container运行时可以从本地加载而不是从访问远端的文件。 资源（Resource） 资源表示运行container所需要的一个文件或library，客户端在提交任务时需要指定所依赖的资源。 对于每个资源，可以指定如下 阅读全文

摘要： 一. 前言在YARN中， 分布式缓存是一种分布式文件分发与缓存机制,主要作用是将用户应用程序执行时所需的外部文件资源自动透明地下载并缓存到各个节点上， 从而省去了用户手动部署这些文件的麻烦。 二. 工作流程 YARN分布式缓存工作流程具体如下：步骤1 客户端将应用程序所需的文件资源（外部字典、 JA 阅读全文