2019 年 2月 15 日随笔档案 - zhoumjane

CDH6离线安装

摘要： CentOS7下完全离线安装CDH6集群 CentOS7下完全离线安装CDH6集群 CDH Linux 大数据 shareSHARE 245 浏览量分享到微博分享到 Twitter 分享到 QQ CDH Linux 大数据 CDH Linux 大数据 245 浏览量分享到微博分享到 Twit 阅读全文

posted @ 2019-02-15 17:17 zhoumjane 阅读(23071) 评论(4) 推荐(0)

HDFS中的集中缓存管理详解

摘要：一、背景 Hadoop设计之初借鉴GFS/MapReduce的思想：移动计算的成本远小于移动数据的成本。所以调度通常会尽可能将计算移动到拥有数据的节点上，在作业执行过程中，从HDFS角度看，计算和数据通常是同一个DataNode节点，即存在大量的本地读写。但是HDFS最初实现时，并没有区分本地读和阅读全文

posted @ 2019-02-15 17:06 zhoumjane 阅读(3001) 评论(0) 推荐(0)

2019年2月15日