回眸,境界 - 博客园

摘要：前言任何系统即使做的再大，都会有可能出现各种各样的突发状况。尽管你可以说我在软件层面上已经做到所有情况的意外处理了，但是万一硬件出问题了或者说物理层面上出了问题，恐怕就不是多写几行代码能够立刻解决的吧，说了这么多... 阅读全文

posted @ 2020-01-12 19:09 回眸,境界阅读(105) 评论(0) 推荐(0)

摘要：前言继上一篇文章讲述完ApplicationMaster的相关用法,核心主题都是围绕着2个字"应用",当然在RM中还有另外一项比较重要的服务也很重要,他就是节点管理服务,在RM中是如何维系管理多个节点,对于应用管... 阅读全文

posted @ 2020-01-12 19:09 回眸,境界阅读(390) 评论(0) 推荐(0)

posted @ 2020-01-12 19:09 回眸,境界阅读(155) 评论(0) 推荐(0)

posted @ 2020-01-12 19:09 回眸,境界阅读(101) 评论(0) 推荐(0)

摘要：前言在之前两周主要学了HDFS中的一些模块知识,其中的许多都或多或少有我们借鉴学习的地方,现在将目光转向另外一个块,被誉为MRv2,就是yarn,在Yarn中,解决了MR中JobTracker单点的问题,将此拆分... 阅读全文

posted @ 2020-01-12 19:09 回眸,境界阅读(102) 评论(0) 推荐(0)

posted @ 2020-01-12 19:09 回眸,境界阅读(444) 评论(0) 推荐(0)

posted @ 2020-01-12 19:09 回眸,境界阅读(353) 评论(0) 推荐(0)

摘要：前言正如我在前面的文章中曾经写过，在HDFS中存在着两大关系模块，一个是文件与block数据块的关系，简称为第一关系，但是相比于第一个关系清晰的结构关系，HDFS的第二关系就没有这么简单了，第二关系自然是与数据节... 阅读全文

posted @ 2020-01-12 19:09 回眸,境界阅读(120) 评论(0) 推荐(0)

摘要：前言在Hadoop中，所有的元数据的保存都是在namenode节点之中，每次重新启动整个集群，Hadoop都需要从这些持久化了的文件中恢复数据到内存中，然后通过镜像和编辑日志文件进行定期的扫描与合并，ok，这些稍... 阅读全文

posted @ 2020-01-12 19:09 回眸,境界阅读(158) 评论(0) 推荐(0)

posted @ 2020-01-12 19:09 回眸,境界阅读(630) 评论(0) 推荐(0)

Tippy