摘要:
1)引言从今天开始,我将会开始学习分布式系统的一些理论知识,全方面的重新学习分布式的各个技术点,所以选用了原版本的英文教材>作为学习的资源。在期间,我会没读完一章,及时的做一些阅读的笔记,1个是怕自己忘了,还有一... 阅读全文
posted @ 2020-01-12 19:09
回眸,境界
阅读(160)
评论(0)
推荐(0)
摘要:
在概况(一)中,主要简单的对Yarn的情况作了简单的介绍,今天花一定时间在某些具体的模块上呈现以下Yarn的整体情况,帮助大家更好的理解Yarn。1)ResourceManager在Yarn的整体架构中,他用的也... 阅读全文
posted @ 2020-01-12 19:09
回眸,境界
阅读(94)
评论(0)
推荐(0)
摘要:
在概况(一)中,主要简单的对Yarn的情况作了简单的介绍,今天花一定时间在某些具体的模块上呈现以下Yarn的整体情况,帮助大家更好的理解Yarn。1)ResourceManager在Yarn的整体架构中,他用的也... 阅读全文
posted @ 2020-01-12 19:09
回眸,境界
阅读(75)
评论(0)
推荐(0)
摘要:
在概况(一)中,主要简单的对Yarn的情况作了简单的介绍,今天花一定时间在某些具体的模块上呈现以下Yarn的整体情况,帮助大家更好的理解Yarn。1)ResourceManager在Yarn的整体架构中,他用的也... 阅读全文
posted @ 2020-01-12 19:09
回眸,境界
阅读(103)
评论(0)
推荐(0)
摘要:
1)引言针对MRv1在扩展性,可靠性,资源利用率和多框架的支持上存在着明显的不足,进而诞生了下一代的MapReduce的计算框架MapReduce Version2,MRV1中有一个很大的问题就是把资源管理和作业... 阅读全文
posted @ 2020-01-12 19:09
回眸,境界
阅读(76)
评论(0)
推荐(0)
摘要:
1)引言针对MRv1在扩展性,可靠性,资源利用率和多框架的支持上存在着明显的不足,进而诞生了下一代的MapReduce的计算框架MapReduce Version2,MRV1中有一个很大的问题就是把资源管理和作业... 阅读全文
posted @ 2020-01-12 19:09
回眸,境界
阅读(86)
评论(0)
推荐(0)
摘要:
1)引言针对MRv1在扩展性,可靠性,资源利用率和多框架的支持上存在着明显的不足,进而诞生了下一代的MapReduce的计算框架MapReduce Version2,MRV1中有一个很大的问题就是把资源管理和作业... 阅读全文
posted @ 2020-01-12 19:09
回眸,境界
阅读(90)
评论(0)
推荐(0)
摘要:
最近看了比较多的关于大数据处理方面的知识,但是例如Hadoop,Spark,Storm等平台大都是对于数据的存储和管理操作,并不是对于数据进行分析和处理的。所以这里就衍生出了另外一种对于数据... 阅读全文
posted @ 2020-01-12 19:09
回眸,境界
阅读(415)
评论(0)
推荐(0)
摘要:
前2天刚刚小小的分析下Client端的流程,走的还是比较通顺的,但是RPC的服务端就显然没有那么简单了,毕竟C-S这种模式的,压力和重点都是放在Server端的,所以我也只能做个大概的分析,... 阅读全文
posted @ 2020-01-12 19:09
回眸,境界
阅读(139)
评论(0)
推荐(0)
摘要:
Hadoop的RPC的通信与其他系统的RPC通信不太一样,作者针对Hadoop的使用特点,专门的设计了一套RPC框架,这套框架个人感觉还是有点小复杂的。所以我打算分成Client客户端和S... 阅读全文
posted @ 2020-01-12 19:09
回眸,境界
阅读(168)
评论(0)
推荐(0)

浙公网安备 33010602011771号