随笔分类 -  hadoop学习

摘要:大家都知道namenode是hadoop中的一个很重要的节点,因为他存在着跟datanode的交互跟客户端的交互,存储着dotanode中的元数据,所以就很想学习他们是如何沟通并能保证数据在任何情况下都不会丢失那? namenode的作用: 1.维护元数据信息。 2.维护hdfs的目录树。 3.相应 阅读全文
posted @ 2018-01-05 11:11 君子喻于义 阅读(158) 评论(0) 推荐(0)
摘要:(想要学习hadoop需要有linux基础否则。。。。。。。。)Hadoop是一个开源的框架,可编写和运行分布式应用处理大规模数据,是专为离线和大规模数据分析而设计的,并不适合那种对几个记录随机读写的在线事务处理模式。Hadoop=HDFS(文件系统,数据存储技术相关)+ Mapreduce(数据处 阅读全文
posted @ 2017-12-25 16:37 君子喻于义 阅读(132) 评论(0) 推荐(0)