05 2016 档案

HDFS文件读写过程
摘要：参考自《Hadoop权威指南》 ![http://www.cnblogs.com/swanspouse/p/5137308.html] HDFS读文件过程： 1. 客户端通过调用FileSystem对象的open()来读取希望打开的文件。对于HDFS来说，这个对象是分布式文件系统的一个实例。 2. 阅读全文

posted @ 2016-05-13 15:02 LeonNew 阅读(8549) 评论(0) 推荐(0)

MapReduce简介
摘要：MapReduce简介 参考自![http://www.cnblogs.com/swanspouse/p/5130136.html] MapReduce定义： MapReduce是一种可用于数据处理的编程框架。MapReduce采用"分而治之"的思想，把对大规模数据集的操作，分发给一个主节点管理下的 阅读全文

posted @ 2016-05-12 16:18 LeonNew 阅读(7808) 评论(0) 推荐(0)

导航