2020年1月14日
MapReduce-分布式计算引擎
摘要： MapReduce概述 1、源自google的MapReduce论文，论文发表于2004.12 2、Hadoop MapReduce是google MapReduce的克隆版 3、MapReduce优点：海量数据离线处理&易开发&易运行（易开发和易运行只是相对而言） 4、MapReduce缺点：实时 阅读全文
posted @ 2020-01-14 17:53 迎风飞舞de蒲公英 阅读(751) 评论(0) 推荐(0) 编辑
HDFS
摘要： 简述 HDFS（Hadoop Distributed File System），作为Google File System（GFS）的实现，是Hadoop项目的核心子项目，是分布式计算中数据存储管理的基础，是基于流数据模式访问和处理超大文件的需求而开发的，可以运行于廉价的商用服务器上。它所具有的高容错 阅读全文
posted @ 2020-01-14 16:15 迎风飞舞de蒲公英 阅读(195) 评论(0) 推荐(0) 编辑