只有注册用户登录后才能阅读该文。 阅读全文
posted @ 2017-08-05 18:33 Obama_m 阅读(3) 评论(0) 推荐(0)
只有注册用户登录后才能阅读该文。 阅读全文
posted @ 2017-08-05 18:29 Obama_m 阅读(2) 评论(0) 推荐(0)
摘要: 1. MapReduce 定义 Hadoop 中的 MapReduce是一个使用简单的软件框架,基于它写出来的应用程序能够运行在由上千个商用机器组成的大型集群上,并以一种可靠容错式并行处理TB级别的数据集 2. MapReduce 特点 MapReduce 为什么如此受欢迎?尤其现在互联网+时代,互 阅读全文
posted @ 2017-08-05 18:06 Obama_m 阅读(127) 评论(0) 推荐(0)
只有注册用户登录后才能阅读该文。 阅读全文
posted @ 2017-08-05 17:57 Obama_m 阅读(2) 评论(0) 推荐(0)
摘要: . MapReduce基本编程模型和框架 1.1 MapReduce抽象模型 大数据计算的核心思想是:分而治之。如下图1所示。把大量的数据划分开来,分配给各个子任务来完成。再将结果合并到一起输出。 注:如果数据的耦合性很高,不能分离,那么这种并行计算就不适合了。 图1:MapReduce抽象模型 1 阅读全文
posted @ 2017-08-05 17:50 Obama_m 阅读(350) 评论(0) 推荐(0)
只有注册用户登录后才能阅读该文。 阅读全文
posted @ 2017-08-05 17:35 Obama_m 阅读(2) 评论(0) 推荐(0)
只有注册用户登录后才能阅读该文。 阅读全文
posted @ 2017-08-05 17:32 Obama_m 阅读(2) 评论(0) 推荐(0)