03 2018 档案
摘要:本文主要介绍MapReduce编程模型的原理和基于Hadoop的MD5暴力破解思路。 一、MapReduce的基本原理 Hadoop作为一个分布式架构的实现方案,它的核心思想包括以下几个方面:HDFS文件系统,MapReduce的编程模型以及RPC框架。无论是怎样的架构,一个系统的关键无非是存储结构
阅读全文
摘要:之前的两篇文章介绍了如何从0开始到搭建好带有JDK的Ubuntu的过程,本来这篇文章是打算介绍搭建伪分布式集群的。但是后来想想反正伪分布式和完全分布式差不多,所幸直接介绍完全分布式了。 如果你想自己搭建伪分布式玩的话,参考:在VMware下安装Ubuntu并部署Hadoop1.2.1分布式环境 -
阅读全文
摘要:本文将介绍如何使用虚拟机一步步从安装Ubuntu到搭建Hadoop伪分布式集群。 本文主要参考:在VMware下安装Ubuntu并部署Hadoop1.2.1分布式环境 - CSDN博客 一、所需的环境和软件:(以下是我们的环境,仅供参考) 1. 操作系统:Windows 10 64位 2. 内存:4
阅读全文
摘要:本文将介绍如何使用虚拟机一步步从安装Ubuntu到搭建Hadoop伪分布式集群。 本文主要参考:在VMware下安装Ubuntu并部署Hadoop1.2.1分布式环境 - CSDN博客 一、所需的环境和软件:(以下是我们的环境,仅供参考) 1. 操作系统:Windows 10 64位 2. 内存:4
阅读全文

浙公网安备 33010602011771号