随笔分类 -  Hadoop

摘要：一、简介 1、分布式文件系统集群结构 分布式文件系统由计算机集群中的多个节点构成，这些节点分为两类： 主节点（MasterNode）或者名称节点（NameNode） 从节点（Slave Node）或者数据节点（DataNode） 2、HDFS能够带来什么好处 兼容廉价的硬件设备 流数据读写 大数据集 阅读全文

摘要：一、简介概述 1、什么是Hadoop Hadoop是Apache软件基金会旗下的一个开源分布式计算平台，为用户提供了系统底层细节透明的分布式基础架构 Hadoop是基于java语言开发，具有很好的跨平台的特性，并且可以部署在廉价的计算机集群中 Hadoop的核心是分布式文件系统HDFS（Hadoop 阅读全文

摘要：一、Hadoop原理介绍 1、请参考原理篇：Hadoop1-认识Hadoop大数据处理架构 二、centos7单机部署hadoop 前期准备 1、创建用户 2、添加用户权限 3、安装软件openssh，生成授权，免密码 1）安装 1）操作步骤 4、安装java 5、添加环境变量 [hadoop@we 阅读全文