摘要：1. Hadoop 简介 Hadoop 是一个开源的分布式计算和存储框架，是 Apache 基金会开发的，包含3个核心组件： HDFS：全称是 Hadoop Distributed File System，即 Hadoop 分布式文件系统。可以将将大文件、大批量文件分块存储到大量服务器组成的集群上。 阅读全文

摘要：有NFS文件系统，为什么还要使用GlusterFS分布式系统： NFS面临的问题1）存储空间不足，需要更大容量的存储，一个存储只能通过增加硬盘来增加存储容量，不适用于大数据存储。2）直接用NFS挂载存储，有一定风险，存在单点故障，因为数据存储了一份，一旦存储服务器坏了，数据就丢失了。3）单设备存储， 阅读全文

摘要：l 环境准备 1.服务器列表信息 Ip Hostname 存储 系统 Vip 192.168.1.42 data-node-01 /dev/sdb1 Centos7 192.168.1.99 说明：用于对外提供存储服务 192.168.1.49 data-node-02 /dev/sdb1 Cent 阅读全文

摘要：部署之前先对比下FastDFS和HDFS： 1.fastDFS和HDFS（Hadoop的分布式存储）不同，fastDFS的文件不是切片存储的，一个文件被存储在其中某一个group组的所有storage节点上，一个组中的每一个storage节点的数据都是一样的，冗余存储。而HDFS文件系统是将大文件切 阅读全文