大数据处理架构Hadoop

Hadoop可以支持多种编程语言

HDFS分布式文件系统

MapReduce分布式并行编程框架

这两大核心组件用于解决怎么实现海量数据的分布式存储和怎么实现海量数据分布式处理

Hive数据仓库（用于企业决策分析）

Pig流数据处理

Spark基于内存

MapReduce基于磁盘