随笔分类 -  Hadoop

Hadoop学习
摘要:在本地使用Eclipse调试MapReduce程序,需要Hadoop插件,笔摘记录下制作安装过程。 准备工作(hadoop-2.6.0为例): 搭建好Hadoop环境 下载Hadoop安装包,解压到某个路径(D:\hadoop-2.6.0) 下载 hadoop2x-eclipse-plugin包 安 阅读全文
posted @ 2018-09-28 14:20 v-imok 阅读(294) 评论(0) 推荐(0)
摘要:1、HBase HBase: Hadoop Database,根据Google的Big Table设计 HBase是一个分布式、面向列族的开源数据库。HDFS为Hbase提供了底层的数据存储服务,MapReduce为Hbase提供了高性能的计算能力,Zookeeper为Hbase提供了稳定的服务和F 阅读全文
posted @ 2018-09-19 14:28 v-imok 阅读(303) 评论(0) 推荐(0)
摘要:HDFS HDFS (Hadoop Distributed FileSystem) 是 Hadoop 分布式文件系统,以流式数据访问模式来存储超大文件,运行与商业硬件集群上,管理网络中跨多台计算机存储的文件系统,是分布式计算中数据管理的的基础。 流式数据访问模式 : 指的是数据不是一次性获取过来,而 阅读全文
posted @ 2018-09-17 14:41 v-imok 阅读(521) 评论(0) 推荐(0)
摘要:走上大数据的自学之路....,Hadoop是走上大数据开发学习之路的第一个门槛。 Hadoop,是Apache的一个开源项目,开发人员可以在不了解分布式底层细节,开发分布式程序,充分利用集群进行高速运算和存储海量数据。 核心:分布式存储系统HDFS(Hadoop Distributed File S 阅读全文
posted @ 2018-09-17 09:43 v-imok 阅读(449) 评论(0) 推荐(0)