摘要: 阅读目录(Content) 一、HDFS读取过程 二、HDFS的写入过程 三、通过实例说明HDFS的读写操作 3.1、写入操作 3.2、读取操作 四、图解HDFS的读取写入过程 4.1、角色出演 4.2、读取操作 3.2、写入操作 3.1、写入操作 3.2、读取操作 4.1、角色出演 4.2、读取操 阅读全文
posted @ 2017-10-17 16:15 jstarseven 阅读(19617) 评论(0) 推荐(3) 编辑
摘要: 阅读目录(Content) 一、Hadoop客户端配置 二、Java访问HDFS集群 2.1、HDFS的Java访问接口 2.2、Java访问HDFS主要编程步骤 2.3、使用FileSystem API读取数据文件 三、实战Java访问HDFS集群 3.1、环境介绍 3.2、查询HDFS集群文件系 阅读全文
posted @ 2017-10-17 16:12 jstarseven 阅读(829) 评论(0) 推荐(0) 编辑
摘要: 阅读目录(Content) 一、HDFS概述 1.1、HDFS概述 1.2、HDFS的概念和特性 1.3、HDFS的局限性 1.4、HDFS保证可靠性的措施 二、HDFS基本概念 2.1、HDFS主从结构体系 2.2、数据块(DataBlock) 2.3、名字节点(主节点:NameNode) 2.4 阅读全文
posted @ 2017-10-17 16:05 jstarseven 阅读(9985) 评论(0) 推荐(0) 编辑
摘要: 阅读目录(Content) 一、搭建Hadoop全分布式集群前提 1.1、网络 1.2、安装jdk 1.3、安装hadoop 二、Hadoop全分布式集群搭建的配置 2.1、hadoop-env.sh 2.2、core-site.xml 2.3、hdfs-site.xml 2.4.mapred-si 阅读全文
posted @ 2017-10-17 16:03 jstarseven 阅读(944) 评论(0) 推荐(0) 编辑
摘要: 阅读目录(Content) 一、Hadoop的三种运行模式(启动模式) 1.1、单机模式(独立模式)(Local或Standalone Mode) 1.2、伪分布式模式(Pseudo-Distrubuted Mode) 1.3、全分布式集群模式(Full-Distributed Mode) 二、搭建 阅读全文
posted @ 2017-10-17 16:01 jstarseven 阅读(1076) 评论(0) 推荐(0) 编辑
摘要: 阅读目录(Content) 一、引言(大数据时代) 1.1、从数据中得到信息 1.2、大数据表象概念 二、大数据基础 2.1、什么是大数据? 2.2、大数据的基本特征 2.3、大数据的意义 2.4、大数据的系统架构(整体架构) 2.5、大数据处理平台 2.6、大数据中的几个概念 三、Hadoop概述 阅读全文
posted @ 2017-10-17 15:58 jstarseven 阅读(1108) 评论(0) 推荐(0) 编辑