摘要: public class Father { public static final Father ff = new Father(); static{ System.out.println("父类静态代码执行了"); } { System.out.println("父类非静态代码执行了"); } F 阅读全文
posted @ 2019-08-10 15:19 梦如汐 阅读(1624) 评论(0) 推荐(0) 编辑
摘要: MapReduce是运行在yarn集群上的 主要分resourcemanger和nodemanger两类一个完整的MapReduce程序分为三个部分MRAppMaster 负责整个程序的过程调度及状态协调MapTesk 负责map阶段的整个数据处理流程ReduceTesk 负责reduce阶段的整个 阅读全文
posted @ 2019-10-10 14:16 梦如汐 阅读(141) 评论(0) 推荐(0) 编辑
摘要: 1. Client 发起文件上传请求, 通过 RPC 与 NameNode 建立通讯, NameNode 检查目标文件是否已存在, 父目录是否存在, 返回是否可以上传 2. Client 请求第一个 block 该传输到哪些 DataNode 服务器上 3. NameNode 根据配置文件中指定的备 阅读全文
posted @ 2019-09-26 21:51 梦如汐 阅读(1564) 评论(0) 推荐(0) 编辑
摘要: Hadoop 的存储系统是 HDFS(Hadoop Distributed File System)分布式文件系统,对外部客户端而言,HDFS 就像一个传统的分级文件系统,可以进行创建、删除、移动或重命名文件或文件夹等操作,与 Linux 文件系统类似。 Client客户端 文件切片,文件上传的时候 阅读全文
posted @ 2019-09-20 14:45 梦如汐 阅读(1212) 评论(0) 推荐(0) 编辑
摘要: 简介: Hadoop 是一个由 Apache 基金会所开发的分布式系统基础架构,它可以使用户在不了解分布式底层细节的情況下开发分布式程序,充分利用集群的威力进行高速运算和存储。 从其定义就可以发现,它解決了两大问题:大数据存储、大数据分析。也就是 Hadoop 的两大核心:HDFS 和 MapRed 阅读全文
posted @ 2019-09-20 14:37 梦如汐 阅读(280) 评论(0) 推荐(0) 编辑
摘要: Shell编程增强 Shell 编程一般指编写 shell 脚本。 1:基本语法: 使用 vi 编辑器新建一个文件 hello.sh #!/bin/bash echo "Hello World !" 执行方式: 方式1: sh hello.sh 方式2 chmod +x ./hello.sh #使脚 阅读全文
posted @ 2019-09-10 14:57 梦如汐 阅读(172) 评论(0) 推荐(0) 编辑
摘要: 切换命令 cd app (切换到app目录) cd .. (返回到上一层目录) cd/ (切换到根目录) cd~(切换到用户主目录) cd-(切换到上一个所在目录) 展示文件 ls用来显示当前目录下的内容 (横着排列) ll 显示当前目录下的内容(竖着排列) dir 3. 创建目录和移除目录 mkd 阅读全文
posted @ 2019-08-27 15:30 梦如汐 阅读(298) 评论(0) 推荐(0) 编辑
摘要: 连接池(DataSource) 目的是为了节省创建连接和销毁连接所需要花费的时间 提高程序的执行效率 DruidDataSource 创建连接池对象 1: DruidDataSource d = new DruidDataSource(); d.setDriverClassName(); d.set 阅读全文
posted @ 2019-08-20 21:06 梦如汐 阅读(520) 评论(0) 推荐(0) 编辑
摘要: 插入一条新的表记录 插入一些值:insert into 表名 (列名) values (值1,值2) 插入一条记录所有的值 insert into 表名 values (值1,值2) 注意事项 1.值的类型与数据库中表列的类型一致。 2.值的顺序与数据库中表列的顺序一致。 3.值的最大长度不能超过列 阅读全文
posted @ 2019-08-10 15:04 梦如汐 阅读(2593) 评论(0) 推荐(0) 编辑
摘要: 1. 多表关系 外键 foreign key 添加外键语法: alter table 表名1 add foreign key(外键名称) references 表名2(主键名称) 2.三种表关系: 一对多 在多的一方建立外键 指向一方的主键 多对多 建立中间表 存储外键分别指向其他表的主键 一对一 阅读全文
posted @ 2019-08-02 08:21 梦如汐 阅读(218) 评论(0) 推荐(0) 编辑