摘要: 进程理解 HDFS相关(NN,DN,SSN) NameNode(NN) 功能: 1、接受客户端的读/写服务 因为NameNode知道数据文件与DataNode的对应关系 2、保存文件的时候会保存文件的元数据信息 a. 文件的归属 b. 文件的权限 c. 文件的大小,时间 d. Block信息,但是b 阅读全文
posted @ 2022-08-24 15:26 ~小小~ 阅读(94) 评论(0) 推荐(0)
摘要: 一、搭建Hadoop集群 NameNode:接受客户端的读/写服务,收集 DataNode 汇报的 Block 列表信息 DataNode:真实数据存储的地方(block) SecondaryNameNode:做持久化的时候用到 进程master(主)node1(从)node2(从) NameNod 阅读全文
posted @ 2022-08-24 15:00 ~小小~ 阅读(140) 评论(0) 推荐(0)
摘要: 一、分布式文件系统 1、FS File System 文件系统时极域硬盘之上的文件管理的工具 我们用户操作文件系统可以和硬盘进行解耦 2、DFS Distributed File System 分布式文件系统 将我们的数据存放在多台电脑上存储 分布式文件系统有很多,HDFS(Hadoop Distr 阅读全文
posted @ 2022-08-23 16:23 ~小小~ 阅读(29) 评论(0) 推荐(0)
摘要: SQL(Structured Query Language)结构化查询语言 全世界所有的结构化数据库都适用 分类 DDL:数据库定义语言(定义数据库的一些组件 表 索引 视图 自增序列...) DML:数据库操作语言(添加 删除 修改) CRUD DQL:数据库查询语言 查询 DCL:数据库控制语言 阅读全文
posted @ 2022-08-17 10:19 ~小小~ 阅读(28) 评论(0) 推荐(0)
摘要: shell中系统任务设置 1、系统启动流程 启动计算机的硬件(BIOS) 读取时间 选择对应的启动模式(USB HDD EFI) 如果是Linux系统,回去找/boot目录.引导这个系统启动 计算机系统开始启动,读取初始化配置文件 vim /etc/inittab 启动时控制着计算机的运行级别 ru 阅读全文
posted @ 2022-08-17 09:47 ~小小~ 阅读(52) 评论(0) 推荐(0)
摘要: Shell编程 1.1 Shell名词解释 • Kernel ​ Linux内核主要是为了和硬件打交道 • Shell ​ 命令器(command interpreter) ​ Shell是一个用C语言编写的程序,它是用户使用Linux的桥梁。Shell既是一种命令语言, 又是一种程序设计语言. ​ 阅读全文
posted @ 2022-08-17 09:41 ~小小~ 阅读(60) 评论(0) 推荐(0)
摘要: Linux 1、安装VMWare12 1) 右击以管理员的身份运行安装包 2) 选择自己电脑一个磁盘(固态)空间比较大的盘 D 3) 在D盘中创建一个文件夹soft,路径不允许存在中文特殊字符 2、安装虚拟机 1)新建虚拟机 2)自定义 ... 3、安装XShell和XFTP 1) 在soft目录下 阅读全文
posted @ 2022-08-17 09:37 ~小小~ 阅读(352) 评论(0) 推荐(0)
摘要: 1、用户组管理 用户组的管理包括用户组的添加、删除和修改。 为什么要建立用户组 人事部有20名员工,我们要建立一个组,叫 hr,这样就不用分别给20个员工设置权限了。 ① 用户组添加 命令:groupadd 作用:添加组 语法:# groupadd [参数选项 选项值] 用户组名 选项:-g:设置用 阅读全文
posted @ 2022-08-17 09:31 ~小小~ 阅读(211) 评论(0) 推荐(0)
摘要: Linux目录结构 bin 存放二进制可执行文件(ls,cat,mkdir等)*boot 存放用于系统引导时使用的各种文件dev 存放设备文件etc 存放系统配置文件*home 存放所有用户文件的根目录lib 存放跟文件系统中的程序运行所需要的共享库及内核模块proc 虚拟文件系统,存放当前内存的映 阅读全文
posted @ 2022-08-15 18:27 ~小小~ 阅读(55) 评论(0) 推荐(0)