摘要: 1、YARN=Yet Another Resource Negotiator 2、主从架构,一主多从3、主=ResourceManager,从=NodeManager4、ResourceManager由ApplicationManager和ResourceScheduler组成5、NodeManag 阅读全文
posted @ 2023-12-07 17:14 韩世康 阅读(11) 评论(0) 推荐(0) 编辑
摘要: 1、完全分布式搭建 hadoop102[namenode,datanode],hadoop103[datanode], hadoop104[secondarynamenode,datanode] 缺少104,配置104 选择完全克隆103 机器的名称 hadoop104 配置机器的IP 192.16 阅读全文
posted @ 2023-11-29 18:41 韩世康 阅读(2) 评论(0) 推荐(0) 编辑
摘要: 1. 进⼊/opt/install/hadoop/etc/hadoop⽬录 2. 修改hadoop-env.sh:注释第25⾏并插⼊:export JAVA_HOME=/opt/install/jdk 3. 修改core-site.xml:在<configuration>与</configurati 阅读全文
posted @ 2023-11-29 18:03 韩世康 阅读(5) 评论(0) 推荐(0) 编辑
摘要: 1、⼤数据 ⼤数据:是指⽆法在⼀定时间内⽤常规软件⼯具对其内容进⾏抓取、管理和处理的数据集合 主要解决海量的数据存储和分析计算的问题。 2、数据单位 按⼤小: bit Byte KB MB GB TB PB EB ZB YB BB NB DB 1Byte=8bit 1KB=1024Byte 1MB= 阅读全文
posted @ 2023-11-24 21:08 韩世康 阅读(11) 评论(0) 推荐(0) 编辑
摘要: 1、case语句 [root@localhost day1121]# cat test1.sh #!/bin/bash case $1 in "1") echo "您输入的是1" ;; "2") echo "您输入的是2" ;; *) echo "您输入的是其他" ;; esac [root@loc 阅读全文
posted @ 2023-11-21 18:56 韩世康 阅读(18) 评论(0) 推荐(0) 编辑
摘要: 1、变量 自定义变量;变量名=变量值{注意,:不能有空格,建议使用小写,系统变量都是大写} [root@hadoop101 ~]# name=zhangsan 引用变量值:$变量名 或 ${变量名} [root@hadoop101 ~]# name=zhangsan [root@hadoop101 阅读全文
posted @ 2023-11-16 18:45 韩世康 阅读(10) 评论(0) 推荐(0) 编辑
摘要: 1、文本处理命令sed: 替换 sed "s/原数据/新数据/" ⽂件名,仅把每⾏的第⼀个"原数据"替换为"新数据",不对原⽂件操作。 [root@localhost ~]# cat a12.txt I love you you love me Do you love me? [root@local 阅读全文
posted @ 2023-11-14 18:54 韩世康 阅读(3) 评论(0) 推荐(0) 编辑
摘要: 1、echo命令 是内部命令,功能是向屏幕输出 echo字符串,字符串可以没有引号,也可以有(单,双)引号。 [root@localhost ~]# echo abc abc [root@localhost ~]# echo -n abc abc[root@localhost ~]# echo $1 阅读全文
posted @ 2023-11-13 22:16 韩世康 阅读(5) 评论(0) 推荐(0) 编辑
摘要: 1、权限: 允许⽤户对资源所执⾏的操作。 2、在Linux中所有的资源都视为⽂件。 3、⽂件的权限包括: 读(read) , 写(write) , 执⾏ (execute)。 4、通过ll查看⽂件的完整信息(共有9段) -rwxrw-r--. 1 root root 66 11⽉ 4 14:40 a 阅读全文
posted @ 2023-11-10 22:20 韩世康 阅读(3) 评论(0) 推荐(0) 编辑
摘要: 1、命令 su 用户名 切换用户,从管理员切换到普通用户,是不需要密码,否则需要密码,exit 返回原来的用户 2、文件权限 通过ll查看权限,有10个字母,分成4组 第1个字符:表示文件的类型 -普通文件,d目录,l链接 第2、3、4个字符表示文件所有者的权限 第5、6、7个字符表示文件所有者所在 阅读全文
posted @ 2023-11-07 17:55 韩世康 阅读(6) 评论(0) 推荐(0) 编辑