[置顶] ETL组件---flume启动报错
摘要： flume启动的时候报错 一、flume启动后写不到hdfs上，让我一通撞墙，结果忽略了前面的开头问题： 报错：Info: Including HBASE libraries found via (/opt/hbase/bin/hbase) for HBASE access错误: 找不到或无法加载主 阅读全文
posted @ 2021-10-07 22:12 世界终将是黑大帅的 阅读(148) 评论(0) 推荐(0) 编辑
[置顶] ETL组件的维护
摘要： sqoop导入数据 进入mysql： mysql -uroot -pLover*159 1.创建数据库并插入数据 （1）创建数据库并将其定位默认数据库 create database mysql_hdfs; use mysql_hdfs; （2）创建表： create table users(id 阅读全文
posted @ 2021-10-07 12:07 世界终将是黑大帅的 阅读(68) 评论(0) 推荐(0) 编辑
2024年1月4日
cka考试题
摘要： 第一题，基于角色访问控制-RBAC 在官网搜索：RBAC，在页面搜索：命令行工具 创建命令： root@cwlmaster1:~# kubectl create clusterrole deployment-clusterrole --verb=create --resource=deploymen 阅读全文
posted @ 2024-01-04 13:48 世界终将是黑大帅的 阅读(19) 评论(0) 推荐(0) 编辑
2023年5月29日
mysql安装服务启动失败
摘要： 问题：MySQL error 1042: Unable to connect to any of the specified MySQL hosts. Waiting 5 seconds before the next connection attempt... Retry 10: Attempti 阅读全文
posted @ 2023-05-29 01:14 世界终将是黑大帅的 阅读(50) 评论(0) 推荐(0) 编辑
2021年12月31日
windows11安装安卓
摘要： 一、打开系统虚拟服务 1-1.在系统设置中搜索windows 功能（中间有空格），点击”启用或关闭windows 功能“。 1-2.在功能中将“适用Linux的Windows子系统”与“虚拟机平台”选中，点击确定。 1-3.点击让Windows更新为你下载文件。 1-4.下载完成后点击立即重启。 重 阅读全文
posted @ 2021-12-31 18:05 世界终将是黑大帅的 阅读(1005) 评论(0) 推荐(0) 编辑
2021年10月22日
hadoop----4.hadoopHA高可用搭建
摘要： 搭建HA高可用 1.HA的文件参数（在master节点上配置文件） ①：配置hadoop-env.sh文件 修改配置： exportJAVA_HOME=/opt/java ②：配置core-site.xml文件 添加： <property> <name>fs.defaultFS</name> <va 阅读全文
posted @ 2021-10-22 00:05 世界终将是黑大帅的 阅读(76) 评论(0) 推荐(0) 编辑
2021年10月19日
集群节点故障诊断与处理
摘要： 集群节点故障诊断与处理 安装Nagios服务端的时出现被需要的依赖包问题，需要安装mysql的rpm包： 输入：wget https://dev.mysql.com/get/Downloads/MySQL-5.7/mysql-community-libs-compat-5.7.25-1.el7.x8 阅读全文
posted @ 2021-10-19 22:28 世界终将是黑大帅的 阅读(508) 评论(0) 推荐(0) 编辑
2021年10月17日
HDFS----配置优化
摘要： hdfs的配置优化 1.优化 dfs.replication 文件副本数 ①：HDFS 文件副本数设置为 3；修改文件。 进入 /opt/hadoop/etc/hadoop 目录下修改hdfs-site.xml 文件 <property> <name>dfs.replication</name> < 阅读全文
posted @ 2021-10-17 22:37 世界终将是黑大帅的 阅读(280) 评论(0) 推荐(0) 编辑
2021年10月13日
Linux----文件系统的优化
摘要： Linux文件系统优化 一、增大可打开文件描述的数目 ①：修改limist.,conf文件 输入 sudo vim /etc/security/limits.conf 添加： * hard nofile 1048576* soft nproc 1048576* hard nproc 1048576* 阅读全文
posted @ 2021-10-13 21:54 世界终将是黑大帅的 阅读(260) 评论(0) 推荐(0) 编辑
Linux----系统磁盘的优化
摘要： Linux系统磁盘的优化 1.查看当前系统支持的I/O调度器 终端输入 dmesg | grep -i scheduler 进行查看返还： 2.查看当前硬盘IO调度算法的I/O调度器 终端输入 cat /sys/block/sda/queue/scheduler 查看 返还： 3.临时修改当前的I/ 阅读全文
posted @ 2021-10-13 20:22 世界终将是黑大帅的 阅读(238) 评论(0) 推荐(0) 编辑
Linux----网络的优化
摘要： Linux网络优化 1.查看防火墙状态（本人虚拟机已经永久关闭防火墙） 关闭防火墙查看：https://www.cnblogs.com/hdpcwl/articles/15350051.html 2.禁用ipv6 ①：修改配置文件 sudo sysctl/sysctl.conf 添加： ②：参数配置 阅读全文
posted @ 2021-10-13 19:56 世界终将是黑大帅的 阅读(175) 评论(0) 推荐(0) 编辑
2021年10月11日
Linux----系统的优化
摘要： Linux系统优化 #掌握Linux系统常用优化工具的使用、系统网络性能进行优化的方法、文件系统的基本优化、系统预读缓冲区的优化方法以及掌握Swap分区及内存分配策略的修改方法 #free命令、top命令 *free用来显示内存的使用情况**top是Linux常用的性能分析工具* 1.查看swapp 阅读全文
posted @ 2021-10-11 11:56 世界终将是黑大帅的 阅读(68) 评论(0) 推荐(0) 编辑
下一页