摘要: 安装前环境准备 关闭防火墙(不关防火墙端口是通的也会有问题) systemctl stop firewalld 关闭selinux 查看是否关闭getenforce disabled为关闭 临时关闭,立即生效,重启失效 setenforce 0 永久关闭,重启生效 vi /etc/selinux/c 阅读全文
posted @ 2021-08-09 11:42 会飞的鹅 阅读(53) 评论(0) 推荐(0)
摘要: 开启日志模式 说明: 开启 general log 将所有到达MySQL Server的SQL语句记录下来。 一般不会开启开功能,因为log的量会非常庞大。但个别情况下可能会临时的开一会儿general log以供排障使用。 1、临时开启设置,重启失效 SET GLOBAL log_output = 阅读全文
posted @ 2021-07-02 10:40 会飞的鹅 阅读(1736) 评论(0) 推荐(0)
摘要: less 命令 less [参数] 文件 参数说明: -b <缓冲区大小> 设置缓冲区的大小 -e 当文件显示结束后,自动离开 -f 强迫打开特殊文件,例如外围设备代号、目录和二进制文件 -g 只标志最后搜索的关键词 -i 忽略搜索时的大小写 -m 显示类似more命令的百分比 -N 显示每行的行号 阅读全文
posted @ 2021-06-29 11:09 会飞的鹅 阅读(121) 评论(0) 推荐(0)
摘要: 检查方法 切换到hdfs用户 su - hdfs hdfs fsck / 副本数量是3但只找到两个 尝试修复丢失的副本 命令说明:hdfs debug recoverLease -path 文件位置 -retries 重试次数 hdfs debug recoverLease -path /hbase 阅读全文
posted @ 2021-06-25 17:32 会飞的鹅 阅读(1122) 评论(0) 推荐(0)
摘要: 一、背景 5月5日腾讯云安全团队曾针对“攻击者利用Hadoop Yarn资源管理系统REST API未授权漏洞对服务器进行攻击,攻击者可以在未授权的情况下远程执行代码”的安全问题进行预警,在预警的前后我们曾多次捕获相关的攻击案例,其中就包含利用该问题进行挖矿,我们针对其中一个案例进行分析并提供响应的 阅读全文
posted @ 2021-06-25 16:55 会飞的鹅 阅读(392) 评论(0) 推荐(0)
摘要: 查看是否区分大小写 show Variables like '%table_names' 查看lower_case_table_names的值,0代表区分,1代表不区分 修改方法 1.用ROOT登录,修改/etc/my.cnf 2.在[mysqld]下加入一行:lower_case_table_na 阅读全文
posted @ 2021-06-17 11:23 会飞的鹅 阅读(385) 评论(0) 推荐(0)
摘要: 根据加锁的范围,MySQL 里面的锁大致可以分成全局锁,表级锁,行锁。 行锁已经在前面几篇文章说过 1. 全局锁 全局锁就是对整个数据库实例加锁。MySQL 提供了一个加全局读锁的方法,命令是Flush tables with read lock (FTWRL)。 当你需要让整个库处于只读状态的时候 阅读全文
posted @ 2021-06-16 11:31 会飞的鹅 阅读(81) 评论(0) 推荐(0)
摘要: processlist命令的输出结果显示了有哪些线程在运行,可以帮助识别出有问题的查询语句,两种方式使用这个命令。 1. 进入mysql/bin目录下输入mysqladmin processlist; 2. 启动mysql,输入show full processlist; 如果有 SUPER 权限, 阅读全文
posted @ 2021-06-16 11:19 会飞的鹅 阅读(420) 评论(0) 推荐(0)
摘要: 增加kafka节点后重新分配partition 扩容kafka之后,针对扩容之前的topic进行重新平衡leader,Replicas,Isr 生成分配计划 新建一个json文件,内容如下:(topic为要修改的topic)这里文件取名为 topics-to-move.json { "topics" 阅读全文
posted @ 2021-06-16 11:18 会飞的鹅 阅读(446) 评论(0) 推荐(1)
摘要: 相关参数 #设置日志只保留一个小时的 "log.retention.hours": 1 #设置大于500M就自动删除(默认1G) "log.retention.bytes": "536870912" #设置日志被标记删除后,保留多久彻底删除,1分钟 "log.segment.delete.delay 阅读全文
posted @ 2021-06-16 10:37 会飞的鹅 阅读(280) 评论(0) 推荐(0)