摘要: 1. 现象 home目录出现大量hs_err_pid.log,且伴随着内存使用量暴增、top发现大量sleeping Task、CPU使用率翻了好几倍、服务器响应变慢。 2. 原因探析 2.1 hs_err_pid.log 先分析下hs_err_pid.log,发现Current Thread全是U 阅读全文
posted @ 2022-06-08 11:55 钱塘江畔 阅读(418) 评论(0) 推荐(0)
摘要: 1. 背景 云上应用需要挂载云硬盘,操作步骤记录 2. 实践 # (1)获取ceph秘钥信息 # (2)根据秘钥生成secret.yml, 并通过kubectl create -f secret.yml启动 # (3)创建pv.yaml,并通过kubectl create -f pv.yaml启动 阅读全文
posted @ 2022-06-06 17:55 钱塘江畔 阅读(522) 评论(0) 推荐(0)
摘要: 1. 背景 登录服务器发现反应缓慢,每个命令的响应都好几秒 2. 排查 # df -h 查看磁盘使用正常 # free -g 内存使用正常 # ps -ef 哇,1万多进程 具体查看后,杀掉很多僵尸进程后正常 阅读全文
posted @ 2022-05-31 19:30 钱塘江畔 阅读(51) 评论(0) 推荐(0)
摘要: 业务系统如何评估服务器,系统容量预估 系统硬件资源测算 QPS、TPS、PV、UV、GMV、IP、RPS的概念解释 阅读全文
posted @ 2022-05-24 19:38 钱塘江畔 阅读(99) 评论(0) 推荐(0)
摘要: ] # kubectl top pod -n default NAME CPU(cores) MEMORY(bytes) test1 17m 2108Mi test2 0m 2Mi CPU使用量单位(毫core) 引用 简单理解k8s资源限制参数中cpu计量单位 阅读全文
posted @ 2022-05-09 18:17 钱塘江畔 阅读(944) 评论(0) 推荐(0)
摘要: 1. 背景 最近在做数据运营监控,对要发送的消息进行分级管理,参考下LOG的级别 2. 级别 区别: debug 级别最低,可以随意的使用于任何觉得有利于在调试时更详细的了解系统运行状态的东东; info 重要,输出信息:用来反馈系统的当前状态给最终用户的; # 后三个,警告、错误、严重错误,这三者 阅读全文
posted @ 2022-05-07 13:53 钱塘江畔 阅读(27) 评论(0) 推荐(0)
摘要: 1. 背景 线上服务后台跳转认证涉及到时间,后端获取的服务器系统时间比Asia/Shanghai时区慢8小时 2. 实战 # 修改pod对应的yaml文件,对应的container添加以下配置 containers: - name: test env: - name: TZ value: Asia/ 阅读全文
posted @ 2022-04-28 18:36 钱塘江畔 阅读(1782) 评论(0) 推荐(0)
摘要: 1. 背景 一直想快速搭建自己的数据可视化系统,最近有点时间,所以对现有的开源报表工具找些相关资料。 2. 对比 清单:DataV / DataEase / Davinci / Grafana 2.1 DataV 比较酷炫,需写代码,有一些现成的样例。 官方Demo 同类产品:echarts ,an 阅读全文
posted @ 2022-04-24 14:45 钱塘江畔 阅读(569) 评论(0) 推荐(0)
摘要: 1. 背景 在查看yarn任务时,只能看到application_id,无法直接根据application_name得知是哪个任务,设置job_name 2. 操作 不同引擎参数不同 ## mapreduce引擎 ## yarn1 set mapred.job.name=xxx; ## yarn2 阅读全文
posted @ 2022-04-22 11:00 钱塘江畔 阅读(1770) 评论(0) 推荐(0)
摘要: scp scp -P 40022 apache-hive-4.0.1-bin.tar.gz root@192.168.169.63:/opt/bonc/core SCP 命令详解 rsync命令技巧 查看操作系统 查看操作系统 添加sudo用 vi /etc/sudoers # 添加 usernam 阅读全文
posted @ 2022-04-12 11:25 钱塘江畔 阅读(72) 评论(0) 推荐(0)