摘要: 前言 今天我们来讨论一下回归算法当中的数学实现。本人数学也是渣,大学时期概率论一直挂到清考才勉强通过,+_+ !!,如今勇闯机器学习,硬着头皮重新学习了微积分和线代,也是为了记录自己最近的状态,避免过段时间忘记了。描述的时候有不周全的地方,请各位大佬们多担待了 本节将会运用一些数学知识来解释一下相关 阅读全文
posted @ 2025-08-22 11:10 it排球君 阅读(172) 评论(0) 推荐(0)
摘要: 前言 书接上文,上一小节简单介绍了多元回归的基本原理、使用方式,本小节来实践:qps与cpu、内存、磁盘io、网络io之间的关系 获取数据 参考一元线性回归的获取方式 from flow import * from datetime import datetime start_time = date 阅读全文
posted @ 2025-08-20 14:49 it排球君 阅读(140) 评论(0) 推荐(0)
摘要: 前言 之前讨论了一元线性回归,主要是qps与cpu的关系,但是现实中cpu只是系统指标的一部分,还有内存、io、网络等等,本小节就来讨论一下,通过多个系统参数对于qps的影响 算法 多元线性回归,就是讨论多个自变量对结果造成的影响 开始探索 老规矩,先来看一看怎么快速使用多元线性回归 1. scik 阅读全文
posted @ 2025-08-18 10:15 it排球君 阅读(222) 评论(0) 推荐(1)
摘要: 前言 书接上文,上一小节简单介绍了一元回归的基本原理、使用方式,作为运维,实践才是最重要的,那本小节就来实践一下我们之前的话题:探索cpu与qps的关系 获取数据 1. cpu数据 由于我的监控数据在阿里云的prometheus上面,并且阿里云也提供了一种查询方式,通过本地搭建的prometheus 阅读全文
posted @ 2025-08-14 10:40 it排球君 阅读(188) 评论(0) 推荐(1)
摘要: 前言 在运维职业生涯中,qps是一个绕不开的话题,leader经常在问,我们的qps是多少,系统能不能抗住啊???老板在问,我们的qps是多少,有没有降本的空间啊???面试的时候,面试官问,你们的qps是多少啊。。。。 如果我能预测qps与系统压力之间的关系,那一定很不错吧?关于leader,我们的 阅读全文
posted @ 2025-08-11 15:07 it排球君 阅读(312) 评论(0) 推荐(0)
摘要: 前言 在前文中,prometheus基本的用法都简单的描述一遍,最后本文来讨论一下prometheus高可用的问题 环境准备 组件 版本 操作系统 Ubuntu 22.04.4 LTS docker 24.0.7 thanos 0.36.1 1. 双prometheus架构 2个prometheus 阅读全文
posted @ 2025-08-01 10:09 it排球君 阅读(299) 评论(0) 推荐(0)
摘要: 前言 本文详细讨论一下thanos-sidecar 环境准备 组件 版本 操作系统 Ubuntu 22.04.4 LTS docker 24.0.7 thanos 0.36.1 thanos概述 thanos主要有4个组件 receive:独立部署,提供了数据写入的api,prometheus通过这 阅读全文
posted @ 2025-07-30 11:24 it排球君 阅读(232) 评论(0) 推荐(0)
摘要: 前言 书接上文,目前环境已经做好了水平拆分,是这个样子的 本文使用thanos对这些prometheus进行数据汇聚,并且详细讨论一下thanos 环境准备 组件 版本 操作系统 Ubuntu 22.04.4 LTS docker 24.0.7 thanos 0.36.1 thanos概述 than 阅读全文
posted @ 2025-07-24 10:47 it排球君 阅读(336) 评论(0) 推荐(0)
摘要: 前言 书接上文,经过之前的不懈努力,我们已经有了较为完善的监控系统与告警系统,而prometheus的工作模式就像一个单点,拉取数据回来之后存储在自己的磁盘上 当监控数据越来越多,那prometheus单点的压力就会变大,那本文就来讨论一下如何降低单点prometheus的压力 环境准备 组件 版本 阅读全文
posted @ 2025-07-21 10:16 it排球君 阅读(247) 评论(0) 推荐(0)
摘要: 前言 书接上文,prometheus默认是采取pull的方式获取数据,但是有些情况我们依然希望能够主动推数据给prometheus pushgateway就像是一个提供监控数据的静态节点,prometheus的采集方式依然是pull,只不过向pushgateway拉,然后自定义指标往pushgate 阅读全文
posted @ 2025-07-14 17:33 it排球君 阅读(45) 评论(0) 推荐(0)