摘要： 一、IngressNginx概述 ### IngressNginx架构 ~~~ # 一般情况下：都是使用域名来访问服务的，不是用IP+端口号来访问服务的 ~~~ 用户一般都会写入一个域名访问服务，这个域名就会解析到前端的负载均衡上 ~~~ # 这个服务均衡： ~~~ 阿里云：SLB(aliyun负载 阅读全文

摘要： 一、安装Ingress ### Ingress安装说明 ~~~ 推荐使用：DaemonSet ~~~ # 条件允许：最好找几台专门的服务器进行配置ingress： ~~~ 这几台服务器制作Ingress，不做其它的使用 ~~~ 因为Ingress是整个集群的入口， ~~~ 可以让整个Ingress独 阅读全文

摘要： 附录一：服务发现：编译打包失败 ### 编译打包失败： ~~~ 使用spring-cloud-user这个项目当做服务发现检测服务发现应用； ~~~ 通过euraka的console自动发现，监控该JVM项目 ### 在启动一个容器；运行spring-cloud-user项目 [root@k8s-m 阅读全文

摘要： NO： Walter Savage Landor:strove with none,for none was worth my strife.Nature I loved and, next to Nature, Art:I warm'd both hands before the fire of 阅读全文

摘要： 一、JVM的dashboard配置 ### 下载dashboard模板Json文件 ~~~ 下载地址：https://grafana.com/grafana/dashboards/4701 ~~~ 下载Json文件：jvm-micrometer_rev9.json 二、配置grafana ### 配 阅读全文

摘要： 一、服务发现：实验配置 ### 服务发现说明 ~~~ 基于console去发现，自动监控JVM配置，启动2个euraka ~~~ 一个euraka当做服务注册中心 ~~~ 另一个euraka当做业务应用的另一个模块 ~~~ 通过euraka的console服务发现自动配置监控项 二、启动一个eure 阅读全文

摘要： 一、使用Micrometer.Prometheus监控JVM项目 ### 下载Java.Demo ~~~ 下载Java.Demo实验环境包 [root@k8s-master01 Jvm.Micrometer]# git clone https://github.com/gongchangwangpi 阅读全文

摘要： 一、通过Chrome访问配置 ### 通过Chrome访问验证euraka：http://192.168.1.11:18761/服务是否启动 ~~~ ——>这个spring Eureka：只是一个注册中心：把它当做一个spring-boot项目来监控 ~~~ 查看它的监控数据：http://192. 阅读全文

摘要： 一、Micrometer.Prometheus监控JVM概述 ### 应用本身的监控 ~~~ 使用JAVA语言写的应用，怎么实现使用Java内部的监控：队列信息，垃圾回收的监控等。 ### 怎么来监控Java应用： ~~~ Eureka：启动是不需要使用到任何辅助插件的，就可以直接启动。 ~~~ e 阅读全文

摘要： 一、自动发现配置：创建secret ### 配置Prometheus-additional.yaml配置文件 ~~~ 创建prometheus-additional配置文件 [root@k8s-master01 discovery]# cat prometheus-additional.yaml - 阅读全文

摘要： 一、创建ClusterRoleBinding查看Prometheus是否正确获取数据 ### 报错现象：解决failed to list *v1beta1.Ingress ~~~ 查看Prometheus日志是否有报错信息 [root@k8s-master01 discovery]# kubectl 阅读全文

摘要： 一、查看创建的job已经添加完成 ### 查看discovery是否生成 ~~~ ——>http://prom.test.com/——>status ~~~ ——>Service discovery:auto_discovery已经创建完成，但是没有匹配到任何的targets 二、匹配一个域名让其监 阅读全文

摘要： 一、查看微信告警信息 ### 查看微信告警配置是否生效 ### 通过企业微信接收告警信息 ~~~ ——>http://alert.test.com/——>status配置是否生效——>Config 二、Prometheus自定义告警模板 ### 微信告警模板 [root@k8s-master01 A 阅读全文

摘要： 一、Prometheus企业微信配置 ### 企业微信配置 ~~~ 地址：https://work.weixin.qq.com/wework_admin/frame#apps ~~~ 应用管理——>创建应用(负责被Prometheus调用,并发送告警信息) ~~~ ——>添加创建应用配置信息——>部 阅读全文

摘要： 一、Prometheus邮件告警 ### 查看alertmanger的po、secrets运行容器 ~~~ 在altermanager-secrets中配置邮件告警配置参数 [root@k8s-master01 Alarm]# kubectl get secrets -n monitoring NA 阅读全文

摘要： 一、在alert查看配置参数是否生效 ### 在alert查看配置参数是否生效 ~~~ # 查看邮件配置参数： ~~~ 查看altermanager更新配置是否获取成功：http://alert.test.com/——>Status ~~~ ——>Config:——>查看alert下的config参 阅读全文

摘要： 一、Alertmanager概述：Alertmanager架构说明 ### Alertmanager架构说明 ~~~ prometheus-rules.yaml这个配置文件配置了一些告警规则 ~~~ 当告警规则触发之后，就会在Firing就会显示告警状态，红色就是显示告警状态 ~~~ 出现告警之后， 阅读全文

摘要： NO： Walter Savage Landor:strove with none,for none was worth my strife.Nature I loved and, next to Nature, Art:I warm'd both hands before the fire of 阅读全文

摘要： 一、添加blackbox exporter的dashboard ### 模板一：下载blackbox exporter的dashboard模板Json ~~~ ——>https://grafana.com/grafana/dashboards/5345——>5345 ~~~ ——>Download 阅读全文

摘要： 附录一：targets获取不到值 ### 报错现象： targets获取不到值 ### 报错分析： ~~~ 黑盒监控是没有热更新的，而Prometheus是有热更新的， ~~~ 监控是需要重启一下，才能加载它的配置down是因为IPV6的原因造成的， ~~~ 需要更改为IPV4才会获取到数据 ~~~ 阅读全文

摘要： 一、黑盒监控 ### 黑盒监控和白盒监控模板 ~~~ # 白盒监控： ~~~ 监控一些内部的数据，topic的监控数据，Redis key的大小。 ~~~ 内部暴露的指标被称为白盒监控。#比较关注的是原因。 ~~~ # 黑盒监控： ~~~ 站在用户的角度看到的东西。网站不能打开，网站打开的比较慢。比 阅读全文

摘要： 一、黑盒监控的使用 ### 访问百度的HTTP探测的指标， ~~~ 该probe_success 指标指示是否探头得手。 ~~~ 添加debug=true参数将返回该探针的调试信息 ### 查看service的地址： [root@k8s-master01 blackbox]# kubectl get 阅读全文

摘要： 一、黑盒监控blackbox_exporter ### 概述说明 ~~~ # 使用blackbox-exporter来监控一些传统的网页 ~~~ https://github.com/prometheus/blackbox_exporter ~~~ https://github.com/promet 阅读全文

摘要： 附录一： ### 报错现象： ~~~ 报错现象：Prometheus监控不到数据 ~~~ 报错现象：http://prom.test.com——>Alerts——>Enable query history——>没有kafka数据 ### 报错分析： ~~~ # 查看kafka-exporter的po 阅读全文

摘要： 一、Prometheus监控说明：基于中间件和业务应用的监控机构 二、监控接口类型说明 ### 监控接口类型说明 ~~~ # 第一种： ~~~ 有metrics接口的应用：有的中间件是自带metrics接口的； ~~~ 基于云原生开发的就会暴露一个metrics的接口，它的数据就会通过metrics 阅读全文

摘要： 一、监控没有metrics接口的业务应用：以kafka为例 ### 创建一个kafka-exporter的deployment ~~~ 创建kafka-exporter的yaml文件 [root@k8s-master01 kafka-exporter]# vim kafka-exporter-dep 阅读全文

摘要： 一、通过Prometheus的UI查看是否监控到数据 ### 通过Prometheus的UI查看是否监控到数据 ~~~ 地址：http://prom.test.com/targets#job-monitoring%2fkafka-exporter%2f0 ~~~ 目前只有一个节点 ~~~ topic 阅读全文

摘要： 一、查看Prometheus是否获取etcd集群监控数据 ### 查看Prometheus是否获取etcd集群监控数据 ~~~ 通过Prometheus查看etcd节点是否获取到数据：http://prom.test.com/targets ~~~ ——>status——>targets——>查看— 阅读全文

摘要： 一、Prometheus监控说明 ### Prometheus监控说明 ~~~ 基于中间件和业务应用的监控机构 二、监控接口类型说明 ### 监控接口类型说明 ~~~ # 第一种： ~~~ 有metrics接口的应用：有的中间件是自带metrics接口的； ~~~ 基于云原生开发的就会暴露一个met 阅读全文

摘要： 一、监控有metrics接口的业务应用：以etcd为例 ### 监控etcd ~~~ 查看etcd的端口：2379 [root@k8s-master01 etcd]# netstat -lntp | grep etcd tcp 0 0 192.168.1.11:2379 0.0.0.0:* LIST 阅读全文

摘要： 一、告警处理：ControllerManager告警解决方案 ### 告警处理方案：配置以下2点，即可解决 ~~~ 第一点：把监听地址更改为0.0.0.0 ~~~ 第二点：把servicemonitor对应的service给创建上 二、打开ControllerManager的监听地址为0.0.0.0 阅读全文

摘要： NO： Walter Savage Landor:strove with none,for none was worth my strife.Nature I loved and, next to Nature, Art:I warm'd both hands before the fire of 阅读全文

摘要： 一、Prometheus下ControllerManager告警处理 ### Prometheus告警参数说明： ~~~ Watchdog：查看监控是否是正常的；这个监控不想收可以关掉，也可以设置为按天发送状态报告 ~~~ CPUThrottlingHigh：CPU截流过高：可能这个CPU的Linu 阅读全文

摘要： NO： Walter Savage Landor:strove with none,for none was worth my strife.Nature I loved and, next to Nature, Art:I warm'd both hands before the fire of 阅读全文

摘要： 一、排序 ### 函数： ~~~ sort：正序 ~~~ sort_desc：倒序 二、正序： ### 函数：sort ~~~ 表达式：sort(node_memory_MemFree_bytes) ~~~ 输出结果：输出结果为顺序排序 三、倒序： ### 函数：sort_desc ~~~ 表达式： 阅读全文

摘要： 一、对label进行处理 ### 2个label合并，赋值成一个新的label ~~~ # 函数：label_join ~~~ 表达式：label_join(node_filesystem_files_free, "new_label","","instance","mountpoint")：把in 阅读全文

摘要： 一、去除小数点 ### 函数： ~~~ Ceil（）：四舍五入，向上取最接近的整数；比如2.79，向上取就是3 ~~~ floor（）：四舍五入：向下取最接近的整数，比如2.79，向下取就是2 二、去除小数点，向上取四舍五入 ### 函数：Ceil（） ~~~ 表达式：ceil(predict_li 阅读全文

摘要： 一、差值： ### 函数 ~~~ 函数：Delta：差值 二、查看和8h之前的差值是多少 ### 函数：delta ~~~ 表达式：delta(node_memory_MemFree_bytes[8h]) ~~~ 输出结果：和8小时之前的差值 Walter Savage Landor:strove 阅读全文

摘要： 一、absent：判断监控指标是否正确 ### 查找k8s-master01内存监控值 ~~~ 表达式：node_memory_MemFree_bytes{instance="k8s-master01"} ~~~ 输出结果：254648320 二、absent返回值是什么： ### 函数：absen 阅读全文

摘要： 一、predict_linear：预测性告警：查询预测性告警： ### 表达式： ~~~ node_filesystem_files_free：宿主机上一些分区的剩余空间 二、查找根节点的分区空间 ### 表达式： ~~~ node_filesystem_files_free{mountpoint= 阅读全文