摘要: 前面写过一篇业务中使用 telegraf 的文章。 https://www.cnblogs.com/xushengbin/p/17974981#_label3 当时的业务场景是:把kafka中存储的json数据,写入到influxdb中。 最近又对telegraf的能力做了什么了解。 增加了两个业务 阅读全文
posted @ 2024-04-18 17:03 耗子哥信徒 阅读(1) 评论(0) 推荐(0) 编辑
摘要: 目标 本文将讲述influxdb内存中都存了哪些数据? 什么情况下会导致内存占用暴增? 以及内存相关的配置。 我的influxdb配置 我的influxdb配置如下: /etc/influxdb/config.toml bolt-path = "/var/lib/influxdb/influxd.b 阅读全文
posted @ 2024-04-15 21:09 耗子哥信徒 阅读(28) 评论(0) 推荐(0) 编辑
摘要: 问题描述 2024-04-14T14:59:51Z E! [outputs.influxdb_v2] Failed to write metric to iot (will be dropped: 422 Unprocessable Entity): unprocessable entity: fa 阅读全文
posted @ 2024-04-15 16:56 耗子哥信徒 阅读(10) 评论(0) 推荐(0) 编辑
摘要: 一个 java web api,耗时 2s,但是db 300ms 就返回了,时间到底耗费在哪里呢。 当我最终定位下来,是因为db 返回了5M数据跨局域网传输大概需要 1s,导致的。 一行行跟踪源码,很耽误时间。 后来遇到了IDEA Profiler (IDEA IDE 自带的性能分析工具),简直太好 阅读全文
posted @ 2024-03-27 21:34 耗子哥信徒 阅读(86) 评论(0) 推荐(0) 编辑
摘要: 目标 把时序数据(如车辆指标)写入influxdb之后,我们想知道指标值是否异常(如累计里程 大于 1 亿)、新增数据量是否合理(如半个小时表中没有新增数据,大概率服务故障了) 方案概述 influxdb本身提供了 alert 功能,但是比较简陋。如不支持把报警消息发送到飞书。 因此我就尝试用Gra 阅读全文
posted @ 2024-03-27 14:15 耗子哥信徒 阅读(8) 评论(0) 推荐(0) 编辑
摘要: 遇到这个报错,是很烦的。折腾半天有时候都无法解决。 最佳解决办法: 删除本地的.idea目录 然后 idea 中关闭该项目,然后重新导入,就会自动生成.idea目录,一切正常了。 阅读全文
posted @ 2024-03-25 22:27 耗子哥信徒 阅读(95) 评论(0) 推荐(0) 编辑
摘要: 问题描述 influxdb官方有一个库(实验版本),说的是可以支持空间索引(如查询某一个框内的轨迹点)。但是我经常测试,查询慢的不可思议。 我在论坛曾经反馈过这个问题,目前没找到答案。 解决方案 1、在 influxdb 表中增加 s2_cell_id字段,通过telegraf 给该字段赋值。 (见 阅读全文
posted @ 2024-03-22 14:01 耗子哥信徒 阅读(19) 评论(0) 推荐(0) 编辑
摘要: 问题描述 spring cloud架构下,微服务间很多是通过 feign进行调用的。 作为一家小公司,很多微服务在开发环境没有部署实例,这就导致,想在本地做开发调试,要花精力起很多依赖服务。耗时费力。 解决办法 1、利用 ssh 隧道,让办公网可以访问测试环境(阿里云、默认不开放端口)的微服务。 s 阅读全文
posted @ 2024-03-20 14:35 耗子哥信徒 阅读(2) 评论(0) 推荐(0) 编辑
摘要: https://www.youtube.com/watch?v=PPDffzAy86I 强烈推荐这个视频,kafka 的联合创始人录制的视频。 下面写写我看完后几点理解: HW(高水位)用来标记哪些消息可以被消费。避免未持久化的消息被消费到。 之所以要“避免未持久化的消息被消费到”,是因为遇到节点故 阅读全文
posted @ 2024-03-19 08:36 耗子哥信徒 阅读(7) 评论(0) 推荐(0) 编辑
摘要: 需求说明 物联网指标数据(车辆的轨迹、里程、速度等)存储在influxDB中。需要对指标查询服务的性能做压力测试。 背景 1、java service已经对influxDB查询 sql 做了封装,api 参数如下: { "deviceIds" : ["14146284645"], "startTim 阅读全文
posted @ 2024-03-14 16:51 耗子哥信徒 阅读(25) 评论(0) 推荐(0) 编辑